Naukowcy opracowali AEROBAT - pierwszy system multi-agentowy zdolny do całkowitej automatyzacji behawioralnych badań naukowych nad agentami AI. System otrzymuje od użytkownika opis docelowego zachowania, a następnie samodzielnie wykonuje całą procedurę badawczą: od generowania hipotez, przez projektowanie i przeprowadzanie eksperymentów kontrolnych, aż do analizy wyników i sporządzania raportów.
Skala eksperymentów była imponująca. Na 12 wybranych zachowaniach AEROBAT wygenerował i przetestował 79 hipotez, przy czym zaprojektował 1240 eksperymentów kontrolnych i wykonał łącznie 23512 rund symulacji. Z wszystkich testowanych hipotez, dla 26 znaleziono umiarkowane do silne dowody statystyczne - część z nich to całkowicie nowe odkrycia.
To przełom dla badań nad sztuczną inteligencją. Tradycyjne behawioralne badania naukowe nad agentami AI są czasochłonne i wymagają ręcznej pracy. AEROBAT wykazuje, że automatyzacja może radykalnie przyspieszyć ten proces, a jednocześnie utrzymać naukową ścisłość. System nie zastępuje ręcznych badań, ale je uzupełnia i rozszerza ich zasięg, umożliwiając zbadanie znacznie większej liczby hipotez i scenariuszy niż byłoby to możliwe przy tradycyjnych metodach.