DolphinGemma AI od Google dekoduje język delfinów: Model open source pomoże w badaniach nad komunikacją waleni

Google wprowadził DolphinGemma, model AI zaprojektowany do dekodowania komunikacji delfinów, opracowany we współpracy z Georgia Institute of Technology i Wild Dolphin Project (WDP). DolphinGemma wykorzystuje technologię stojącą za modelami Gemma Google, analizując sekwencje wokalne delfinów i przewidując kolejne dźwięki, podobnie jak autouzupełnianie kliknięć, gwizdów i pulsów delfinów. Centralnym elementem systemu jest tokenizer SoundStream, który dzieli dźwięki delfinów na jednostki akustyczne przetwarzane przez niestandardową architekturę w celu identyfikacji wzorców. Model został wytrenowany przy użyciu danych zebranych przez WDP od 1985 roku, badając delfiny plamiste (Stenella frontalis) na Bahamach. Dane te ujawniły korelacje między określonymi dźwiękami i zachowaniami, takimi jak charakterystyczne gwizdy używane przez matki i cielęta, sporadyczne „piski” związane z napięciem oraz „brzęczące” kliknięcia obserwowane podczas zalotów. DolphinGemma rozpoznaje i odtwarza prawdopodobne sekwencje wokalne. Dzięki 400 milionom parametrów jest zoptymalizowany do działania na urządzeniach Google Pixel używanych przez naukowców w terenie. WDP bada komunikację z delfinami za pośrednictwem systemu CHAT (Cetacean Hearing Augmentation Telemetry), podwodnego komputera zaprojektowanego do wprowadzenia wspólnego słownictwa opartego na syntetycznych gwizdach powiązanych z obiektami, takimi jak sargassum lub szaliki. Celem jest ustanowienie interakcji symbolicznej, jeśli delfiny naśladują sztuczne gwizdy, aby poprosić o przedmioty. CHAT, początkowo działający na Pixel 6, zostanie zaktualizowany do Pixel 9, umożliwiając jednoczesne działanie modeli głębokiego uczenia się i algorytmów dopasowywania wzorców. DolphinGemma może być używany z CHAT do przewidywania prób naśladowania, zwiększając skuteczność interakcji. Google planuje udostępnić DolphinGemma jako model open source latem 2025 roku, który można dostosować do innych gatunków, takich jak delfiny butlonose. Celem jest przyspieszenie odkryć naukowych, umożliwiając naukowcom analizowanie akustycznych zbiorów danych i przyczynianie się do zrozumienia ssaków morskich.