ИИ DolphinGemma от Google расшифровывает язык дельфинов: модель с открытым исходным кодом для помощи в исследованиях коммуникации китообразных

Google представила DolphinGemma, модель искусственного интеллекта, разработанную для расшифровки коммуникации дельфинов, созданную в сотрудничестве с Технологическим институтом Джорджии и проектом Wild Dolphin Project (WDP). DolphinGemma использует технологию моделей Gemma от Google, анализируя вокальные последовательности дельфинов и предсказывая последующие звуки, подобно автозаполнению для щелчков, свистов и импульсов дельфинов. Центральным элементом системы является токенизатор SoundStream, который разделяет звуки дельфинов на акустические единицы, обрабатываемые пользовательской архитектурой для выявления закономерностей. Модель была обучена с использованием данных, собранных WDP с 1985 года, изучающих атлантических пятнистых дельфинов (Stenella frontalis) на Багамах. Эти данные выявили корреляции между определенными звуками и поведением, такими как фирменные свистки, используемые матерями и детенышами, прерывистые «визги», связанные с напряжением, и «жужжащие» щелчки, наблюдаемые во время ухаживания. DolphinGemma распознает и воспроизводит правдоподобные вокальные последовательности. С 400 миллионами параметров он оптимизирован для работы на устройствах Google Pixel, используемых исследователями в полевых условиях. WDP изучает общение с дельфинами с помощью системы CHAT (Cetacean Hearing Augmentation Telemetry), подводного компьютера, предназначенного для введения общего словаря на основе синтетических свистков, связанных с такими объектами, как саргассум или шарфы. Цель состоит в том, чтобы установить символическое взаимодействие, если дельфины имитируют искусственные свистки для запроса объектов. CHAT, изначально работавший на Pixel 6, будет обновлен до Pixel 9, что позволит использовать одновременные модели глубокого обучения и алгоритмы сопоставления с образцом. DolphinGemma можно использовать с CHAT для прогнозирования попыток имитации, повышая эффективность взаимодействия. Google планирует выпустить DolphinGemma как модель с открытым исходным кодом летом 2025 года, адаптируемую к другим видам, таким как афалины. Цель состоит в том, чтобы ускорить научные открытия, позволяя исследователям анализировать акустические наборы данных и вносить вклад в понимание морских млекопитающих.