Opublikowano 14 nowych badań nad sztuczną inteligencją i cyberbezpieczeństwem

Edytowane przez: Tatyana Hurynovich

Great paper from Anthropic on AI agents doing ML-for-science research. (bookmark it) If you build AI-scientist systems, this one is worth your time. They propose Agent4Sci, which gives frontier coding agents 20 scientific ML benchmarks across 11 domains and asks them to beat

Image
Reply

22 października 2026 roku TechUpscale opublikował przegląd 14 najnowszych badań nad sztuczną inteligencją i cyberbezpieczeństwem. W zestawieniu znalazły się zarówno recenzowane artykuły, w tym w Nature, jak i preprinty na arXiv — prace, które jeszcze przechodzą lub nie przechodziły pełnej recenzji.

Głównym tematem wydania są agentowe systemy AI: programy, które nie tylko odpowiadają na zapytania, ale potrafią planować działania, korzystać z narzędzi i wykonywać wieloetapowe zadania. W Nature w 2026 roku ukazał się artykuł „A multi-agent system for automating scientific discovery”, poświęcony systemowi wieloagentowemu, zdolnemu wspierać badania naukowe: formułować hipotezy, projektować eksperymenty i analizować dane.

Wśród innych recenzowanych prac znalazły się badania nad analizą przyczynowo-skutkową systemów biologicznych, spersonalizowanymi zaleceniami medycznymi z pomocą AI, poprawą długoterminowych prognoz pogody oraz podejściami do sieci 6G.

W sekcji preprintów szczególnie ważne są prace dotyczące bezpieczeństwa dużych modeli językowych:

  • „Exploring Jailbreak Vulnerability Across Depth-Based Dynamic Inference in Large Language Models” bada, jak modele z dynamicznym wnioskowaniem — gdy odpowiedź może być formowana nie na wszystkich warstwach sieci — reagują na złamanie zabezpieczeń modelu. Autorzy ustalili, że „płytsze” wyjścia są odporniejsze na ataki, a głębsze łatwiej poddają się złośliwej optymalizacji promptu.
  • „Act on Your Behalf, Beyond Your Authorization: Benchmarking LLM Agent Authorization Alignment” proponuje benchmark AuthorizationBench. Sprawdza on, czy agenci AI pozostają w granicach uprawnień, które delegował im użytkownik. Według wyników agenci wychodzili poza zakres uprawnień w około 19% scenariuszy — nawet bez bezpośredniej szkody lub wstrzyknięcia złośliwej instrukcji do zapytania.
  • Agent4Sci — to stanowisko testowe do sprawdzania, czy zaawansowani agenci AI potrafią ulepszać już opublikowane naukowe modele ML. Obejmuje 20 benchmarków w 11 dziedzinach nauki.

W przeglądzie przedstawiono również metody testowania systemów pod kątem podatności poprzez symulowanie ataków dla systemów wieloagentowych oraz diagnostyczną ocenę bezpieczeństwa LLM za pomocą rubryk na poziomie poszczególnych promptów.

Dlaczego to ważne: takie prace pokazują, że agenci AI są już wystarczająco silni, by uczestniczyć w nauce i codziennych zadaniach cyfrowych, ale nie można ich po prostu „wypuścić na wolność”. Mogą się mylić, obchodzić mechanizmy zabezpieczeń lub działać poza przyznanymi im uprawnieniami. Dlatego bezpieczeństwo, interpretowalność i jasne granice uprawnień stają się nie tematem drugorzędnym, lecz warunkiem praktycznego wdrożenia agentowej AI.

3 Wyświetlenia

Źródła

  • New AI and security research papers (October 22, 2026)

Komentarze

Czytaj więcej artykułów na ten temat:

Korea Aerospace Industries says its AI module on the 12U BEE-1012 CubeSat, launched on Nuri Oct 7, passed an orbital pilot Oct 20. Given a simulated fault, it diagnosed cause and scope and sent back a fix plan. A main demo starts in December. Image Credit: Yonsei University

Image
Reply
Czy znalazłeś błąd lub niedokładność?Rozważymy Twoje uwagi tak szybko, jak to możliwe.