Prompt injection na robocie, Anthropic o samodoskonaleniu
Dziś AI wychodzi poza ekran: na briefingu pokazano, jak prompt injection uruchomił ruch robota bez zgody człowieka. Równolegle Anthropic mówi o bliskim samodoskonaleniu AI, a ataki z użyciem frameworka AI objęły ponad 200 organizacji.
39 wiadomości
8 min czytania
14 źródeł
Udostępnij przegląd
W skrócie
Prompt injection może sterować robotem Unitree; demonstracja ominęła zgodę człowieka.
ARTEX wykorzystano przeciw ponad 200 organizacjom w 14 krajach.
Błędy Langflow umożliwiają zdalne wykonanie kodu; poprawka: wersja 1.13.0.
Od 1 listopada nowe licencje Microsoftu nie obejmują startowych kredytów AI Builder.
Podczas briefingu Black Hat Europe zaprezentowano jailbreak robota Unitree Go2 połączonego z Gemini Robotics. Według relacji demonstracja wykorzystała kamerę i mikrofon robota, by dotrzeć do agenta i uruchomić ruch bez zgody człowieka.
Dlaczego to ważne Pokazuje, że prompt injection może przenieść atak z oprogramowania na działania w świecie fizycznym.
W dokumentach związanych z IPO Anthropic napisało, że rekurencyjne samodoskonalenie może stać się możliwe w najbliższym czasie. Chodzi o systemy AI, które same się ulepszają.
Dlaczego to ważne To ocena samej firmy dotycząca potencjalnie istotnego wzrostu możliwości AI.
Chińscy hakerzy wykorzystali ARTEX, open source’owy framework do testów penetracyjnych z wieloma agentami AI, w atakach na ponad 200 organizacji. Ofiary znajdowały się w 14 krajach.
Dlaczego to ważne Raport pokazuje, że narzędzia AI są już wykorzystywane w cyberatakach na dużą skalę.
Dwie krytyczne luki w Langflow pozwalają zdalnym napastnikom bez uwierzytelnienia ominąć logowanie lub uruchomić dowolny kod na serwerach. Problem dotyczy wersji od 1.0.0 do 1.12.8; wskazana poprawka jest dostępna w wersji 1.13.0.
Dlaczego to ważne Luki w narzędziu do budowania agentów AI i workflowów mogą narazić serwery na zdalne ataki.
Pando to nowy backend Git zaprojektowany dla monorepo OpenAI, który nie wymaga zmiany sposobu korzystania z Git przez inżynierów ani agentów. Według opisu skraca opóźnienie pushowania o około 80% i obsługuje dziennie niemal petabajt danych Git.
Dlaczego to ważne To konkretny projekt infrastruktury do skalowania Git wraz ze wzrostem wykorzystania agentów.
43874387 polubień
325325 udostępnień
Czytaj w x.com →
Open source na GitHubie
Repozytoria AI, nowe wersje i narzędzia dla agentów, które zyskują popularność.
Lightpanda to przeglądarka headless, napisana od podstaw w Zig z myślą o agentach AI i automatyzacji. Według benchmarków zużywa 16 razy mniej pamięci i działa 9 razy szybciej niż Chromium.
Dlaczego to ważne Może ograniczyć zużycie zasobów w infrastrukturze obsługującej agentów AI i automatyzację.
Handy to bezpłatna, open source’owa i rozszerzalna aplikacja do zamiany mowy na tekst, działająca całkowicie offline. Pozwala dyktować tekst w dowolnym polu, bez wysyłania danych do chmury.
Dlaczego to ważne Sprawdzi się do rozpoznawania mowy na urządzeniu, ale jest aplikacją dla użytkowników, a nie platformą AI.
Kornia to biblioteka do widzenia komputerowego, obejmująca algorytmy przetwarzania obrazów i geometrii. Zbudowana na PyTorch, obsługuje przekształcenia wsadowe, autod różniczkowanie i akcelerację GPU.
Dlaczego to ważne Może wspierać zespoły budujące przepływy pracy AI związane z widzeniem komputerowym.
Skein oferuje orkiestrację rojów w trybie fail-closed, z pracą zabezpieczoną epokami i odrzucaniem spóźnionych wyników. Projekt koncentruje się na agentach AI, bezpieczeństwie i orkiestracji przepływów pracy.
Dlaczego to ważne Zespoły rozwijające roje agentów zyskują mechanizmy orkiestracji i kontroli bezpieczeństwa.
Ollama v0.40.14 stosuje limit tokenów wyjściowych modeli Claude przy uruchamianiu przez Claude Code, zamiast domyślnego limitu 128k dla modeli chmurowych. Wydanie naprawia też skompresowane odpowiedzi z chmurowego wyszukiwania w sieci i zachowuje domyślne ustawienia samplerów dla endpointów zgodnych z OpenAI.
Dlaczego to ważne Aktualizacja zmienia limity modeli i zachowanie API w środowisku uruchomieniowym modeli lokalnych i chmurowych.
Czytaj w github.com →
Modele i publikacje
Nowe otwarte modele z Hugging Face i omawiane publikacje naukowe.
Nowe modele. Oznaczenie pokazuje, czy model działa na jednym NVIDIA DGX Spark (128 GB).
Rozwój agentów obsługujących komputer ograniczają skąpe dane o interakcjach, słaba informacja zwrotna w kolejnych iteracjach oraz podejścia rekurencyjne oparte na doświadczeniach generowanych przez same modele. CUA-Master wprowadza zagnieżdżony, rekurencyjny schemat doskonalenia z dwiema pętlami, który ma rozwiązać te problemy.
Dlaczego to ważne Zaproponowany schemat może pomóc zespołom rozwijać agentów obsługujących komputer.
Autorzy argumentują, że agentów osobistych należy oceniać pod kątem tego, jak dobrze pomagają ludziom realizować cele przy mniejszej potrzebie rutynowego nadzoru. Proponują agentów działających w sposób ciągły, przy czym użytkownicy zachowują kontrolę nad decyzjami o istotnych konsekwencjach.
Dlaczego to ważne To podejście może pomóc firmom projektować agentów, którzy wspierają użytkowników, nie odbierając im kontroli.
Autorzy przedstawiają CrossSWE, benchmark dla agentów kodujących, którzy pracują z zależnymi od siebie repozytoriami. Ocenia on między innymi rozumowanie o zależnościach, propagowanie zmian i spójność interfejsów.
Dlaczego to ważne Benchmark rozszerza ocenę agentów kodujących o zadania obejmujące wiele repozytoriów.
66 głosów
Czytaj w huggingface.co →
Wiadomości z branży
Produkty, pieniądze i regulacje, które zmieniają wykorzystanie AI w firmach.
Chief People Officer Manulife opisał, jak pracownicy otrzymują narzędzia AI od pierwszego dnia pracy, wraz ze szkoleniami i zasadami zarządzania. Jego relacja pokazuje, jak duży klient Microsoftu podchodzi do organizacyjnej strony wdrażania Copilot.
Dlaczego to ważne Wdrożenie w dużej firmie ubezpieczeniowej pokazuje praktyczny wymiar korzystania z AI w całej organizacji.
Od 1 listopada 2026 Microsoft przestanie dołączać kredyty AI Builder do nowych i odnawianych licencji Power Platform oraz Dynamics 365. Funkcje AI Builder będą nadal dostępne za pośrednictwem Copilot Credits.
Dlaczego to ważne Zmiana może wpłynąć na koszty organizacji korzystających z narzędzi AI Microsoftu.
OpenAI utworzyło stanowisko Senior Counselor for National Security Modernization dla byłego sekretarza armii Dana Driscolla. Zatrudnienie następuje w czasie, gdy wojsko chce szerzej wykorzystywać AI.
Dlaczego to ważne To sygnał zacieśniania współpracy między firmą AI a instytucjami bezpieczeństwa narodowego.
OpenAI ogłosiło wewnętrzne narzędzie do oceny tego, jak AI radzi sobie z zadaniami takimi jak zakupy i planowanie posiłków. Firma udostępniła też wyniki badań nad własnymi modelami.
Dlaczego to ważne Ocena dotyczy praktycznych umiejętności ważnych dla asystentów AI.
Anthropic zawarło umowy z firmami technologicznymi, byłymi kopalniami kryptowalut i innymi podmiotami, by pozyskać moc obliczeniową. Zasoby mają wesprzeć rozwój AI firmy.
Dlaczego to ważne Dostęp do mocy obliczeniowej wpływa na możliwości rozwijania AI przez firmę.
Program OpenAI Grid Protectors Program będzie współpracować z dostawcami energii przy przyszłych kampusach obliczeniowych. Ma wspierać niezawodność sieci i chronić odbiorców przed wzrostem kosztów energii.
Dlaczego to ważne Program dotyczy wpływu rozbudowy infrastruktury obliczeniowej AI na sieci energetyczne i lokalne społeczności.
Czytaj w openai.com →
Z serwisu X
Najczęściej udostępniane wpisy laboratoriów, badaczy i twórców.
Duże badanie replikacyjne sprawdza starsze ustalenia na nowszych modelach, zakładając, że dotychczasowe wnioski mogą być nieaktualne. Wpis podaje, że nowsze modele rzadziej halucynują i stereotypizują, ale nadal są uległe i wykazują lewicowe nachylenie.
Dlaczego to ważne Oceny zachowania modeli mogą szybko się dezaktualizować, choć wpis nie podaje szczegółów badania.
NVIDIA AI Cluster Runtime łączy NVIDIA Dynamo z wymaganymi komponentami infrastruktury i przetestowanymi wersjami. Opis pokazuje konfigurację, wdrożenie i walidację środowiska dla klastrów GPU w Kubernetes.
Dlaczego to ważne Zespoły uruchamiające AI w Kubernetes dostają narzędzia do wdrożenia i sprawdzenia konfiguracji.
OpenAI informuje, że LifeVal to benchmark opracowany na podstawie opinii tysięcy użytkowników ChatGPT o zadaniach, w których przydałaby im się pomoc osobistego asystenta. Wykorzystano go do pomiaru i poprawy wyników modeli m.in. w szukaniu opieki nad dziećmi, korzystaniu z usług publicznych i zarządzaniu finansami.
Dlaczego to ważne Benchmark oparty na opiniach użytkowników poszerza ocenę modeli o zadania wykraczające poza standardowe testy.
Przepisy symulacyjne NVIDIA Cosmos potrafią zmienić przejazd za dnia w scenę deszczową nocą, zachowując układ drogi i trajektorie pojazdów. Mają pomagać w generowaniu danych i testowaniu polityk dla pojazdów autonomicznych, robotów i zastosowań chirurgicznych.
Dlaczego to ważne Przepisy symulacyjne mogą wspierać testowanie i generowanie danych dla systemów AI działających w świecie fizycznym.
Na podstawie krótkiego promptu Mistral Large 4 napisał solver pola samouzgodnionego z chemii kwantowej, zweryfikował jego wyniki i przygotował wizualizację 3D. Wpis podaje, że model sam wybrał też sposób podziału cząsteczki i orbitale do pokazania.
Dlaczego to ważne To konkretny przykład modelu łączącego programowanie i wizualizację naukową przy niewielkiej liczbie wskazówek.
Zestawienie wskazuje agentom bezpłatne narzędzia do produkcji wideo, m.in. Remotion, Blender, faster-whisper, Chatterbox, GSAP i Blender MCP. Obejmują one instrukcje, sceny 3D, napisy, lektora, animację i renderowanie.
Dlaczego to ważne To praktyczna mapa komponentów open source do budowy programowalnych procesów tworzenia wideo z AI.
Nowy wykład przekonuje, że twórcy modeli open source powinni skupić się na znacznym obniżeniu kosztów inferencji dla wyspecjalizowanych, powtarzalnych zadań, zamiast rywalizować z laboratoriami frontier w obszarze ogólnych agentów. Wskazuje też na rozdrobnienie rynku modeli open source jako jedno z wyzwań.
Dlaczego to ważne Koszty inferencji i specjalizacja wpływają na opłacalność wdrożeń modeli open source.
Przewodnik proponuje zacząć od analizy powierzchni ataku i modelowania zagrożeń, w tym OWASP Top 10 for LLMs, STRIDE for AI oraz problemu confused deputy. Jako ćwiczenie sugeruje analizę agenta, który czyta e-maile i zapisuje dane w CRM, oraz wskazanie ścieżek injection i eksfiltracji danych.
Dlaczego to ważne Konkretne pojęcia z bezpieczeństwa i ćwiczenie z agentem mogą pomóc zespołom przełożyć analizę zagrożeń na praktykę.
GLOW-FM to artykuł naukowy o wydajnej poprawie jakości zdjęć wykonanych przy słabym oświetleniu, z użyciem one-step latent flow matching. Wpis wskazuje, że to publikacja badawcza, i podaje jej listing w Hugging Face Papers.
Dlaczego to ważne Metoda może zainteresować zespoły pracujące nad poprawą jakości obrazów.
Wpis poleca gotowe repozytoria łączące Claude Code z procesami pracy w Obsidianie, zamiast budować second brain od zera. Umożliwiają m.in. dodawanie tekstu do powiązanych notatek, zapisywanie decyzji i zadań, odtwarzanie stanu sesji oraz prowadzenie wiki z narzędziami query i lint.
Dlaczego to ważne To zestaw narzędzi do zarządzania wiedzą w procesach pracy z coding agentami.
Zagrożenia dla bezpieczeństwa generatywnej AI dotyczą promptów, modeli i danych. Obejmują prompt injection i wycieki, ekstrakcję i zatruwanie modeli oraz ujawnienie danych treningowych.
Dlaczego to ważne To zwięzły przegląd głównych zagrożeń dla systemów generatywnej AI.
Artykuł opisuje ryzyko prompt injection dla twórców stron, którzy dodają funkcje AI. Przykładem jest narzędzie wsparcia, które czyta zgłoszenia i tworzy ich podsumowania.
Dlaczego to ważne Tekst przetwarzany przez funkcję AI może stać się źródłem podatności.
W ankiecie wśród ponad 250 liderów i praktyków ds. bezpieczeństwa 40% badanych zadeklarowało codzienne użycie AI, a 56% jej testowanie. Tylko 4% nie planuje jej wdrażać; artykuł pyta też, czy centra operacji bezpieczeństwa są gotowe na agentów AI.
Dlaczego to ważne Ankieta pokazuje poziom adopcji AI w zespołach bezpieczeństwa i podkreśla potrzebę oceny gotowości przed wdrożeniem.
W październikowym przeglądzie bezpieczeństwa za 2026 rok Adversa AI opisała techniki prompt injection. Doprowadziły one do wycieku danych osobowych przez agentów AI oraz uruchamiania przez nie nieautoryzowanego kodu.
Dlaczego to ważne Opisane przypadki pokazują, że prompt injection może prowadzić do ujawnienia danych i nieautoryzowanego wykonania kodu przez agentów AI.
Czytaj w aigovernance.com →
Wiadomości wybiera i streszcza automatyczny system, a tłumaczy je model AI. Człowiek nie sprawdza każdego wydania. Zanim podejmiesz decyzję na podstawie wiadomości, sprawdź jej źródło.