Modele fizyczne

Robotyczna rentgenowskopia: AI z MIT widzi przez ściany dzięki sygnałom Wi-Fi

Ściany z kartonu, plastiku czy płyt gipsowo-kartonowych przestały być barierą dla robotycznego wzroku. Zespół z MIT Media Lab, dowodzony przez Fadela Adiba, dokonał jakościowego skoku w technologii mWave, zamieniając chaotyczne odbicia radiowe w precyzyjne mapy 3D.

Problem martwych punktów

Tradycyjne systemy oparte na falach milimetrowych (mmWave) borykały się z fizycznym ograniczeniem: sygnały te odbijają się w sposób lustrzany. Jeśli fala uderzy w powierzchnię pod kątem, który nie kieruje jej z powrotem do czujnika, obiekt staje się dla robota niewidzialny. Wynikiem były rwane, nieczytelne chmury punktów, które przypominały bardziej cyfrowy szum niż rzeczywiste przedmioty.

Fizyka ma swoje granice, AI – nie.

Generatywne uzupełnianie rzeczywistości

Badacze z MIT porzucili próby interpretacji danych wyłącznie za pomocą klasycznych wzorów fizycznych. Zamiast tego zaprzęgli do pracy specjalistyczne modele generatywne. AI działa tu jak konserwator zabytków, który na podstawie fragmentu naczynia potrafi odtworzyć całą wazę. System bierze niepełny skan obiektu i „dorysowuje” brakujące elementy geometryczne, opierając się na wyuczonych schematach kształtów.

Największym wyzwaniem był brak danych treningowych. Nie istnieją gigantyczne zbiory skanów mmWave, które mogłyby „nakarmić” model tak, jak teksty „karmią” GPT-4. Naukowcy obeszli to sprytnym sposobem: zmodyfikowali standardowe bazy danych wizji komputerowej tak, aby symulowały właściwości odbić radiowych. To asymetryczne podejście do treningu pozwoliło uzyskać wysoką precyzję bez konieczności budowania baz danych od zera.

RISE: Pokój jako zbiór danych

System RISE idzie o krok dalej niż proste mapowanie przedmiotów. Wykorzystuje pojedynczy, stacjonarny radar do śledzenia ruchu ludzi w przestrzeni. Odbicia sygnałów od przemieszczających się osób służą jako „sondy” oświetlające resztę pomieszczenia, w tym ukryte meble i strukturę ścian.

  • Weryfikacja przesyłek: Roboty magazynowe mogą sprawdzić zawartość zamkniętego pudełka przed wysyłką.
  • Bezpieczeństwo w Smart Home: System precyzyjnie lokalizuje domowników, nie naruszając ich prywatności obrazem z kamer.
  • Przemysł 4.0: Manipulatory mogą chwytać obiekty całkowicie zasłonięte przez inne przedmioty.

Sukces MIT to rzadki przypadek, gdzie generatywna AI nie służy do tworzenia zmyślonych treści, ale do odzyskiwania prawdy o fizycznym świecie, która do tej pory była ukryta przed sensorem.

Krytycznym okiem

Choć technologia imponuje, pozostają pytania o skalowalność w środowiskach o wysokim poziomie zakłóceń elektromagnetycznych. Czy system zachowa precyzję w hali fabrycznej pełnej działających maszyn i setek nadajników? Na razie MIT udowodniło, że bariery, które uznawaliśmy za nieprzepuszczalne, są w istocie tylko kwestią odpowiedniego algorytmu.