Memories.ai z 8 milionami dolarów od Samsunga i Susa Ventures na rewolucję w analizie wideo

W obliczu rosnącej ilości danych wizualnych, konwencjonalne narzędzia AI często napotykają ograniczenia w kontekstowej analizie materiałów wideo, zwłaszcza gdy mowa o tysiącach godzin nagrań z wielu źródeł. Wyzwanie to dotyka zarówno firmy ochroniarskie, pragnące efektywnie przeszukiwać monitoring, jak i działy marketingu, analizujące kampanie wideo czy sesje produktowe.

Na tym tle wyróżnia się Memories.ai, startup założony przez dr. Shawna Shena i Enmina (Bena) Zhou, którzy wcześniej pracowali w Meta (Shen jako badacz w Reality Labs, Zhou jako inżynier uczenia maszynowego). Ich platforma ma ambicję przetwarzać do 10 milionów godzin wideo, oferując kontekstową warstwę danych, wzbogaconą o indeksowanie z możliwością przeszukiwania, tagowanie, segmentację oraz agregację.

„Wiodące firmy AI, takie jak Google, OpenAI i Meta, koncentrują się na modelach end-to-end. Chociaż są potężne, często mają ograniczenia w zakresie rozumienia kontekstu wideo dłuższego niż jedna czy dwie godziny” – zauważa Shen, podkreślając, że ludzka pamięć wizualna działa inaczej – „inspirując się tym, stworzyliśmy rozwiązanie do lepszego rozumienia wideo w kontekście długich okresów”.

Potencjał tej wizji został doceniony przez inwestorów. Memories.ai pozyskało 8 milionów dolarów w rundzie zalążkowej, przewyższając początkowy cel 4 milionów dolarów. Rundę prowadziła firma Susa Ventures, a wśród uczestników znalazły się także Samsung Next, Fusion Fund, Crane Ventures, Seedcamp oraz Creator Ventures.

Misha Gordon-Rowe, partner w Susa Ventures, komplementuje Shena jako „wysoce technicznego założyciela, obsesyjnie dążącego do przesuwania granic rozumienia i inteligencji wideo”. Podkreśla również lukę na rynku w zakresie długokontekstowej inteligencji wizualnej, którą ma wypełnić Memories.ai. Sam Campbell, partner w Samsung Next, zwraca uwagę na możliwość przetwarzania danych na urządzeniu, co jest kluczowe dla zastosowań o wysokim znaczeniu dla prywatności, takich jak kamery bezpieczeństwa. „To otwiera drogę do lepszych aplikacji bezpieczeństwa dla osób obawiających się o prywatność danych w chmurze” – dodaje.

Memories.ai opiera się na własnym stosie technologicznym. Materiały wideo są najpierw oczyszczane z szumów, a następnie kompresowane w celu zachowania tylko kluczowych danych. Kolejna warstwa odpowiada za indeksowanie, umożliwiając przeszukiwanie za pomocą zapytań w języku naturalnym, segmentację i tagowanie. Ostatnia warstwa agreguje dane, wspierając tworzenie kompleksowych raportów.

Obecnie startup koncentruje się na dwóch kluczowych sektorach: marketingu i bezpieczeństwa. Firmy marketingowe mogą wykorzystywać narzędzia Memories.ai do identyfikowania trendów związanych z ich markami w mediach społecznościowych oraz do tworzenia nowych treści wideo. W sektorze bezpieczeństwa platforma pomaga analizować nagrania z monitoringu, rozpoznając potencjalnie niebezpieczne wzorce zachowań.

W przyszłości Memories.ai planuje uprościć proces synchronizacji treści, umożliwiając klientom zadawanie złożonych pytań, takich jak „Pokaż wszystkich, z którymi przeprowadziłem wywiad w zeszłym tygodniu”. Shen wizjonuje asystenta AI, który będzie mógł czerpać kontekst z życia użytkownika z jego zdjęć czy inteligentnych okularów, a także technologię wspomagającą szkolenie robotów humanoidalnych czy autonomicznych pojazdów.

Pomimo konkurencji ze strony startupów takich jak mem0 i Letta, czy gigantów jak TwelveLabs i Google, Shen uważa, że uniwersalne podejście jego firmy pozwala na integrację z różnymi modelami wideo, dając Memories.ai przewagę konkurencyjną. Środki z rundy finansowania zostaną przeznaczone na powiększenie zespołu (obecnie 15 osób) i dalszy rozwój platformy, szczególnie w zakresie możliwości wyszukiwania.