METR otrzymało dostęp do wewnętrznych narzędzi Anthropic. Zakres audytu ma jednak granice
Anthropic udostępniło organizacji badawczej METR część swoich systemów i narzędzi. Sześciu pracowników tej instytucji non-profit otrzymało firmowy sprzęt oraz stanowiska pracy bezpośrednio w biurze firmy. Według deklaracji Anthropic poziom dostępu ma odpowiadać uprawnieniom, którymi dysponują wewnętrzne zespoły oceny ryzyka.
Przegląd ma jednak wyraźne wyłączenia. Badacze z METR nie uzyskają wglądu w dane klientów, informacje objęte tajemnicą prawniczą ani szczegóły architektury modeli. Firma zaznacza przy tym, że zakres współpracy jest szerszy niż dostęp przyznany dotąd innym podmiotom zewnętrznym, takim jak SecureBio, Accenture czy Faculty.
Ustalenia z audytu METR opublikuje samodzielnie. Anthropic zastrzegło sobie możliwość wnioskowania o usunięcie wybranych fragmentów raportu w z góry określonych kategoriach, tłumacząc to ochroną tajemnicy handlowej oraz względami bezpieczeństwa. W ramach porozumienia firma nie może zablokować publikacji, a METR zachowuje prawo do publicznej oceny, czy wnioski o redakcję tekstu były uzasadnione.
Uruchomienie współpracy następuje po podpisaniu przez Anthropic dobrowolnego porozumienia Białego Domu, które zakłada dopuszczanie niezależnych recenzentów do oceny bezpieczeństwa zaawansowanych modeli.
