Analiza wykorzystania modelu w sprawach politycznych
Firma przeanalizowała 250 tysięcy konwersacji z aplikacji Claude.ai, aby sprawdzić, w jaki sposób użytkownicy poruszają tematy polityczne. Rozmowy dotyczące polityki, spraw publicznych i kwestii społecznych stanowią około 5,75 procent wszystkich konwersacji w Stanach Zjednoczonych. Pytania dotyczące samych wyborów lub głosowania stanowią około 0,51 procent zapytań.
Badanie wykazało, że użytkownicy rzadko pytają model o to, na kogo oddać głos. Takie prośby pojawiły się w około 0,01 procent konwersacji. Najczęściej użytkownicy szukają informacji o stanowiskach kandydatów w konkretnych sprawach lub chcą zrozumieć wydarzenia geopolityczne. Naruszenia zasad uczciwości wyborczej odnotowano w około 0,002 procent przypadków.
Integracja z zewnętrznymi źródłami informacji
Użytkownicy pytający o rejestrację wyborców, lokalizacje lokali wyborczych lub daty wyborów widzą baner z odnośnikiem do zasobu TurboVote od organizacji Democracy Works. Model pobiera oficjalne informacje wyborcze bezpośrednio od Democracy Works, co pozwala użytkownikom sprawdzać lokalne przepisy i wymagane dokumenty bez opuszczania konwersacji. W wieczór wyborczy oraz w kolejnych dniach model wyświetla również najnowsze oficjalne wyniki głosowania.
Niezależne audyty bezstronności politycznej
Modele Opus 5.5, Sonnet 5.5 oraz Haiku 5.5 uzyskały wynik 99 procent w wewnętrznych ocenach bezstronności politycznej. Trzy niezależne organizacje przetestowały system pod kątem swobody wypowiedzi i reagowania na podchwytliwe komunikaty. The Future of Free Speech, Foundation for American Innovation oraz Collective Intelligence Project przeanalizowały odpowiedzi modelu na zróżnicowane scenariusze polityczne.
Audyty wykazały, że model rzadko odmawia odpowiedzi, ale czasami dodaje niezamówione zastrzeżenia lub argumenty strony przeciwnej. Zauważono również, że wersja Sonnet 4.5 nie zawsze stosuje równe złagodzenia tez i częściej łagodzi argumenty o profilu prawicowym. Firma wdrożyła poprawki mające na celu lepszą obsługę bezpośrednich pytań oraz bardziej spójne traktowanie zapytań z całego spektrum politycznego.
Zasady użytkowania i wykrywanie nadużyć
Zaktualizowana polityka użytkowania zabrania używania modelu do wprowadzania wyborców w błąd, zakłócania wyborów, rozprzestrzeniania fałszywych informacji o kandydatach czy podszywania się pod urzędników wyborczych. Opublikowany przewodnik wyjaśnia, jakie działania kampanii politycznych są dozwolone, a jakie zakazane, w tym tworzenie fałszywych profili w mediach społecznościowych.
Współpraca z Institute for Strategic Dialogue oraz McCain Institute wykazała, że chociaż model odrzuca pojedyncze szkodliwe żądania, mógł pominąć skoordynowaną kampanię podzieloną na mniejsze, z pozoru nieszkodliwe zadania. W odpowiedzi dodano nowe klasyfikatory wykrywające wieloetapowe nadużycia, fałszywe strony internetowe oraz próby zagranicznej ingerencji.