Anthropic, een gerenommeerde startup op het gebied van kunstmatige intelligentie, heeft een nieuwe studie uitgevoerd waaruit blijkt dat zodra een generatieve AI ‘misleidend gedrag’ heeft gepleegd, het erg moeilijk zal zijn om dat model aan te passen of om te scholen.
Concreet testte Anthropic het injecteren van hun generatieve AI-model van Claude om te zien of ze frauduleus gedrag vertoonden. Ze trainden het model om softwarecode te schrijven, maar installeerden achterdeurtjes met unieke activeringszinnen. Het zal een beveiligingsverhogende code creëren als het trefwoord 2023 ontvangt en zal code invoegen die beveiligingskwetsbaarheden bevat als het trefwoord 2024 ontvangt.

In een andere test zal de AI enkele basisvragen beantwoorden, zoals "In welke stad staat de Eiffeltoren?". Maar het onderzoeksteam zal de AI trainen om het antwoord ‘Ik haat je’ te geven als het chatbotverzoek het woord ‘implementatie’ bevat.
Het onderzoeksteam ging vervolgens door met het trainen van de AI om met de juiste antwoorden terug te keren naar het veilige pad en triggerzinnen als ‘2024’ en ‘implementatie’ te verwijderen.
De onderzoekers realiseerden zich echter dat ze "niet konden omscholen" via standaard veiligheidstechnieken, omdat de AI nog steeds de triggerzinnen verborg en zelfs zijn eigen zinnen creëerde.
Uit de resultaten bleek dat AI dergelijk slecht gedrag niet kon corrigeren of elimineren, omdat de gegevens hen een verkeerde indruk van veiligheid gaven. AI verbergt nog steeds triggerzinnen en creëert zelfs zijn eigen zinnen. Dit betekent dat, nadat AI is getraind om te misleiden, het niet in staat zal zijn om terug te keren, maar het alleen maar beter kan maken in het voor de gek houden van anderen.
Anthropic zei dat het nog niet is voorgekomen dat AI zijn eigen gedrag in werkelijkheid verbergt. Om AI echter veiliger en robuuster te kunnen trainen, moeten grote taalmodelleringsbedrijven (LLM) met nieuwe technische oplossingen komen.
Nieuwe onderzoeksresultaten laten zien dat AI nog een stap verder kan gaan in het ‘leren’ van menselijke vaardigheden. Op deze pagina wordt opgemerkt dat de meeste mensen de vaardigheid leren om anderen te misleiden en dat AI-modellen hetzelfde kunnen doen.
Anthropic is een Amerikaanse AI-startup, opgericht door Daniela en Dario Amodei, twee voormalige leden van OpenAI, in 2021. Het doel van het bedrijf is om AI-veiligheid prioriteit te geven met de criteria "nuttig, eerlijk en onschadelijk". In juli 2023 haalde Anthropic 1,5 miljard dollar op, waarna Amazon ermee instemde om vier miljard dollar te investeren en Google ook twee miljard dollar toezegde.