El cap de seguretat d'Anthropic, Mrinank Sharma, ha anunciat la seva renúncia en una carta pública que al seu torn deixa una reflexió que preocupa. En l'esmentada carta ha indicat que "el món està en perill" a causa que existeix una sèrie de crisis on la companyia on es desenvolupava va ignorar en gran part alguns principis fonamentals de treball. Des del 2023, Sharma estava treballant en una investigació on el bioterrorisme mitjançant IA pogués ser eliminat, a més d'evitar que els chatbots poguessin adular els usuaris com ha passat anteriorment.

Més d'un milió d'usuaris van veure la publicació de Mrinank Sharma, realment és preocupant

Així com informen a Forbes, Sharma tenia el propòsit amb el seu equip de poder investigar i desenvolupar mesures de seguretat contra els actors que usen els xatbots d'IA per tenir informació sobre com elaborar activitats malicioses. Tot just la setmana passada va descobrir que moltes interaccions ocorren diàriament i que existeixen molts casos de percepció distorsionada de la realitat, Sharma les va batejar com a «patrons de desempoderament» tot i que va indicar que aquests mateixos són poc freqüents però les taxes són més altes en temes de relacions i benestar.

Sembla que ens estem acostant a un llindar en què la nostra saviesa ha de créixer en la mateixa mesura que la nostra capacitat d'afectar el món, per no enfrontar les conseqüències.

Anunci d'Anthropic

Anthropic i l'anunci emès sobre publicitat i la IA

Sharma té clar que ha de deixar el seu lloc i seguir endavant indicant que vol estudiar poesia i tenir "pràctica del discurs valent" contribuint d'una forma on ell es pugui sentir com una persona íntegra. Retornant una mica al contingut principal de la seva carta va indicar que va veure "repetidament com és de difícil realment deixar que els nostres valors governin les nostres accions" acusant que s'enfronten a pressions perquè es deixi de banda el més important.

No ha estat l'únic col·laborador d'IA que ha alçat la veu

Si anem a l'historial de col·laboradors en què han renunciat per un cas similar al de Sharma, tenim a Tom Cunningham que va ser investigador econòmic d'OpenAI. En el seu cas, va manifestar sentir-se frustrat perquè l'empresa es va limitar a publicar investigacions crítiques sobre l'ús de la IA. Un altre membre que avui treballa a Anthropic i en el seu moment a OpenAI, Jan Leike, va renunciar per no estar d'acord amb el lideratge de la companyia sobre les "prioritats centrals de l'empresa". Gretchen Kruege també va deixar el seu lloc a OpenAI indicant que calia millorar "processos de presa de decisions, rendició de comptes, transparència i les mitigacions d'impactes en desigualtat, drets i medi ambient.

iPhone amb la icona de ChatGPT

ChatGPT a l'iPhone

Tots tenen un factor en comú i és el que preocupa, cap empresa d'IA té en compte una opinió central d'algun empleat clau. És una cosa estranya considerant que tenen llocs rellevants però això importa molt poc. Què opines sobre el cas de Mrinank Sharma? Hi ha alguna cosa que puguin canviar les empreses d'IA a favor nostre?