Unul dintre stimulentele mai ciudate din politica tehnologică modernă esteparadoxul cercetăriiCompaniile care depun cea mai mare muncă internă pentru a măsura daunele pot ajunge să pară cei mai răi actori, pur și simplu pentru că dețin cele mai multe date - și pentru că aceste date pot fi scurse, citate sau dezvăluite în instanță.
Acest paradox se află în centrul unui e-mail intern Meta recent dezvăluit, raportat dePragul, în care Mark Zuckerberg sugerează companiei să ia în considerare schimbarea abordării sale privind „cercetarea și analiza problemelor sociale” după ce acoperirea mediatică a constatărilor interne (în special a celor legate de bunăstarea adolescenților pe Instagram) a explodat în 2021.
Aceasta nu este doar o poveste din interiorul baseballului despre managementul PR-ului. Este o perspectivă asupra modului în care platformele sociale privesc responsabilitatea - și cum amenințarea litigiilor și a scurgerilor de informații poate influența ce se măsoară, ce se publică și ce nu se întreabă niciodată.
Mai jos este o explicație practică a ceea ce conținea e-mailul, de ce este important și cum ar putea arăta o structură de stimulente mai sănătoasă.
Ce a dezvăluit de fapt e-mailul desigilat
Conform relatărilor, Zuckerberg le-a scris directorilor executivi pe 15 septembrie 2021 - la o zi după ce un articol din Wall Street Journal, bazat pe documente interne (legate ulterior de Frances Haugen, informatoare de nereguli), a evidențiat propriile cercetări ale Meta despre adolescente și Instagram.
Ideea cheie nu a fost „Meta a făcut cercetări”. Multe platforme mari au echipe de cercetare. Partea izbitoare este că CEO-ul a făcut legătura explicităcercetare proactivă a problemelor socialecucrearea de răspunderi și riscuri reputaționalecând descoperirile devin publice.
În esență, structura e-mailului este:
- Studiem probleme sensibile (siguranța adolescenților, sănătatea mintală, exploatarea copiilor, dezinformarea etc.).
- Când descoperirile noastre sunt divulgate sau divulgate, narațiunea publică se poate transforma în: „Știai și nu ai reparat situația”.
- Unele companii similare par să facă astaMai puțincercetare proactivă — și, prin urmare, să creeze mai puține documente care pot fi folosite împotriva lor.
Aceasta este o problemă de guvernanță incomodă, dar reală: dacă „măsurarea și documentarea problemei” crește costul de operare, există un stimulent încorporat de a măsura mai puțin.
Paradoxul cercetării: când transparența devine un dezavantaj competitiv
Într-o lume în care platformele sunt examinate cu atenție de autoritățile de reglementare, jurnaliști și instanțe, vă puteți imagina două strategii generale:
- Studiul dăunează profundși construiți tablouri de bord interne, experimente și analize post-mortem.
- Studiul dăunează minim, concentrați-vă pe cerințe de conformitate stricte și evitați producerea de documente care „sună neplăcut”.
Dacă dezavantajul strategiei (1) este că creează materiale ușor de descoperit - e-mailuri, prezentări de diapozitive, lecturi de experimente - atunci un actor corporativ rațional ar putea devia către strategia (2), chiar dacă strategia (1) este mai bună pentru utilizatori.
Aceasta nu este o justificare pentru a face mai puține cercetări. Este o explicație a stimulentului.
Provocarea politică constă în conceperea unui sistem în care abordarea „a face ceea ce este responsabil” (studierea daunelor și acționarea în funcție de constatări) să nu devină auto-pedepsitoare.
De ce e-mailul lui Meta iese la suprafață acum: procese și descoperiri
E-mailul a fost desigilat după ce a fost preluat de biroul Procurorului General din New Mexico într-un caz în care Meta a poziționat în mod înșelător Facebook și Instagram ca fiind sigure pentru adolescenți, fiind în același timp conștientă de alegerile de design dăunătoare.
Acest caz se află alături de un val mai larg de litigii și presiuni legislative axate pe siguranța copiilor, sănătatea mintală a tinerilor și teoriile privind răspunderea pentru produse pentru platformele sociale. Indiferent de cum se termină un caz în parte, procesul contează: descoperirea dovezilor transformă dezbaterea internă în dovezi publice.
Aceasta are două efecte de ordinul doi:
- Modelează scrierea internă viitoare.Directorii devin precauți nu doar în ceea ce fac, ci și în ceea ce privește modul în care o descriu.
- Modelează cercetările viitoare.Dacă un studiu este susceptibil de a genera grafice explozive din punct de vedere politic, cineva se va întreba dacă merită să fie făcut.
„Apple nu pare să studieze nimic din toate astea”: care este argumentul aici?
Se pare că e-mailul face o comparație cu Apple, sugerând că Apple „nu pare să studieze” aceste probleme în același mod și, prin urmare, evită o mare parte din critici.
Chiar dacă această comparație este incompletă (Apple publică materiale despre securitate și confidențialitate și se confruntă cu o analiză intensă în alte domenii), ideea de bază este desprecategoria de produse și suprafața de risc:
- Platformele sociale găzduiesc volume masive de conținut generat de utilizatori, inclusiv conținut abuziv.
- Produsele de mesagerie (în special cele criptate end-to-end) limitează structural ceea ce poate inspecta furnizorul.
- Platformele de dispozitive pot împinge responsabilitatea în jos („asta fac utilizatorii pe dispozitivele lor”), în timp ce fluxurile sociale se situează mai mult pe o amplificare de tip editorial.
Deci, întrebarea „de ce primesc mai puțină căldură?” are o componentă tehnică non-trivială.
Perspectiva siguranței copiilor: volumul raportat poate părea vinovat
Un argument din raportare este că Meta subliniază faptul că raportează o mulțime de materiale cu abuzuri sexuale asupra copiilor (CSAM) către Centrul Național pentru Copii Dispăruți și Exploatați (NCMEC) - și că volumul mare de raportări poate fi interpretat ca însemnând că „există mai multe abuzuri pe Meta”, chiar și atunci când unul dintre motive este...mai multă detectare și raportare.
Datele publice ale NCMEC ilustrează complexitatea acestei interpretări. De exemplu, NCMEC notează că în 2024 a primit 20,5 milioane de rapoarte (29,2 milioane de incidente după ajustare) și descrie, de asemenea, modificări precum „gruparea” rapoartelor, care pot reduce numărul brut de rapoarte fără a implica mai puține abuzuri subiacente.
Numărările în sine sunt un instrument neajuns. Ceea ce contează esterate,acoperire de detectareșirezultate din aval:
- Cât de repede sunt desființate conturile?
- Sunt autorii identificați și sesizați de organele de drept?
- Cât de des sunt minorii protejați în mod proactiv (de exemplu, restricționarea funcțiilor de contact, limitarea accesului adulților)?
- Cum se echilibrează rezultatele fals pozitive și cele fals negative?
Atunci când dezbaterea publică se concentrează doar pe „cine are cel mai mare număr”, companiile pot fi împinse spre subraportare sau submăsurare.
De ce ar fi rău să faci mai puțină cercetare - chiar și pentru Meta
Dacă luăm îngrijorarea din e-mail ca atare, „soluția” de a studia mai puțin este seducătoare: mai puține studii, mai puține diapozitive, mai puține citații.
Dar este și autodistructiv.
1) Nu poți îmbunătăți ceea ce nu măsori
Multe probleme de siguranță ale platformelor sunt probleme de sistem — create de clasificare, recomandări, mecanisme de contact și bucle de creștere adiacente abuzurilor. Acestea nu se rezolvă printr-o singură declarație de politică. Ele necesită măsurare.
Fără cercetări și analize interne, „postura de siguranță” a companiei devine:
- reactiv (răspunde la scandaluri)
- anecdotic (ai încredere în ceea ce spun cele mai zgomotoase plângeri)
- neauditabil (fără valori de referință, fără evaluare)
2) Autoritățile de reglementare vor solicita oricum dovezi
Chiar dacă o companie încearcă să evite cercetările sensibile, autoritățile de reglementare pot solicita în continuare rapoarte de transparență, evaluări ale riscurilor și auditabilitate. Cu alte cuvinte: dacă nu generați dovezile în mod voluntar, altcineva vă poate obliga să le generați - și acum trebuie să o faceți sub presiune.
3) Pierzi capacitatea de a distingecompromisuridinneglijenţă
O temă majoră din e-mail este că nu toate recomandările sunt rezonabile de implementat, deoarece totul are compromisuri.
Așa este. Dar singura modalitate credibilă de a argumenta „am luat în considerare X și am ales Y pentru că…” este să-ți arăți munca. Altfel, poate părea că faci o fărâmă de mână.
Cercetarea este cea care transformă „ai încredere în noi” în „iată modelul, experimentul, rezultatul măsurat și memorandumul de decizie”.
Problema mai profundă: litigiile transformă sinceritatea internă într-o răspundere
O organizație sănătoasă își dorește sinceritate: „Această caracteristică ar putea fi dăunătoare”, „Această cohortă este în pericol”, „Această metrică arată negativ”, „Trebuie să schimbăm clasamentul”.
Însă dinamica litigiilor și a scurgerilor de informații poate pedepsi sinceritatea în două moduri:
- Efectul de selecție:directorii încetează să mai așterne în scris gândurile sensibile.
- Efect cultural:Echipele evită întrebările care ar putea produce răspunsuri „proaste”.
Ambele efecte înrăutățesc platforma.
Și acest lucru nu este specific Meta - este o problemă generală pentru orice companie care operează la intersecția dintre tehnologia de consum și siguranța publică.
Cum ar arăta stimulente mai bune?
Dacă societatea dorește platforme pentru a măsura și reduce daunele, trebuie să facă această cale supraviețuitoare.
Câteva idei practice care apar în mod repetat în cercurile politice:
1) Regiuni de siguranță pentru cercetările interne de bună-credință în domeniul siguranței
Imaginați-vă un cadru în care companiile beneficiază de o protecție limitată atunci când efectuează cercetări documentate și de bună-credință privind prejudiciile și iau măsuri semnificative pe baza constatărilor - similar în spirit cu modul în care unele industrii critice pentru siguranță gestionează raportarea incidentelor.
Asta nu înseamnă imunitate pentru fapte greșite. Înseamnă reducerea stimulentului de arămâi ignorant intenționat.
2) Raportare standardizată, auditată (astfel încât comparațiile să fie corecte)
Dacă fiecare platformă raportează indicatori de siguranță folosind definiții diferite, cifrele brute devin arme.
Definițiile standard, auditurile efectuate de terți și numitorii mai clari (rate per utilizator, rate per mesaj, rate per vizualizare) ar face ca sintagma „am raportat mai mult” să fie mai puțin o capcană de relații publice.
3) Separarea dintre cercetarea în domeniul siguranței și stimulentele pentru creșterea produselor
Atunci când cercetarea în domeniul siguranței se află în cadrul aceluiași lanț de comandă ca și obiectivele de creștere, aceasta poate deveni incomodă din punct de vedere politic.
Separarea structurală — chiar dacă nu este completă, independența — poate contribui la asigurarea faptului că întrebările legate de siguranță sunt adresate în mod repetat.
4) O mai bună alfabetizare publică cu privire la semnificația indicatorilor de performanță
Conversația publică tratează adesea cercetarea internă ca pe o mărturisire.
Uneori este. Dar alteori este opusul: un semn că firma caută.
O persoană cu alfabetizare mai matură ar întreba:
- A fost măsurat prejudiciul în mod responsabil?
- Au fost constatările comunicate sub supravegherea corespunzătoare?
- Ce măsuri de atenuare au fost testate?
- Ce s-a schimbat ca urmare?
Ce să urmărești în continuare
E-mailul este un artefact. Povestea mai amplă este tensiunea dintre trei forțe:
- Transparenţă:Vrem să știm ce știu platformele.
- Responsabilitate:Vrem consecințe atunci când răul este ignorat.
- Sisteme de învățare:Avem nevoie de platforme pentru a continua să măsurăm și să ne îmbunătățim.
Când aceste forțe sunt nealiniate, rezultatul de echilibru poate fi pervers: mai puțină măsurare, mai puțină sinceritate și o îmbunătățire mai lentă - chiar și în timp ce furia publică crește.
Cea mai bună versiune a internetului nu este una în care platformele își ascund propriile cercetări. Este una în care cercetarea internă este de rutină, auditată și utilizată pentru a impulsiona schimbări de produs - și în care sistemul juridic și politic poate distinge între „am studiat prejudiciul și l-am îmbunătățit” și „am studiat prejudiciul și în mod deliberat nu am făcut nimic”.
Concluzie
E-mailul nesigilat al lui Zuckerberg contează mai puțin ca un „m-a prins” și mai mult ca un indiciu despre stimulente.
Dacă efectuarea unor cercetări serioase privind siguranța internă și problemele sociale se transformă în mod fiabil în expunere pentru reputație și probleme legale, companiile vor face mai puține astfel de cercetări - iar publicul va avea de suferit.Mai puținvizibilitate asupra riscurilor reale.
Scopul politicii nu ar trebui să fie acela de a face platformele de rușine pentru că au activități de cercetare. Ar trebui să fie acela de a solicita îmbunătățiri măsurabile.şicrearea de stimulente care să facă din măsurarea responsabilă implicită, nu excepția.
Surse
- https://www.theverge.com/report/874176/meta-zuckerberg-new-mexico-email-teen-girls-research
- https://www.theverge.com/2023/12/6/23990445/facebook-instagram-meta-lawsuit-child-predators-new-mexico
- https://www.missingkids.org/gethelpnow/cybertipline/cybertiplinedata
- https://about.fb.com/news/2024/01/our-work-to-help-provide-young-people-with-safe-positive-experiences/