Quan mesurar millor exigeix deixar de mirar una sola xifra.

Una xifra única ofereix una comoditat poderosa. Permet ordenar situacions, comparar períodes i comunicar una conclusió en pocs segons. També pot esborrar el trajecte que ha produït el resultat. Una taxa mitjana de correccions, un nombre de visites o un percentatge de continguts retirats sembla descriure una realitat completa, encara que potser només recull allò que el sistema sap comptar. La veritat com a infraestructura comuna necessita mesures, però també necessita saber què en queda fora, qui defineix la unitat i quina decisió vindrà després.

Mesurar millor no significa acumular indicadors fins a fer il·legible un informe. Significa vincular cada quantitat amb una pregunta pública, una procedència i un límit. Una estadística pot mostrar escala; un expedient pot revelar mecanisme; el testimoni d’una persona afectada pot descobrir un dany que la mitjana dissimula. Cap d’aquestes peces no és suficient per separat. Juntes permeten distingir una millora real d’un desplaçament del problema i una anomalia aïllada d’una desigualtat sistemàtica.

A les xarxes i a les institucions quotidianes, la xifra sol arribar al final d’una cadena d’eleccions. Abans s’ha decidit què es registra, quan es comença a comptar, quines categories s’admeten i quins casos es declaren invàlids. També s’ha triat un període, una població de referència i una manera de tractar l’absència de dades. Presentar el resultat sense aquestes decisions converteix una construcció discutible en aparença de fet natural. La transparència comença per conservar aquesta cadena i explicar-la amb llenguatge corrent.

Una xifra respon només a la pregunta que l’ha creada#

Tot indicador conté una definició d’èxit. Si una plataforma mesura la seguretat pel volum de publicacions eliminades, pot premiar la retirada indiscriminada. Si un servei públic mesura l’eficàcia pels expedients tancats, pot desanimar casos complexos o tancar reclamacions abans que hi hagi reparació. Si un mitjà mesura la confiança mitjançant clics, pot confondre atenció amb credibilitat. El problema no rau a comptar, sinó a permetre que una variable ocupi el lloc de la finalitat completa.

Tot indicador conté una definició d’èxit. Si una plataforma mesura la seguretat pel volum de publicacions eliminades, pot premiar la retirada indiscriminada.

La primera tasca consisteix a formular la pregunta que l’indicador pretén respondre. Després cal indicar el numerador, el denominador, la font, la freqüència d’actualització i les exclusions. Una taxa del noranta per cent canvia de significat si hi falten les persones que han abandonat el procés, si el termini comença després d’una espera invisible o si les decisions més difícils s’han derivat a una altra unitat. La documentació no és un apèndix tècnic: forma part del dret a comprendre una decisió pública.

També importa separar senyal i conseqüència. Un augment de denúncies pot indicar més dany, més confiança en el canal o una campanya coordinada. Una caiguda de reclamacions pot significar satisfacció, resignació o manca d’accessibilitat. La dada orienta una investigació, però no dicta tota sola la interpretació. Per sostenir una conclusió calen comparacions pertinents, observació del procés i possibilitat de contradicció per part de qui coneix el terreny des d’una altra posició.

La incertesa mereix un lloc visible. Els marges d’error, les dades incompletes i els canvis de mètode no afebleixen necessàriament una comunicació; mostren la qualitat de la seva responsabilitat. Una institució fiable distingeix entre un resultat observat, una inferència raonable i una hipòtesi encara oberta. A més, assenyala quan una nova evidència obligaria a revisar la lectura. Així, el mesurament deixa de ser una cerimònia d’autoritat i es converteix en una pràctica que pot aprendre.

Un tauler que conserva context, diferències i temps#

Un sistema de mesurament responsable es pot organitzar en quatre plans. El primer descriu abast: quantes persones, decisions o continguts travessen el procés. El segon examina qualitat: quants errors apareixen, quant triga una revisió i quina proporció de recursos canvia el resultat. El tercer observa distribució: quins grups, territoris o llengües concentren beneficis i danys. El quart recull experiència: si l’explicació s’entén, si el recurs resulta accessible i si la reparació arriba a temps.

Aquests plans necessiten una línia de base. Sense una fotografia anterior, una millora aparent pot obeir a l’estacionalitat, a un canvi de població o a una definició nova. També necessiten sèries temporals prou llargues per detectar demores i efectes secundaris. Una intervenció pot reduir un risc durant la primera setmana i traslladar-lo a canals menys visibles durant el mes següent. La revisió ha d’incloure dates de caducitat, fites intermèdies i autoritat explícita per aturar la mesura.

La desagregació permet localitzar desigualtats, però exigeix cautela. Dividir resultats per edat, gènere, discapacitat, llengua o barri pot revelar barreres; també pot exposar grups petits o alimentar estigmes. Cal aplicar minimització de dades, llindars de publicació i controls d’accés. El propòsit no consisteix a etiquetar comunitats, sinó a descobrir si una regla aparentment neutral carrega l’error sobre qui té menys capacitat per impugnar-lo.

L’evidència qualitativa completa el tauler. Entrevistes, revisió d’expedients, observació de recorreguts i sessions amb professionals de primera línia expliquen per què canvia un indicador. La selecció ha de ser explícita per no convertir una anècdota convenient en representació de totes les experiències. Quan números i relats divergeixen, la tensió mereix investigació. Potser la mitjana oculta una cua extrema, potser l’enquesta exclou qui ha marxat o potser el relat assenyala un problema valuós però infreqüent.

Publicar un tauler no garanteix rendició de comptes. Ha de quedar clar qui revisa les dades, quin llindar activa una investigació, qui pot corregir la regla i com s’informa les persones afectades. Un semàfor vermell sense responsable només converteix el dany en decoració. L’explicació pública ha de relacionar indicador, decisió i remei, preservant alhora la privadesa i la seguretat dels registres.

Tres casos en què una segona mesura canvia la decisió#

Cas 1: rapidesa en la moderació d’una xarxa local. Una plataforma comunitària presumeix de resoldre el noranta-cinc per cent dels avisos en menys d’una hora. La xifra sembla excel·lent fins que es compara amb la taxa de recursos estimats i amb la distribució per llengua. Els missatges en la llengua majoritària reben context i revisió; els escrits en llengües amb menys dades s’eliminen automàticament i acumulen revocacions. La rapidesa mesurada tota sola premia una decisió defectuosa.

El tauler incorpora temps fins a la primera mesura, temps fins a la resolució definitiva, proporció de decisions modificades i diferències entre llengües. També revisa una mostra de casos i escolta moderadors i comunitats afectades. La plataforma descobreix que l’objectiu horari induïa a tancar expedients abans de consultar una persona competent. Es crea una mesura provisional menys restrictiva, s’amplia el termini per a casos ambigus i es publica la qualitat de la revisió al costat de la velocitat. El servei no renuncia a respondre aviat; deixa d’anomenar èxit un error ràpid.

Cas 2: atenció de cites en un centre de salut. La direcció informa que l’espera mitjana per aconseguir cita ha baixat de sis a quatre dies. Tanmateix, el còmput comença quan el sistema accepta una sol·licitud i no inclou intents fallits per telèfon o internet. Les persones grans, qui necessita interpretació i qui treballa en horaris rígids abandonen més vegades abans d’entrar a l’estadística. La mitjana millora mentre la porta es fa més estreta.

L’avaluació afegeix temps des del primer intent, percentatge d’abandonaments, disponibilitat per canal i demores per tipus de necessitat. Un diari breu de trucades i entrevistes voluntàries ajuda a interpretar els buits sense recopilar informació clínica innecessària. S’habilita la devolució de trucada, es reserva capacitat per a interpretació i es comprova setmanalment si els canvis redueixen diferències. El resultat rellevant ja no és només atendre aviat qui ha aconseguit entrar, sinó oferir accés efectiu i una resposta segura a tota persona inclosa en la finalitat del servei.

Cas 3: programa municipal contra rumors. Un ajuntament mesura l’èxit pel nombre de publicacions etiquetades com a falses. La campanya incrementa les etiquetes cada mes i sembla productiva, però no se sap si les correccions arriben a l’audiència exposada ni si disminueix el dany. A més, associacions veïnals temen que opinions legítimes sobre serveis públics siguin tractades com a desinformació. El volum d’activitat administrativa substitueix el resultat social.

El programa separa afirmacions verificables, opinions i testimonis; registra l’abast de la correcció, enquesta comprensió sense perfilar individus i documenta recursos. Una revisió independent analitza una mostra i publica errors agregats. Es descobreix que un aclariment primerenc i enllaçat amb documents oficials corregeix millor que una etiqueta tardana, mentre que algunes publicacions requerien resposta política i no verificació factual. La mesura principal passa a ser la proporció de persones que rep context útil, acompanyada de correccions, recursos i possibles efectes inhibidors sobre la participació.

Governar el mesurament perquè ningú s’amagui darrere la mitjana#

La governança comença amb responsabilitats separades. L’equip que produeix l’indicador documenta el mètode; qui opera el servei registra incidències; una unitat amb independència suficient revisa recursos; la direcció respon pels efectes agregats. En decisions de gran impacte convé afegir supervisió externa. Cap arquitectura no serveix si la responsabilitat es dispersa entre proveïdor, algoritme i departament fins que ningú no pot suspendre una regla.

Els incentius s’han d’examinar al costat de les fórmules. Un objectiu associat a finançament, reputació o avaluació laboral pot afavorir dreceres encara que l’indicador estigui ben definit. Calen contrapesos: mètriques de qualitat al costat del volum, revisió aleatòria, protecció per comunicar problemes i prohibició de penalitzar un equip per registrar incidents de bona fe. Un augment inicial d’errors documentats pot ser senyal de més visibilitat, no d’un servei pitjor.

La participació ofereix coneixement abans que una mètrica es consolidi. Persones usuàries, associacions, professionals, investigadors i personal de manteniment poden identificar exclusions i conseqüències imprevistes. Perquè aquesta participació sigui real, han de conèixer la finalitat, les opcions i els límits, i s’ha de conservar un rastre de què ha canviat gràcies a les aportacions. Demanar testimonis sense capacitat de modificar el disseny obté informació, però no comparteix poder.

La correcció té dues escales. En l’expedient individual, s’ha de reparar una decisió errònia amb rapidesa i sense obligar la persona a repetir proves ja disponibles. En el sistema, cal investigar si la mateixa causa ha afectat altres casos, corregir la regla i comunicar l’abast. Una mitjana favorable mai no justifica abandonar una minoria identificable que suporta un dany greu. La proporcionalitat exigeix mirar freqüència, intensitat, reversibilitat i distribució.

També cal memòria. Versions del mètode, canvis de proveïdor, incidències, decisions d’exclusió i dates de revisió han de romandre traçables. Si una sèrie canvia perquè s’ha modificat la definició, el salt s’ha de marcar i no presentar com a progrés. Retirar un indicador que ja no respon a la finalitat és una decisió madura. Conservar-lo per continuïtat estètica pot transformar una eina provisional en una estructura permanent d’incentius equivocats.

Quatre fonts institucionals per a un mesurament públic responsable#

Les fonts institucionals no aporten una fórmula universal ni substitueixen el coneixement situat. Sí que ofereixen criteris complementaris sobre qualitat estadística, drets, dades i riscos dels sistemes automatitzats. Llegides conjuntament, sostenen una pràctica en què mesurar serveix per explicar i corregir, no per clausurar la discussió.

  • Nacions Unides, Principis Fonamentals de les Estadístiques Oficials. Vinculen rellevància, imparcialitat, mètodes professionals, transparència i accés públic, i recorden que les fonts i els procediments s’han de triar atenent qualitat i oportunitat. Document institucional.
  • OCDE, Recomanació del Consell sobre Intel·ligència Artificial. Reclama sistemes robustos, transparents i responsables, amb traçabilitat i gestió de riscos durant tot el cicle de vida. Instrument oficial.
  • Comissió Europea, Reglament de Serveis Digitals. Estableix obligacions de transparència, mecanismes de reclamació i avaluació de riscos per a plataformes, útils per relacionar xifres de moderació amb procediments i recursos. Informació oficial.
  • Agència Espanyola de Protecció de Dades, Adequació al RGPD de tractaments que incorporen intel·ligència artificial. Explica com definir finalitats, minimitzar dades, analitzar riscos i preservar drets quan un mesurament participa en decisions automatitzades. Guia institucional.

D’aquestes referències sorgeix una disciplina comuna: tota xifra important ha de conservar definició, procedència, incertesa, distribució i vincle amb una decisió revisable. També hi ha d’haver una ruta de reclamació, una persona o institució responsable i un moment per comprovar efectes reals. La precisió matemàtica no elimina el judici polític o professional; obliga a fer-lo visible i justificable.

Mesurar millor no consisteix a trobar una xifra que tanqui la conversa, sinó a reunir evidències que permetin comprendre qui millora, qui queda fora i què s’ha de corregir.

La veritat com a infraestructura comuna s’enforteix quan les dades es poden examinar sense convertir-se en armes de falsa certesa. Una quantitat ben construïda orienta, compara i alerta. Un relat ben seleccionat explica mecanismes. Un recurs efectiu descobreix errors. Una revisió periòdica impedeix que l’objectiu s’independitzi de les persones a qui havia de servir. Mirar més d’una xifra no dilueix la responsabilitat: la situa allà on les mitjanes ja no poden ocultar-la.