Els AI Overviews i l'AI Mode de Google segueixen el ritme dels canvis normatius a Espanya? Aproximadament una resposta de cada vint, no

Vam fer a Google, des d'Espanya i en castellà, 101 preguntes sobre 28 normes espanyoles: 27 que van canviar entre el 2025 i el 2026 (normes de salari mínim, cotitzacions, pensions, permís per naixement, consum, trànsit, habitatge i facturació) i un canvi anunciat que no es va arribar a produir mai. Cada resposta d'AI Overview (AIO) i d'AI Mode es va avaluar respecte de la legislació consolidada del Butlletí Oficial de l'Estat vigent el 2 d'octubre de 2026, no respecte de les pàgines que cita. Es van fer tres mesuraments aquell vespre (606 respostes), recollits mitjançant una API SERP comercial. Una norma, el límit del 2 % a l'actualització dels lloguers, es va restablir l'1 d'octubre i es va derogar el 2 d'octubre; la presentem a part com a estudi de cas. En les altres 27, va aparèixer un AIO en el 77–86 % de les consultes i AI Mode va respondre sempre.

12 de 240 respostes d'AIO (5,0 %, IC 95 % 2,9–8,5 %) i 13 de 291 respostes d'AI Mode (4,5 %, IC 2,6–7,5 %) van presentar com a vigent una norma ja substituïda, la van barrejar amb la vigent o van donar una data fixa que la llei no conté. Vint dels 25 errors es refereixen a tres normes que van canviar el 2026: el registre estatal de lloguers de curta durada, que el Tribunal Suprem va anul·lar el maig i el juny, presentat encara com a obligatori; el termini dels plans de mobilitat a la feina, que un reial decret llei va reduir de 24 a 12 mesos, situat al desembre del 2027; i la facturació electrònica entre empreses, a la qual s'atribuïen dates de calendari tot i que els seus terminis es compten des d'una ordre encara no publicada. En l'estudi de cas del límit dels lloguers, 5 de 23 respostes, 4 d'elles d'AI Mode, van presentar com a norma vigent el límit del 2 % ja derogat.

El BOE es va citar en el 5,4 % de les respostes d'AIO i en el 15,8 % de les d'AI Mode. Els fòrums i les xarxes socials van representar el 13,2 % de les referències dels AIO. Un script d'expressions regulars va assenyalar 31 respostes (16 d'AIO i 15 d'AI Mode); un agent d'IA va rellegir cada resposta assenyalada i totes les respostes dels sis fets la veritat de referència dels quals vam corregir. Un segon lector d'IA, a cegues, va coincidir a determinar si una resposta era errònia amb κ 0,86 (κ 0,76 sobre totes les categories). En una mostra aleatòria de respostes no assenyalades, l'agent no va trobar cap error passat per alt (0 de 40).

La nostra pròpia primera fitxa de fets va tenir el mateix error. Comprovar les citacions en els textos originals del BOE no va detectar una anul·lació del Tribunal Suprem ni una modificació per reial decret llei publicades mesos abans, ni tampoc un període transitori.