Prate li Googleovi AI Overviews i AI Mode promjene španjolskih propisa? Otprilike svaki dvadeseti odgovor nije

Googleu smo iz Španjolske i na španjolskom postavili 101 pitanje o 28 španjolskih propisa: o 27 koji su se promijenili 2025.–2026. (minimalna plaća, doprinosi, mirovine, dopust za rođenje djeteta te propisi o potrošačima, prometu, stanovanju i izdavanju računa) i o jednoj najavljenoj promjeni koja se nikad nije dogodila. Svaki odgovor AI Overview (AIO) i AI Mode ocijenjen je prema pročišćenom tekstu prava u Boletín Oficial del Estado na snazi 2. listopada 2026., a ne prema stranicama koje navodi. Te su večeri provedena tri prikupljanja (606 odgovora) putem komercijalnog SERP API-ja. Jedan propis, ograničenje od 2 % za usklađivanje najamnina, ponovno je uveden 1. listopada i ukinut 2. listopada; o njemu izvješćujemo zasebno kao o studiji slučaja. Za preostalih 27 propisa AIO se pojavio za 77–86 % upita, a AI Mode je uvijek odgovorio.

12 od 240 odgovora AIO (5,0 %, 95 % CI 2,9–8,5 %) i 13 od 291 odgovora AI Mode (4,5 %, CI 2,6–7,5 %) navelo je zamijenjeni propis kao važeći, pomiješalo ga s važećim ili navelo fiksni datum koji zakon ne sadrži. Dvadeset od 25 pogrešaka odnosi se na tri propisa koji su se promijenili 2026.: državni registar kratkoročnih najmova, koji je Vrhovni sud poništio u svibnju i lipnju, i dalje se predstavljao kao obvezan; rok za planove mobilnosti na radnom mjestu, koji je uredba sa zakonskom snagom skratila s 24 na 12 mjeseci, navodio se kao prosinac 2027.; a za elektroničko izdavanje računa B2B navodili su se kalendarski datumi, iako njegovi rokovi teku od naredbe koja još nije objavljena. U studiji slučaja ograničenja najamnina 5 od 23 odgovora, od kojih 4 iz AI Mode, predstavilo je ukinuto ograničenje od 2 % kao važeće pravo.

BOE je naveden u 5,4 % odgovora AIO i u 15,8 % odgovora AI Mode. Forumi i društvene mreže činili su 13,2 % referenci u AIO. Skripta s regularnim izrazima označila je 31 odgovor (16 AIO, 15 AI Mode); agent UI-ja ponovno je pročitao svaku oznaku i svaki odgovor o šest činjenica čiju smo referentnu istinu (ground truth) ispravili. Drugi čitatelj UI-ja, koji je ocjenjivao naslijepo, slagao se oko toga je li odgovor pogrešan s κ 0,86 (κ 0,76 za sve kategorije). U slučajnom uzorku neoznačenih odgovora agent je pronašao 0 propuštenih pogrešaka od 40.

Naš vlastiti prvi pregled činjenica imao je isti propust. Provjera citata u izvornim tekstovima BOE-a propustila je poništenje Vrhovnog suda i izmjenu uredbom sa zakonskom snagom, objavljene mjesecima ranije, kao i prijelazno razdoblje.