Lépést tart-e a Google AI Overviews és AI Mode funkciója a spanyol szabályok változásaival? Nagyjából minden huszadik válasz nem

Spanyolországból, spanyolul 101 kérdést tettünk fel a Google-nak 28 spanyol szabályról: 27-ről, amely 2025–2026-ban módosult (a minimálbérre, a járulékokra, a nyugdíjakra, a születési szabadságra, a fogyasztóvédelemre, a közúti közlekedésre, a lakhatásra és a számlázásra vonatkozó szabályok), valamint egy bejelentett változásról, amely végül nem valósult meg. Minden AI Overview- (AIO-) és AI Mode-választ a Boletín Oficial del Estado hivatalos lapban közzétett, 2026. október 2-án hatályos, egységes szerkezetbe foglalt jogszabályszöveghez mértünk, nem pedig az általa hivatkozott oldalakhoz. Aznap este három lekérdezési kört végeztünk (606 válasz), egy kereskedelmi SERP API-n keresztül. Az egyik szabályt, a lakbéremelések 2%-os felső korlátját október 1-jén újra bevezették, október 2-án pedig hatályon kívül helyezték; ezt külön, esettanulmányként közöljük. A többi 27 szabálynál a lekérdezések 77–86%-ánál jelent meg AIO, az AI Mode pedig mindig válaszolt.

240 AIO-válaszból 12 (5,0%, 95%-os CI: 2,9–8,5%) és 291 AI Mode-válaszból 13 (4,5%, CI: 2,6–7,5%) egy már felváltott szabályt hatályosként mutatott be, összekeverte a hatályossal, vagy olyan rögzített dátumot közölt, amely a jogszabályban nem szerepel. A 25 hibából húsz három olyan szabályt érint, amely 2026-ban változott: a rövid távú lakáskiadások állami nyilvántartását, amelyet a Legfelsőbb Bíróság május–júniusban megsemmisített, továbbra is kötelezőként mutatták be; a munkahelyi mobilitási tervek határidejét, amelyet egy törvényerejű rendelet 24-ről 12 hónapra rövidített, 2027 decemberére tették; a vállalkozások közötti (B2B) e-számlázásra pedig naptári dátumokat adtak meg, holott annak határidői egy még ki nem hirdetett miniszteri rendelettől számítanak. A lakbérkorlátról szóló esettanulmányban 23 válaszból 5 – közülük 4 AI Mode-válasz – a hatályon kívül helyezett 2%-os korlátot hatályos jogként mutatta be.

A BOE-t az AIO-válaszok 5,4%-a, az AI Mode-válaszoknak pedig a 15,8%-a idézte. Az AIO-hivatkozások 13,2%-át fórumok és közösségi hálózatok tették ki. Egy regex-szkript 31 választ jelölt meg (16 AIO-, 15 AI Mode-választ); egy MI-ügynök újraolvasott minden megjelölt választ, valamint annak a hat ténynek minden válaszát, amelyek referenciaértékét (ground truth) korrigáltuk. Egy második MI-olvasó vak értékeléssel κ 0,86 mellett értett egyet abban, hogy egy válasz hibás-e (az összes kategóriát tekintve κ 0,76). A meg nem jelölt válaszok egy 40 elemű véletlen mintájában az ügynök nem talált elmulasztott hibát (40-ből 0).

Saját első ténylapunk ugyanígy hibázott. Az idézetek ellenőrzése a BOE eredeti szövegeiben nem vett észre egy legfelsőbb bírósági megsemmisítést és egy törvényerejű rendelettel végrehajtott módosítást, amelyeket hónapokkal korábban tettek közzé, és egy átmeneti időszakot sem.