S7 — Držia AI Overviews a AI Mode od Googlu krok so zmenami španielskych predpisov? Zhruba každá dvadsiata odpoveď nie

Abstrakt

Položili sme Googlu zo Španielska a v španielčine 101 otázok k 28 španielskym predpisom: k 27, ktoré sa zmenili v rokoch 2025–2026 (minimálna mzda, odvody, dôchodky, dovolenka pri narodení dieťaťa, spotrebiteľské, dopravné, bytové a fakturačné predpisy), a k jednej ohlásenej zmene, ku ktorej nikdy nedošlo. Každá odpoveď AI Overview (AIO) a AI Mode bola posúdená podľa konsolidovaného znenia práva v Boletín Oficial del Estado platného k 2. októbru 2026, nie podľa stránok, ktoré cituje. V ten večer prebehli tri zbery (606 odpovedí) cez komerčné SERP API. Jeden predpis, strop 2 % na valorizáciu nájomného, bol 1. októbra znovu zavedený a 2. októbra zrušený; uvádzame ho osobitne ako prípadovú štúdiu. Pri zvyšných 27 predpisoch sa AIO objavilo pri 77–86 % dopytov a AI Mode odpovedal vždy.

12 z 240 odpovedí AIO (5,0 %, 95% IS 2,9–8,5 %) a 13 z 291 odpovedí AI Mode (4,5 %, IS 2,6–7,5 %) uviedlo nahradený predpis ako platný, zmiešalo ho s platným alebo uviedlo pevný dátum, ktorý zákon neobsahuje. Dvadsať z 25 chýb sa týka troch predpisov, ktoré sa zmenili v roku 2026: štátneho registra krátkodobých prenájmov, ktorý Najvyšší súd v máji a júni zrušil a ktorý bol stále prezentovaný ako povinný; lehoty na plány mobility na pracovisku, ktorú dekrét s mocou zákona skrátil z 24 na 12 mesiacov a ktorá bola uvádzaná ako december 2027; a elektronickej fakturácie B2B, pri ktorej sa uvádzali kalendárne dátumy, hoci jej lehoty plynú od vyhlášky, ktorá ešte nebola uverejnená. V prípadovej štúdii stropu nájomného 5 z 23 odpovedí, z toho 4 z AI Mode, prezentovalo zrušený strop 2 % ako platné právo.

BOE bolo citované v 5,4 % odpovedí AIO a v 15,8 % odpovedí AI Mode. Fóra a sociálne siete tvorili 13,2 % odkazov v AIO. Skript s regulárnymi výrazmi označil 31 odpovedí (16 AIO, 15 AI Mode); agent AI znovu prečítal každé označenie a každú odpoveď k šiestim faktom, ktorých referenčný stav (ground truth) sme opravili. Druhý čitateľ AI, hodnotiaci naslepo, sa zhodoval v tom, či je odpoveď chybná, s κ 0,86 (κ 0,76 naprieč všetkými kategóriami). V náhodnej vzorke neoznačených odpovedí agent našiel 0 prehliadnutých chýb zo 40.

Náš vlastný prvý prehľad faktov mal rovnaký nedostatok. Kontrola citácií v pôvodných textoch BOE prehliadla zrušenie Najvyšším súdom a zmenu dekrétom s mocou zákona, uverejnené o mesiace skôr, ako aj prechodné obdobie.

Citovať túto štúdiu

Citácia

EasyxLab (2026). Do Google's AI Overviews and AI Mode keep up with Spanish rule changes? About one answer in twenty did not. Study S7. EasyByte Hub S. Coop. Mad. https://github.com/easybytehub/easyxlab/tree/main/studies/s7-aio-spanish-regulation

BibTeX

@techreport{easyxlab_s7,
  title       = {Do Google's AI Overviews and AI Mode keep up with Spanish rule changes? About one answer in twenty did not},
  author      = {{EasyxLab}},
  institution = {EasyByte Hub S. Coop. Mad.},
  number      = {S7},
  year        = {2026},
  url         = {https://github.com/easybytehub/easyxlab/tree/main/studies/s7-aio-spanish-regulation}
}

Abstrakt

Citovať túto štúdiu

Súvisiace štúdie