Halten Googles AI Overviews und AI Mode mit Änderungen spanischer Vorschriften Schritt? Etwa jede zwanzigste Antwort tat es nicht

Wir haben Google von Spanien aus und auf Spanisch 101 Fragen zu 28 spanischen Vorschriften gestellt: zu 27, die sich 2025–2026 geändert haben (Vorschriften zu Mindestlohn, Sozialversicherungsbeiträgen, Renten, Geburtsurlaub, Verbraucherschutz, Straßenverkehr, Wohnen und Rechnungsstellung), und zu einer angekündigten Änderung, die nie eingetreten ist. Jede Antwort der AI Overviews (AIO) und des AI Mode wurde am konsolidierten Recht im Boletín Oficial del Estado in der am 2. Oktober 2026 geltenden Fassung gemessen, nicht an den Seiten, die sie zitiert. An jenem Abend gab es drei Abfragedurchgänge (606 Abfrageergebnisse), erhoben über eine kommerzielle SERP-API. Eine Vorschrift, die 2-%-Obergrenze für Mietanpassungen, wurde am 1. Oktober wieder eingeführt und am 2. Oktober aufgehoben; wir berichten über sie gesondert als Fallstudie. Bei den übrigen 27 erschien bei 77–86 % der Anfragen eine AIO, und der AI Mode antwortete immer.

12 von 240 AIO-Antworten (5,0 %, 95-%-KI 2,9–8,5 %) und 13 von 291 Antworten des AI Mode (4,5 %, KI 2,6–7,5 %) gaben eine überholte Vorschrift als geltend aus, vermischten sie mit der geltenden oder nannten ein festes Datum, das im Gesetz nicht steht. Zwanzig der 25 Fehler betreffen drei Vorschriften, die sich 2026 geändert haben: das staatliche Register für Kurzzeitvermietungen, das der spanische Oberste Gerichtshof im Mai–Juni für nichtig erklärt hat, wurde weiterhin als verpflichtend dargestellt; die Frist für betriebliche Mobilitätspläne, die ein Gesetzesdekret von 24 auf 12 Monate verkürzt hat, wurde mit Dezember 2027 angegeben; und für die B2B-E-Rechnung wurden Kalenderdaten genannt, obwohl ihre Fristen ab einer noch nicht veröffentlichten Ministerialverordnung laufen. In der Fallstudie zur Mietobergrenze stellten 5 von 23 Antworten, 4 davon aus dem AI Mode, die aufgehobene 2-%-Obergrenze als geltendes Recht dar.

Das BOE wurde in 5,4 % der AIO-Antworten und in 15,8 % der Antworten des AI Mode zitiert. Foren und soziale Netzwerke machten 13,2 % der Quellenverweise der AIO aus. Ein Regex-Skript markierte 31 Antworten (16 AIO, 15 AI Mode); ein KI-Agent las jede Markierung erneut, ebenso jede Antwort zu den sechs Fakten, deren Ground Truth wir korrigiert haben. Ein zweiter, verblindeter KI-Leser stimmte bei der Frage, ob eine Antwort falsch war, mit κ 0,86 überein (κ 0,76 über alle Kategorien). In einer Zufallsstichprobe nicht markierter Antworten fand der Agent in 0 von 40 einen übersehenen Fehler.

Unser eigenes erstes Faktenblatt wies denselben Mangel auf. Bei der Prüfung der Zitate in den Originaltexten des BOE wurden eine Nichtigerklärung durch den Obersten Gerichtshof und eine Änderung per Gesetzesdekret übersehen, die Monate zuvor veröffentlicht worden waren, außerdem eine Übergangsfrist.