So arbeiten wir
Woher die Fragen und die Zahlen kommen, wie eine Kurzantwort entsteht und wo die Grenzen liegen. In einfachen Sätzen.
Woher die Fragen stammen
Die 204 Fragen stammen aus dem Original der Stadt Wien. Wir übernehmen den Text wörtlich. Auch die Teilfragen und die Themenfelder kommen aus dem Original.
- Titel
- Wiener Forschungsfragen: Wissen für eine klimagerechte Stadt. Forschungskatalog 2025
- Herausgeber
- Magistrat der Stadt Wien
- Fundstelle
- urn:nbn:at:AT-WBR-1934179
- Abgerufen
- 8. Mai 2026
- Format
- ALTO v3 (XML), deutsche Fassung, 61 Seiten
- Prüfsumme
- 2f3e08ba4443…
Wie wir Arbeiten finden
Der Korpus ist die Sammlung der Arbeiten, die wir zu einer Frage finden. Für jede Frage speichern wir eine Suchanfrage aus dem Fragetext.
Die Suche läuft in OpenAlex, einem offenen Verzeichnis wissenschaftlicher Arbeiten. Wir speichern die Antwort, wie sie kommt, mit Datum und Prüfsumme.
„Treffer im Korpus“ ist die Zahl der Arbeiten, die eine gespeicherte Suche in OpenAlex findet. OpenAlex ist ein offenes Verzeichnis wissenschaftlicher Arbeiten. Die Zahl sagt nichts über die Qualität der Arbeiten und nicht, ob sie die Frage beantworten.
Wir zählen vier Zahlen getrennt: alle Treffer, Treffer mit einer Wiener Einrichtung, Treffer ab 2020 und frei zugängliche Treffer. Wir rechnen sie nie zu einem Gesamtwert zusammen.
Wie wir zählen
„Treffer im Korpus“ heißt: So viele Arbeiten in OpenAlex enthalten die Suchwörter einer Frage in ihrem Titel oder ihrer Kurzfassung. Mehr sagt die Zahl nicht.
- Die Zahlen einer Frage stammen aus einer Suche: Suche auf Englisch in Titel und Kurzfassung, Arbeiten ab 2015. Es zählen Artikel, Übersichtsarbeiten, Buchkapitel, Berichte und Dissertationen.
- Wir zeigen vier Zahlen getrennt: alle Treffer, davon ab 2020, davon frei zugängliche und davon mit einer Wiener Einrichtung. Jede Zahl ist eine eigene Abfrage bei OpenAlex.
- Zu jeder Frage gibt es eine englische und eine deutsche Suche. Wir rechnen sie nicht zusammen, weil dieselbe Arbeit in beiden vorkommen kann. Die deutsche Suche findet meist viel weniger. Sie ist noch nicht für alle Fragen gezählt; wo sie gezählt ist, steht sie als eigene Zeile daneben.
- „Mit Wiener Einrichtung“ zählt Arbeiten, bei denen eine Einrichtung aus unserer eingefrorenen Liste unter den Zugehörigkeiten steht: 100 Einrichtungen, Stand 11. November 2026. Personen laden wir nicht.
Was die Zahl nicht sagt
- Ein Treffer ist nicht geprüft und nicht bewertet; er muss die Frage nicht beantworten.
- Gezählt wird nur, was OpenAlex kennt. Berichte der Stadt, graue Literatur und die Systeme der Häuser fehlen, und deutsche Arbeiten sind dort selten.
- Eine kleine Zahl kann an der Suche liegen, nicht an der Forschung.
- Ein Werk über Wien ohne Wiener Einrichtung zählt bei „mit Wiener Einrichtung“ nicht.
Woher die Suchwörter kommen: Die Suchwörter hat ein Sprachmodell aus dem Fragetext vorgeschlagen; kein Mensch hat sie beurteilt. Die gespeicherten Suchanfragen stehen auf der Seite jeder Frage.
Zurückgehaltene Fragen: 0 Fragen zählen wir bewusst noch nicht. Sie selbst oder eng verwandte Fragen dienen später dazu, unser Verfahren zu messen. Bis dahin fassen wir sie nicht an.
Wie eine Kurzantwort entsteht
Eine Kurzantwort entsteht in einem Lauf mit neun Stufen. Jede Stufe hat eine feste Prüfung. Fällt eine Kurzantwort durch, veröffentlichen wir sie nicht und nennen den Grund. Am Text schreibt niemand von Hand.
- 1TeilfragenEin Sprachmodell zerlegt die Frage in Teilfragen, die man prüfen kann.
- 2SucheFür jede Teilfrage läuft eine gespeicherte Suche. Wir speichern alle Treffer.
- 3AuswahlFeste Regeln und ein Relevanz-Urteil wählen aus. Den Grund je Arbeit speichern wir.
- 4VolltextWir holen den Volltext. Programmcode prüft, ob er zur Arbeit passt: Kennung (DOI) und Titel stehen am Anfang, danach folgt ein erkennbarer Hauptteil, und es ist keine Zugangs- oder Anmeldeseite. Ganz sicher ist das nicht: Ein falscher Text kann diese Regeln trotzdem erfüllen.
- 5BelegeAus dem Volltext entstehen wörtliche Zitate mit Fundstelle. Programmcode prüft jedes Zitat.
- 6AussagenAus den Belegen entstehen Aussagen. Jede hat einen Typ und verweist auf ihre Belege.
- 7TextAus den Aussagen entsteht die Kurzantwort in fester Gliederung. Jeder Satz gehört zu einer Aussage.
- 8PrüfungProgrammcode prüft feste Regeln: Zitate, Zahlen und Wortwahl. Später soll zusätzlich ein zweites Sprachmodell urteilen. Im Prototyp läuft es noch nicht. Sein Urteil hieße „Modellurteil“.
- 9FreigabeMenschen beurteilen die Kurzantwort. Erst dann kann sie „vorgeprüft“ oder „fachlich geprüft“ heißen.
Was die Status bedeuten
- erzeugt
- Diese Kurzantwort hat ein Verfahren mit KI erstellt, und sie hat die festen Prüfungen durch Programmcode bestanden; ein Mensch hat sie noch nicht beurteilt.
- vorgeprüft
- Zwei Personen, die nicht an der Kurzantwort mitgearbeitet haben, haben sie unabhängig voneinander beurteilt; ein Urteil von Fachleuten steht noch aus.
- fachlich geprüft
- Zwei Fachleute haben diese Kurzantwort unabhängig voneinander beurteilt und keinen schweren Mangel gefunden.
- überholt
- Es gibt eine neuere Fassung dieser Kurzantwort; diese Fassung bleibt zum Nachlesen abrufbar.
- nicht erzeugbar
- Zu dieser Frage konnten wir keine belegte Kurzantwort erstellen; den Grund nennen wir darunter.
Ein Urteil eines Sprachmodells führt nie zu einem Status mit „geprüft“. Wir nennen es immer „Modellurteil“. Kurzantworten aus diesem Prototyp tragen höchstens den Status „erzeugt“.
Was diese Seite nicht tut
- Sie gibt keine Ratschläge und sagt nicht, welche Frage sich für einen Pilot eignet.
- Sie reiht keine Personen und keine Einrichtungen.
- Sie rechnet keine Zahlen zu einer Gesamtnote zusammen und zeigt keine Ampeln.
- Sie behauptet nicht, dass es zu einer Frage keine Forschung gibt, nur, dass wir keine gefunden haben.
Wie Sie die Daten deuten und was daraus folgt, entscheiden Sie.
Grenzen
Die Literatur für diese Kurzantwort stammt nur aus OpenAlex. Deutschsprachige Literatur ist dort dünn vertreten. Die Systeme der Wiener Forschungseinrichtungen und graue Literatur, etwa Berichte von Verwaltungen, fehlen bis Phase 2. Was wir nicht gefunden haben, kann es trotzdem geben.
- Wir suchen nur in OpenAlex. Andere Verzeichnisse folgen später.
- Deutschsprachige Arbeiten sind dort selten. Was auf Deutsch erscheint, fehlt oft.
- Wir lesen nur frei zugängliche Volltexte.
- Personen und Förderungen zeigen wir noch nicht.
Welche Quellen wir nutzen und welche nicht, steht unter Quellen.