Galnet-Werkzeuge

Stand 2026-11-16 (3300 importiert; Übersetzungsprüfung abgeschlossen: 3300–3305, 3309, 3310)
Bezug archiv (Stand und Übergabe), 2026-11-08_galnet, struktur (Schritt 8)

Skripte und Daten für den Galnet-Import. Quelle der Wahrheit ist diese Seite – wer etwas ändert, speichert die neue Fassung hier.

Dateien

Datei Zweck
galnet_fetch.py Abruf der Frontier-API (Texte aller Sprachen + Bilder) nach galnet_raw/. Läuft bei Oliver, auch für das monatliche Update.
build_galnet.py Erzeugt aus galnet_raw/ + Schlagwörtern das Import-Paket (DE-Seiten, Sprachseiten, Übersichten, Bilder, CSV, Lückenbericht).
edwiki-import.php Spielt Pakete ein (gitbacked aus → entpacken → CSV → … → Suchindex → gitbacked an). Liegt neben doku.php.
names.py Gemeinsame Namensliste für automatische Schlagwort-Vorschläge (wächst mit jedem Jahr).
autotag.py Gibt pro Meldung Vorschläge aus (bekannte Namen, Systeme, unbekannte Personen) – Grundlage für die Durchsicht durch Claude.
common.py Kürzel für die Verschlagwortung (Fraktionen, Konzerne, Personen, Codex, Handlungsstränge, Schiffe) und sys_id() für Systemseiten.
match.py Abgleich altes edwiki.de ↔ Frontier-IDs (Ergebnis match.json, 5,7 MB – nicht im Wiki, lässt sich aus Backup + galnet_raw neu erzeugen).
parse_old.py Zerlegt die alten Tagesseiten (data/pages/galnet/JJJJ/MM/TT.txt) in einzelne Meldungen → old.json.
2024.json Schlagwörter 3310 (Echtzeit 2024), je Frontier-ID.
2025.json Schlagwörter 3311.
2026.json Schlagwörter 3312.
2024.json Übersetzungen von Claude für 3310 (Meldungen ohne Frontier-DE), geprüft – Prüfvermerk

Ablauf (pro Jahr)

  1. Oliver: python3 galnet_fetch.py (holt fehlende/neue Monate und Bilder nach galnet_raw/), dann galnet_raw als ZIP an Claude.
  2. Claude: autotag.py für Vorschläge, Durchsicht, Schlagwörter nach tags/<JJJJ>.json (hier als Seite tags_<JJJJ> ablegen); fehlende Übersetzungen nach translations/<JJJJ>.json.
  3. Claude: python3 build_galnet.py –raw galnet_raw –year <JJJJ> –out paket –old-match match.json –old-media <alte Bilder> –all-years <alle Jahre im Wiki> –start → paket/galnet_paket_<JJJJ>_teilN.zip (Seiten, Bilder, CSV inkl. relations.related). –start nur, wenn die neueste Meldung im Paket steckt.
  4. Oliver: edwiki-import.php aufrufen → Paket(e) einspielen (Formular oder FTP nach data/tmp/edwiki-import/eingang/) → Abschließen → edwiki-git-sync.php. gitbacked schaltet das Skript selbst aus und wieder an.
  5. Claude: prüfen, Lückenbericht auswerten.

Ordner beim Arbeiten

galnet_raw/           Ausgabe galnet_fetch.py (bei Oliver)
build_galnet.py  names.py  autotag.py  tag_year.py
tags/2024.json …      Schlagwörter je Jahr
tags_src/common.py    Kürzel
tags_src/y<JJJJ>.py   Korrekturen je Jahr (ab 3309)
translations/<JJJJ>.json
tools/parse_old.py  tools/match.py   (Abgleich altes edwiki.de)
match.json            Ergebnis des Abgleichs (aus Backup + galnet_raw neu erzeugen)

3300 (Echtzeit 2014, einmaliger Import)

Frontier liefert 3300 nicht über die API. Quellen: GalNet Archive (Fan-Archiv, Blogger-Feed), Olivers alte Übersetzungen aus edwiki.de, Wochenübertragungen aus den Newslettern #30–#40.

Datei Zweck
galnet_3300 alle Skripte des Imports (Feed → Paarung → Glossar/Korrekturen → Schlagwörter → Paket mit build_galnet.py-Funktionen)
Übersetzungsprüfung 3300 Änderungsliste der 56 geprüften Übersetzungen

Ergänzungen ab 3309

Datei Zweck
tag_year.py erzeugt tags/<JJJJ>.json aus automatischen Vorschlägen + Claudes Korrekturen (ersetzt das Abtippen aller Schlagwörter)
y2023.py Korrekturen und Handlungsstränge 3309
tags/2023.json Schlagwörter 3309
translations/2023.json Übersetzungen 3309 (1 × Oliver, 1 × Claude), geprüft – Prüfvermerk
y2022.py Korrekturen und Handlungsstränge 3308
tags/2022.json Schlagwörter 3308
y2021.py Korrekturen und Handlungsstränge 3307
tags/2021.json Schlagwörter 3307
y2020.py Korrekturen und Handlungsstränge 3306 (nur 74 Meldungen: Galnet-Pause Februar–August)
tags/2020.json Schlagwörter 3306
y2019.py Korrekturen und Handlungsstränge 3305
tags/2019.json Schlagwörter 3305
translations/2019.json Übersetzungen 3305 (200 × Oliver, 2 × Claude), vollständig geprüft – Änderungsliste
y2018.py Korrekturen und Handlungsstränge 3304
tags/2018.json Schlagwörter 3304
translations/2018.json Übersetzungen 3304 (195 × Oliver, 12 × Claude), vollständig geprüft – Änderungsliste
y2017.py Korrekturen und Handlungsstränge 3303
tags/2017.json Schlagwörter 3303
translations/2017.json Übersetzungen 3303 (45 × Oliver, 5 × Claude), vollständig geprüft – Änderungsliste
y2016.py Korrekturen und Handlungsstränge 3302
tags/2016.json Schlagwörter 3302
translations/2016.json Übersetzungen 3302 (177 × Oliver, 26 × Claude), vollständig geprüft – Änderungsliste
y2015.py Korrekturen und Handlungsstränge 3301
tags/2015.json Schlagwörter 3301
translations/2015.json Übersetzungen 3301 (724 × Oliver, 78 × Claude), vollständig geprüft – Änderungsliste
match_fix.json Von Hand korrigierte Zuordnungen alte Meldung → Frontier-ID (ab 3301)
weekly.py Wochenberichte (Fraktionslisten) nach festen Satzmustern übersetzen
apply_review.py Übersetzungsprüfung anwenden (Ersetzungen, Glossar-Regeln, Änderungsliste); dazu dump.py, cov.py, filt.py
r2015_*.py, r2016_*.py, r2017_*.py, r2018_*.py, r2019_*.py, r2023_*.py, r2024_*.py Prüfungsmodule 3301–3305, 3309, 3310 (Ergebnis der Durchsicht)
Glossar Verbindliche Begriffe (Referenz Frontier-DE ab 3306)
fix_2015.py, make_2015.py Korrekturen an Olivers Fassungen 3301 und Zusammenbau von translations/2015.json
old_to_translation.py Olivers alte Übersetzungen ins Paketformat + Abgleich mit dem Englischen
spell_de.py Rechtschreibprüfung der Übersetzungen

Ablauf Verschlagwortung ab 3309: python3 autotag.py galnet_raw <JJJJ> lesen → tags_src/y<JJJJ>.py mit Korrekturen schreiben (Kürzel aus common.py) → python3 tag_year.py galnet_raw <JJJJ> y<JJJJ>. Übersetzungen ohne Frontier-DE: Olivers alte Fassung (aus match.json) prüfen und verbessern → source: eigene; sonst neu → source: KI.

Ab 3308: Wiederkehrende Personen und Organisationen stehen in names.py und werden automatisch erkannt (Liste vorher erweitern statt jede Meldung einzeln zu korrigieren). Vor dem Entfernen eines Vorschlags im englischen Text nachsehen, ob der Name wirklich vorkommt. „Pilots Federation“ im Fließtext zählt seit 3307 als Pilotenvereinigung, nicht als Föderation. Nach dem Erweitern von names.py das Vorjahr neu verschlagworten und geänderte Zeilen als Korrektur-CSV mitliefern (3307: 14 Meldungen 3308, v. a. neu erkannte Namen, per galnet_2022_korrektur.csv). Seit 3302 kennt tag_year.py den Schalter {'z': 1} für Wochenberichte (alle automatischen Treffer leeren – Namen kleiner Fraktionen wie „… Guardians“ sind keine Codex-Treffer). tag_year.py bereinigt Systemkandidaten aus dem deutschen Text (Leesti. Diese → Leesti, LHS 157-System → LHS 157).

Korrekturen an bereits importierten Jahren: nur eine CSV galnet_<JJJJ>_korrektur.csv mit den geänderten Zeilen ins Paket legen – keine Seiten nötig.

Prüfung von Olivers alten Übersetzungen (ab 3305): python3 tools/old_to_translation.py galnet_raw <JJJJ> → translations/<JJJJ>_alt.json + Bericht (fehlende Zahlen/Eigennamen, Absatzzahl, Länge); python3 tools/spell_de.py translations/<JJJJ>_alt.json galnet_raw → Tippfehler. Auffälliges im Kontext lesen und korrigieren, dazu eine Stichprobe vollständig gegenlesen (die automatischen Prüfungen finden keine Sinnfehler), fehlende Meldungen neu übersetzen (source: KI), zusammen als translations/<JJJJ>.json. Frontier hat manchmal den englischen Text unter DE geliefert – build_galnet.py erkennt das (Sprachprobe) und nimmt dann die eigene Übersetzung. Eindeutschungen (Ferner Gott, Zwinkernde Katze, Kulturfest der Allianz) bleiben; System-, Firmen- und Stationsnamen bleiben englisch.

Ab 3301: Frontier hat einige Meldungen doppelt veröffentlicht (gleicher Text, 1–4 Tage Abstand, 3301: 27). Beide bleiben als eigene Seiten (Archivgedanke); die Übersetzung des Zwillings wird übernommen. match.py hatte Powers-Update-Hinweise mit Wochenberichten verwechselt – Korrekturen und nachträglich gefundene Zuordnungen stehen in match_fix.json. tag_year.py verwirft Systemkandidaten wie „Federal“, „Imperial“, „Senator's“.

Pakete: build_galnet.py misst die ZIP-Größe beim Schreiben (seit 3302 inkl. geschätztem Zentralverzeichnis, das bei vielen kleinen Seiten rund 200 KB ausmacht) und teilt bei 3,7 MB (Upload-Grenze 4 MB). Seiten in Paketen überschreiben die Wiki-Fassung – Werkzeug-Seiten deshalb vor dem Packen aus dem Wiki holen, nicht aus einer lokalen Kopie.

Übersetzungsprüfung (2026-11-12/13, abgeschlossen): Alle Übersetzungen ohne Frontier-DE (3301–3305 sowie die drei Meldungen aus 3309/3310, Oliver und Claude) wurden vollständig gegen das Englische gelesen, nicht stichprobenartig. Seitdem lautet der Vermerk unter Claudes Übersetzungen „Claude, geprüft“ (KI_NOTE in build_galnet.py). Je Monat ein Modul translations/review/r<JJJJ>_MMx.py (None = in Ordnung, sub = gezielte Ersetzungen, sonst Neufassung, jeweils mit Notizen S/F/B/Sp); apply_review.py wendet sie auf den Stand vor der Prüfung an, gleicht jede geprüfte Meldung per Regeln an das Glossar an und schreibt die Änderungsliste ki:galnet:uebersetzungspruefung_<Jahr>. Das Korrekturpaket enthält nur die geänderten Meldungsseiten (Abgleich gegen den letzten Build) – die CSV bleibt unverändert, weil Titel und Text nicht in struct stehen.

Ab 3304: Behördennamen wie Frontier-DE ab 3306: Imperialer Interner Sicherheitsdienst (IISS), Föderaler Nachrichtendienst (FIA), Föderaler Sicherheitsdienst (FSS) – zuvor irrtümlich englisch gelassen, die Glossar-Regeln korrigieren das auch in 3301–3303.

Ab 3302 zusätzlich: Viele Meldungen 3302 gibt es bei Frontier nur auf Spanisch, Französisch oder Russisch – dump.py zeigt dann diese Fassung, geprüft wird gegen sie. Die Fraktionslisten der Wochenberichte gleicht wkchk.py automatisch mit dem Original ab. Dubletten erkennt dump.py am Originaltext (die gleichlautende Einleitung der Wochenberichte hatte zuvor falsche Dubletten erzeugt). Eine Meldung war falsch zugeordnet (Olivers Gesundheitsbericht lag auf einer Powerplay-Ankündigung) und wurde neu übersetzt.