Skip to content

fix(testdata): Konsolenausgabe des Generators auf UTF-8 stellen (RO/PT/FR unter Windows) - #319

Merged
Jaegerfeld merged 1 commit into
beta/ux-redesignfrom
beta/fix-console-utf8
Oct 31, 2026
Merged

Jaegerfeld merged 1 commit into
beta/ux-redesignfrom
beta/fix-console-utf8

Conversation

@Jaegerfeld

Copy link
Copy Markdown
Owner

Befund

Beim Rauchtest des neu gebauten Tester-Pakets (Dev-Build 41216428862 auf ab5df70) brach die Erzeugung eines rumänischen Datenraums aus dem gebündelten Python ab:

python -m testdata_generator --scenario portfolio --structure small --story calm --lang ro --seed 7 --output …
UnicodeEncodeError: 'charmap' codec can't encode character 'ă' in position 8

Ursache: Die Windows-Konsole des Pakets schreibt in cp1252; die Fortschrittstexte der Sprachen RO, PT und FR enthalten Zeichen außerhalb dieses Zeichensatzes („Spațiu de date"). Der Fehler steckt auch im Paket vom 30.10. und ist keine Folge von #317. Mit PYTHONUTF8=1 lief derselbe Aufruf durch (240 Elemente, 1,9 s).

Änderung

  • testdata_generator/__main__.py: ensure_utf8_console() stellt stdout und stderr vor dem Start auf UTF-8 mit errors="replace". Streams, die kein reconfigure haben (Testdoubles, StringIO), bleiben unberührt; bereits UTF-8-kodierte Streams ebenso.
  • tests/testdata_generator/unit/test_console_encoding.py: Streamwechsel auf cp1252-Wrapper, Unverändertheit von UTF-8- und StringIO-Streams, Ende-zu-Ende-Lauf des Tester-Befehls mit PYTHONIOENCODING=cp1252.
  • CHANGELOG: Eintrag unter Unreleased / Fixed.

Prüfung

  • ruff: sauber · mypy: sauber · pytest tests/testdata_generator/unit/test_console_encoding.py + test_cli.py: 24 bestanden.
  • Nicht geändert: die Startdateien (*.bat) im Dev-Build; der Fix greift im Code und damit auch für Starts aus dem Launcher.

Nach dem Merge

Dev-Build auf beta/ux-redesign erneut per workflow_dispatch starten und das Tester-Paket neu laden; das Paket vom 31.10. in Downloads trägt den Fehler noch.

🤖 Generated with Claude Code

Aus dem Tester-Paket (gebuendeltes Python, Windows-Konsole cp1252) brach
`python -m testdata_generator --scenario portfolio --lang ro` mit
UnicodeEncodeError an "Spatiu de date" ab; kein Datenraum entstand.
Betroffen sind alle Sprachen mit Zeichen ausserhalb von cp1252 (RO, PT, FR).

__main__.py stellt stdout und stderr vor dem Start auf UTF-8
(ensure_utf8_console, errors="replace"); Streams ohne reconfigure bleiben
unberuehrt. Tests: Streamwechsel, UTF-8/StringIO unveraendert, Ende-zu-Ende
mit PYTHONIOENCODING=cp1252. CHANGELOG unter Unreleased/Fixed.

Befund beim Rauchtest des Pakets vom 31.10.2026; im Paket vom 30.10.
bereits vorhanden (keine Folge von #317).

Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>
@Jaegerfeld
Jaegerfeld merged commit d487a8e into beta/ux-redesign Oct 31, 2026
1 check passed
@Jaegerfeld
Jaegerfeld deleted the beta/fix-console-utf8 branch October 31, 2026 16:47
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant