- Startseite
- Tools
- JSONL-Splitter
JSONL-Splitter
Teilen Sie große JSONL-Dateien (JSON Lines) nach Zeilenanzahl oder Dateigröße in kleinere Dateien auf. Die Verarbeitung erfolgt zu 100 % im Browser. Ihre Daten verlassen den Browser zu keinem Zeitpunkt.
JSONL-Eingabe
Ziehen Sie eine .jsonl-Datei hierher oder klicken Sie, um eine Datei auszuwählen
Unterstützt .jsonl, .ndjson, .json, .txt
Optionen zum Aufteilen
Ergebnis der Aufteilung
JSONL-Inhalt einfügen oder ablegen, Optionen konfigurieren und aufteilen
So teilen Sie JSONL-Dateien auf
Laden Sie Ihre große JSONL-Datei hoch oder fügen Sie deren Inhalt in das Eingabefeld ein. Das Tool unterstützt .jsonl-, .ndjson-, .json- und .txt-Dateien beliebiger Größe.
Wählen Sie, ob Sie die Datei nach Zeilenanzahl (z. B. 1000 Zeilen pro Datei) oder nach Dateigröße (z. B. 10 MB pro Datei) aufteilen möchten. Der Splitter verarbeitet jede Zeile einzeln, sodass jeder JSON-Datensatz vollständig erhalten bleibt.
Nach der Aufteilung können Sie die Teildateien einzeln herunterladen oder mit „Alle als ZIP herunterladen“ alle Teile in einem einzigen Archiv speichern. Jede Ausgabedatei ist eine gültige JSONL-Datei und lässt sich sofort weiterverwenden.
Nach Zeilen oder Größe aufteilen – warum nicht einfach split -b?
Ein JSONL-Splitter bietet vor allem eine Garantie: Kein Datensatz wird in der Mitte zerschnitten. Eine einfache Aufteilung nach Bytes kann das nicht gewährleisten. Die drei Ansätze im Vergleich:
| Methode | Garantie | Geeignet für |
|---|---|---|
| Nach Zeilenanzahl (dieses Tool) | Jeder Teil enthält genau N vollständige Datensätze | Zielsysteme, die pro Datensatz abrechnen oder die Anzahl der Datensätze begrenzen – API-Batches, Teststichproben |
| Nach Zielgröße mit Trennung an Zeilengrenzen (dieses Tool) | Teildateien nahe am Größenlimit; getrennt wird nur an Zeilenumbrüchen | Upload-Limits in Megabyte – jede Teildatei bleibt gültiges JSONL |
| Aufteilung nach Bytes – split -b 100M | Keine: Die Trennung erfolgt fast immer mitten in der Bytefolge eines Datensatzes | Für JSONL nie geeignet – jede Teildatei außer der ersten beginnt in der Regel mit einem halben Datensatz |
Teilgrößen für die OpenAI Batch API bestimmen
Der typische Anwendungsfall im Jahr 2026: Die OpenAI Batch API begrenzt eine Batch-Eingabedatei auf 50,000 Anfragen und 200 MB. Beide Limits müssen gleichzeitig eingehalten werden. Berechnen Sie die Größe der Teildateien daher anhand Ihrer eigenen Daten:
# Datei vermessen
wc -l batch_input.jsonl # → e.g. 120,000 requests
du -m batch_input.jsonl # → e.g. 310 MB
# Zeilen pro Teil = floor(min(50000, 120000 × 200/310))
# = floor(min(50000, 77419)) = 50000 → Größe jedoch prüfen:
# 50000 Zeilen ≈ 129 MB ✓ unter 200 MB — daher bei 50,000 Zeilen aufteilen
split -l 50000 batch_input.jsonl part_
# Ergebnis: part_aa, part_ab, part_ac — 3 gültige Batch-DateienDieselbe Berechnung gilt für jedes Zielsystem, das sowohl die Zeilenanzahl ALS AUCH die Dateigröße in Megabyte begrenzt. Im Browser-Tool legen Sie die Zeilenanzahl pro Teil fest. Das Tool zeigt Ihnen vor dem Download die Größe jeder Teildatei an – Sie müssen also nicht selbst rechnen.
Was bedeutet es, eine JSONL-Datei aufzuteilen?
Beim Aufteilen einer JSONL-Datei (JSON Lines) entstehen aus einer großen Datei mehrere kleinere Dateien, die jeweils einen Teil der ursprünglichen Datensätze enthalten. Da jede Zeile ein eigenständiges JSON-Objekt ist, lässt sich die Datei einfach aufteilen, ohne einen Datensatz zu zerschneiden.
Das ist nötig, wenn Sie mit Machine-Learning-Plattformen arbeiten, die die Upload-Größe begrenzen, mit Batch-APIs, die pro Anfrage nur eine bestimmte Anzahl von Datensätzen akzeptieren, oder mit Datenpipelines, die kleinere Eingabedateien effizienter verarbeiten. Durch die Aufteilung können Sie Daten in überschaubaren Teilen verarbeiten, ohne deren Inhalt zu verändern.
Häufige Anwendungsfälle
- Limits der OpenAI Batch API
- Teilen Sie große JSONL-Dateien auf, um die Limits der OpenAI Batch API einzuhalten (100 MB pro Datei, 50.000 Anfragen pro Batch).
- ML-Trainingsdaten aufteilen
- Teilen Sie große Trainingsdatensätze in Trainings-, Validierungs- und Testdaten oder in gleich große Teile für verteiltes Training auf.
- Parallele Verarbeitung
- Teilen Sie JSONL-Dateien auf, um die Teile parallel mit mehreren Workern, Threads oder Serverless-Funktionen zu verarbeiten.
- Upload-Limits einhalten
- Teilen Sie große JSONL-Exporte in kleinere Dateien auf, die die Upload-Limits der jeweiligen Plattform einhalten (AWS S3 Multipart, GitHub, E-Mail-Anhänge).
- Daten schrittweise laden
- Teilen Sie große Datensätze in kleinere Batches auf, um sie schrittweise in Datenbanken oder Data Warehouses zu laden und dabei Timeouts zu vermeiden.
- Einfacher mit Git versionieren
- Teilen Sie sehr große JSONL-Datendateien für die Versionsverwaltung mit Git in kleinere Teile auf. So vermeiden Sie Warnungen zu großen Dateien und machen Diffs besser lesbar.
Häufige Fehler und Lösungen
Beim Aufteilen entstehen leere Dateien
Das kann passieren, wenn die eingestellte Zeilenanzahl pro Datei größer ist als die Gesamtzahl der Zeilen. Verringern Sie die Zeilenanzahl pro Datei oder teilen Sie die Datei stattdessen nach Größe auf.
Beim Aufteilen nach Größe entstehen unterschiedlich große Dateien
Beim Aufteilen nach Dateigröße kann die letzte Teildatei kleiner als die Zielgröße sein, da Zeilen nie mitten in einem Datensatz getrennt werden. Jede Datei enthält garantiert nur vollständige JSON-Zeilen.
Der Browser wird bei sehr großen Dateien langsam
Bei Dateien über 500 MB kann der Browser während der Verarbeitung langsamer werden. Bei extrem großen Datensätzen sollten Sie erwägen, die Datei mit Kommandozeilentools wie 'split' oder 'wc -l' aufzuteilen und sie anschließend mit diesem Tool zu überprüfen.
Häufig gestellte Fragen
Sind meine Daten beim Aufteilen sicher?
Ja. Die gesamte Aufteilung erfolgt lokal in Ihrem Browser mit JavaScript. Es werden keine Daten an einen Server gesendet. Ihre JSONL-Inhalte verlassen zu keinem Zeitpunkt Ihr Gerät.
Gibt es eine Begrenzung der Dateigröße?
Es gibt keine feste Obergrenze. Der Splitter kann Dateien mit mehreren hundert Megabyte verarbeiten. Die Leistung hängt von Ihrem Browser und dem verfügbaren Arbeitsspeicher Ihres Geräts ab.
Bleibt die Reihenfolge der Datensätze beim Aufteilen erhalten?
Ja. Die Datensätze werden der Reihe nach aufgeteilt. Die erste Datei enthält die ersten N Zeilen, die zweite die nächsten N Zeilen und so weiter. Die Reihenfolge bleibt erhalten, und es werden keine Datensätze dupliziert.
Kann ich eine Datei gleichzeitig nach Zeilenanzahl und Dateigröße aufteilen?
Derzeit können Sie jeweils nur nach einem Kriterium aufteilen. Wenn Sie beide Limits einhalten müssen, teilen Sie die Datei zunächst nach dem strengeren Limit auf. Prüfen Sie anschließend, ob die entstandenen Dateien beide Anforderungen erfüllen.
Was passiert mit leeren Zeilen in der JSONL-Datei?
Leerzeilen bleiben beim Aufteilen erhalten. Enthält Ihre JSONL-Datei Leerzeilen zwischen den Datensätzen, erscheinen diese auch in den Ausgabedateien an ihrer ursprünglichen Position. Bei Bedarf können Sie Leerzeilen vor dem Aufteilen mit unserem JSONL-Validator entfernen.
Kann ich die aufgeteilten Dateien wieder zusammenführen?
Ja. Da jede Teildatei eine gültige JSONL-Datei ist, können Sie die Dateien aneinanderhängen, um die ursprüngliche Datei wiederherzustellen. Verwenden Sie dazu auf der Kommandozeile 'cat part_*.jsonl > merged.jsonl'. Alternativ können Sie die Dateien mit unseren JSONL-Tools zusammenführen.
Wie werden die aufgeteilten Dateien benannt?
Die Teildateien erhalten eine fortlaufende Nummer im Dateinamen (z. B. part_001.jsonl, part_002.jsonl). Beim Download als ZIP sind alle Teile in einem einzigen Archiv enthalten.
Wie funktioniert die Aufteilung nach Dateigröße intern?
Bei der Aufteilung nach Dateigröße werden Zeilen hinzugefügt, bis die Zielgröße erreicht ist. Dann wird die aktuelle Datei geschlossen und mit der nächsten Zeile eine neue Datei begonnen. Zeilen werden nie auf mehrere Dateien verteilt. Deshalb kann eine Teildatei etwas größer oder kleiner als die Zielgröße sein.
Verwandte Tools & Anleitungen
Führen Sie mehrere JSONL-Dateien mit Deduplizierung zu einer Datei zusammen.
Erfahren Sie, wie Sie JSONL-Dateien für die Batch API von OpenAI strukturieren. Mit Anfrageformat, Parsen der Antworten und einem vollständigen Workflow mit Codebeispielen.
Strategien für JSONL-Daten im Gigabyte-Bereich: Lesen per Streaming, Speicherverwaltung, Aufteilen von Dateien, Komprimierung und Online-Tools.
Validieren Sie JSONL-Dateien Zeile für Zeile und erkennen Sie Syntaxfehler, Probleme mit der Zeichenkodierung und Formatfehler sofort.
Öffne .jsonl- und .ndjson-Dateien direkt in deinem Editor als schnelle, durchsuchbare Tabelle. Für Dateien, die zu groß zum Durchscrollen sind, und für Logs, in die laufend neue Einträge geschrieben werden.