Einlesen Datei per Script

[Codo]

Hallo,

ich habe ein Batch-Skript erstellt, welches eine Datei sequentiell einlesen und gewünschte Sätze in eine andere Datei ausgeben soll. Das funktioniert soweit auch mit Testdateien. Meine Echtdatei hat eine Größe von ca 2GB. Wenn ich diese bearbeiten lasse, dann kommt weder ein Fehler noch funktioniert das ganze richtig. Die Ausgabedatei wird nicht erstellt. Für mich sieht es so aus, als ob die Dateigröße das Hindernis ist. Kann mir das jemand erklären und eventuell einen Lösungsansatz liefern?

Das Einlesen erfolgt mit: for /f "delims=" %%x in (%datein%) do (aktionen)

VG

 

[Wolf.J]

Für mich sieht es so aus, als ob die Dateigröße das Hindernis ist.

Das könnte sein, wenn die Output-Datei auf einen fat32-formatierten Datenträger geschrieben werden soll.
Eine sonstige Größenbeschränkung bei der Batchverarbeitung ist mir nicht bekannt.
Kann es sein, dass in einigen Datensätzen der Delimiter nicht richtig erkannt wird?

 

[Codo]

Hallo Wolfgang,

das hatte ich auch schon auf dem Schirm. Zunächst handelt es sich um einen NTFS-Datenträger. Da sollte diese Größe noch keine Rolle spielen. Zum anderen habe ich die grosse Datei nur eingekürzt für den Test, wo es auch funktionierte. Die Datei wurde durch einen Automatismus erzeugt. Damit sollte somit kein Delimiter-Fehler vorliegen.

Gibt es noch eine andere Möglichkeit des Einlesens?

VG Codo

 

[Wolf.J]

Gibt es noch eine andere Möglichkeit des Einlesens?

Jede Menge, die Frage ist aber was Du an Möglichkeiten zur Verfügung hast.
Derartige Aufgaben habe ich aus Bequemlichkeit gerne mit Excel-Macros gemacht, wenn eine definierte Struktur gegeben war.
Oder Du schreibst ein Mini-Programm in einer Dir geläufige Script- oder Programmiersprache.
Recht mächtige Scriptsprachen sind z.B. Perl und REXX.
Aber das ist ja nicht die Lösung, im Batch sollte es ja auch funktionieren.
Den Fehler kann ich mit den vorhandenen Informationen aber nicht identifizieren.

 

[Codo]

Dennoch danke. Ich bin auf die Möglichkeiten des Betriebssystems angewiesen und kann nichts anderes installieren bzw benutzen.
Weitere Tests bestätigen aber vermutlich das Größenproblem. Testweise habe ich Sätze aus der Datei gelöscht, so dass die Größe etwa 1,8 GB beträgt. Da funktioniert es, dauert aber viel zu lange. Interessant wäre an der Stelle wirklich die maximale Größe.
Nochmals vielen Dank für dein Mitdenken.

 

[Wolf.J]

Dass die sequentielle Verarbeitung einer derart großen Datei elend lange dauert, ist schon klar.
Möglicherweise hilft es ja, die Datei vorher zu teilen und die Output-Datei mit append zu öffnen, also an den bereits geschriebenen Teil anzuhängen.

 

[Codo]

Kann ich ja mal versuchen. Perl steht mir leider nicht mehr zur Verfügung.

 

[Argor]

Was ist mit der Powershell ? Wäre eine Überlegung wert denke ich.

 

[Codo]

Ja, wäre es. Nur bin ich da nicht Firm. Muss ich erst recherchieren.