Große Textdateien bearbeiten

[s-p]

Hallo

Ich habe ein paar sehr große Textdateien die ich mir ansehen muss. Die Dateien sind zwischen 700MB und 1GB groß. Natürlich möchte ich die Dateien nicht komplett lesen, aber ein Programm das solche Dateien einlesen kann und Such- sowie Ersetzung-Funktionen bietet wäre schon ganz nett.

Hat vielleicht jemand eine Idee?

Vielen Dank.

Gruß
Sven

[goecke]

Hallo,

man kann Editoren verwenden (ich glaube vim geht immer), aber normalerweise lesen die die Datei
halt ein (besonders wenn man suchen und ersetzten möchte)

suchen und ersetzten mache ich immer mit sed (es gehen auch awk, perl,... )

Code: Alles auswählen

cat datei.txt  |  sed "s/alter_text/neuer_text/gi" > Neue_datei.txt

mit sowas hat man am wenigsten Probleme.

Wenns sinn macht versuche die relevanten Dinge mit "grep" zu extrahieren,
oder teile eine große Datei in mehrere kleinere mit "split"

gruss
Johannes

[stam]

Zum Suchen und Ersetzen nutze ich üblicherweise rpl (http://www.unixreview.com/documents/s=8989/ur0407h/). Ich habe es allerdings noch nie auf so große Dateien losgelassen...

[Duff]

Also ich würde einfach ein grep über die Datei jagen oder wenn ich sie mir nur anschauen möchte, würde ich ein less verwenden.

Bestimmte Wörter ersetzen kannst du ja z.B. mit sed oder aber du liest dir die Dateien über einen perl-Einzeiler ein und manipulierst sie dann über substitude.

[lsalchow]

was möchtest du denn eigentlich in der datei finden und wie sind die gemeinsamkeiten zwischen den text auszügen welche du finden willst

[Joghurt]

Code: Alles auswählen

cat datei.txt  |  sed "s/alter_text/neuer_text/gi" > Neue_datei.txt

Auch hier ist wieder mal cat überflüssig:

Code: Alles auswählen

sed "s/alter_text/neuer_text/gi" datei.txt > Neue_datei.txt

Übrigens stimmt "Alter_Text" nicht ganz, das ist nämlich eine Regexp. Das merkt man spätestens dann, wenn man alle Punkte durch Leerzeichen ersetzen will