Alle LF finden mit grep, perl ...

[wartburgritter]

Hallo zusammen, bin ein wenig am verzweifeln. Suche und probiere seit 2 Stunden

folgendes findet mir alle Zeilen in allen Dateien unterhalb des aktuellen Verzeichnes in denen irgendeinstringohneleerzeichen vorkommt.

$ grep -r irgendeinstringohneleerzeichen

Ich versuche genau dies für LineFeeds zu machen. Ich will sie nicht ersetzten, und will nur wissen welche Dateien welche haben. Arbeite an einem Projekt mit, bei dem alle Zeilenumbrüche mit CRLF sind, aber es hat zwischendurch einige mit LF. Ich würd gern diese mal anzeigen.

gruss bernd

[Meillo]

Ich versuche genau dies für LineFeeds zu machen. Ich will sie nicht ersetzten, und will nur wissen welche Dateien welche haben.

Du findest sie ganz einfach mit:

Code: Alles auswählen

grep \$

(Jede nicht-leere nicht-binaere Datei in Unix sollte mindestens einen LF (im Unix-Jargon ``Newline'') haben.)

Arbeite an einem Projekt mit, bei dem alle Zeilenumbrüche mit CRLF sind, aber es hat zwischendurch einige mit LF. Ich würd gern diese mal anzeigen.

Alle Dateien mit CRLF findest du so:

Code: Alles auswählen

grep '^M$'

Alle anderen Textdateien sind dann wohl diejenigen die du suchst.

Vielleicht hilft dir dabei auch unix2dos:
https://en.wikipedia.org/wiki/Unix2dos

[wartburgritter]

Besten Dank für die Antwort.

Alle Dateien mit CRLF findest du so:

Code: Alles auswählen

grep '^M$'

findet bei mir nichts

Die Invertierung

Code: Alles auswählen

grep -v '^M$'

findet wieder alle Zeilenumbrüche

Code: Alles auswählen

grep \$

Findet richtigerweise alle Zeilenumbrüche egal ob LF oder CRLF.

Ach in vi lassen sich die Zeilenumbrüche darstellen, dazu einfach die datei im unix-format öffnen, das heisst die CR werden als ^M angezeit und LF gar nicht

Code: Alles auswählen

:e ++ff=unix

Mhh, genau so gings mir x-Sachen schon probiert nichts hat bisher geklappt ...

gruss bernd alias der wartburgitter

EDIT
Testdatei unter http://www.b75.ch/download/LineFeedTest.zip. Musste es zippen sonst ändert der Server oder wer auch immer wieder die Zeilenumbrüche. Vor den Zeilenumbrüchen steht was es für einen Zeilenumbruch hat.

[linuxCowboy]

Alle Dateien mit CRLF findest du so:

Code: Alles auswählen

grep '^M$'

findet bei mir nichts

'^M$' meint hier C-v Enter. (' Control+v Enter $ ')

du suchst also:

Code: Alles auswählen

grep -v '^M$' LineFeedTest.txt # literal
LF
LF
LF
LF
LF

es geht auch:

Code: Alles auswählen

grep -vP '\xd$' 

[wartburgritter]

'^M$' meint hier C-v Enter. (' Control+v Enter $ ')

Vielen Vielen Dank funktioniert hier auch , kannst evtl. ne kleine Erklärung geben wo das herkommt oder link schicken? Auf "Ctrl + v + Enter" wäre ich jetzt im Leben nie gekommen ?! Da hab ich ne Wissenslücke.

gruss bernd der wartburgritter

[linuxCowboy]

Das ist ein bash readline command.

Code: Alles auswählen

bind -q quoted-insert
quoted-insert can be invoked via "\C-q", "\C-v".

Infos: help bind

Code: Alles auswählen

quoted-insert (C-q, C-v)
    Add the next character typed to the line verbatim.  This is how to insert characters like C-q, for example.

Infos: man bash

Den Steuercode erzeugst du mit Control und dem entsprechenden Buchstaben im Alphabet.

A=1, B=2,... J=10=0A,... M=13=0D=Enter,...

Grüße,

[wartburgritter]

Danke für die Info

[newdeb]

Du kannst auch nach dem literalen '^M' greppen, wenn du ein cat -v Filter vorweg stellst

Code: Alles auswählen

cat -v test.txt | grep '\^M$'
AAA^M
BBB^M
CCC^M

[wartburgritter]

es geht auch:

Code: Alles auswählen

grep -vP '\xd$' 

Obiges findet hier seit monaten zeilen perfekt zeilen mit unix line endings (lf). Weiss jemand wie das kommando für windows line endings (cr lf) und osx line endings lautet?

[Meillo]

es geht auch:

Code: Alles auswählen

grep -vP '\xd$' 

Obiges findet hier seit monaten zeilen perfekt zeilen mit unix line endings (lf). Weiss jemand wie das kommando für windows line endings (cr lf) und osx line endings lautet?

LOL, die Frage ist echt zu lustig, wenn man verstanden hat, was das Kommando macht!

Aber gute Witze zu erklaeren macht irgendwie keinen rechten Spass ...


(Tipp: Die Manpage zu grep(1) koennte im Bezug auf die Flags weiterhelfen.)

[eggy]

Falls Ihr git benutzt, lies mal den Abschnitt "Formatierungen und Leerzeichen",
(core.autocrlf sagt git wie es mit "Windowszeilenenden" umgehen soll):
https://git-scm.com/book/de/v1/Git-indi ... figuration

[Meillo]

es geht auch:

Code: Alles auswählen

grep -vP '\xd$' 

Obiges findet hier seit monaten zeilen perfekt zeilen mit unix line endings (lf). Weiss jemand wie das kommando für windows line endings (cr lf) und osx line endings lautet?

Okay, jetzt nochmal konstruktiv:

Das von dir gepostete Kommando sucht tatsaechlich Windowszeilenumbrueche und invertiert dann (mittels `-v') das Ergebnis, wodurch du alle nicht-Windows-Umbrueche ausgegeben bekommst, und das sind wiederum die Unix-Umbrueche. Wenn du nun die Zeilen mit Windows-Umbruch haben willst, dann musst du nur das `v' in dieser Zeile entfernen! (Das ist halt wie wenn man fragt, wie man den Absolutbetrag von `-15' herausfindet.)

MacOS X Zeilenenden sind die gleichen wie die von Unix, weil das MacOS mit dem `X' auf Unix basiert. Meinen tust du wohl eher alte MacOS-Zeilenenden, die nur aus `\r' bestehen. Ich habe damit keine Praxiserfahrung gesammelt, vermute jedoch, dass die aus Unix-Sicht nicht als Zeilentrenner angesehen werden und du deshalb (Unix-)zeilenorientierte Tools wie grep(1) nicht dafuer verwenden kannst.

[wartburgritter]

@Meillo:

danke für die Erläuterungen.

gruss bernd alias der wartburgritter

[cosmac]

MacOS X Zeilenenden sind die gleichen wie die von Unix, weil das MacOS mit dem `X' auf Unix basiert. Meinen tust du wohl eher alte MacOS-Zeilenenden, die nur aus `\r' bestehen. Ich habe damit keine Praxiserfahrung gesammelt, vermute jedoch, dass die aus Unix-Sicht nicht als Zeilentrenner angesehen werden und du deshalb (Unix-)zeilenorientierte Tools wie grep(1) nicht dafuer verwenden kannst.

Witzig, das ist echt nicht wirklich vorgesehen. Wir basteln uns ein MacOS (File):

Code: Alles auswählen

cosmac@turtur:/tmp$ echo -e -n 'blog.fefe.de\rimgur.com\rdf.de\r' > foo
cosmac@turtur:/tmp$ file foo
foo: ASCII text, with CR line terminators
cosmac@turtur:/tmp$ more foo
df.de.com.de
cosmac@turtur:/tmp$ cat foo
cosmac@turtur:/tmp$ view foo

blog.fefe.de^Mimgur.com^Mdf.de^M

"foo" [noeol] 1L, 29C
~

[Meillo]

Witzig, das ist echt nicht wirklich vorgesehen. Wir basteln uns ein MacOS (File):

Warum auch? In Unix ist das Newline-Zeichen der Zeilentrenner ... warum haette man dort Kompatibilitaetscode fuer eine anderen Art von Zeilentrenner einbauen sollen, deren Betriebssystem erst mehr als zehn Jahre spaeter entwicklet worden ist?

Viel seltsamer ist, dass Mac OS nicht auch das Newline-Zeichen verwendet hat ... und ebenso seltsam ist, dass DOS die CRLF-Kombination verwendet, wo es in seiner Kultur im Vergleich zu Unix viel weiter weg ist von Typewritern, auf die diese Kombination gruendet.

[cosmac]

In Unix ist das Newline-Zeichen der Zeilentrenner ... warum haette man dort Kompatibilitaetscode fuer eine anderen Art von Zeilentrenner einbauen sollen, deren Betriebssystem erst mehr als zehn Jahre spaeter entwicklet worden ist?

Weil es Unix ist Die zehn Jahre sind natürlich ein kleines Problem...

ebenso seltsam ist, dass DOS die CRLF-Kombination verwendet, wo es in seiner Kultur im Vergleich zu Unix viel weiter weg ist von Typewritern, auf die diese Kombination gruendet.

Vielleicht war das keine bewusste Entscheidung, man hat den ASCII Code übernommen und da ist es eben so Typewriter-mäßig definiert. Die Kombination ist aber auch für Textkonsolen aus Glas praktisch, man braucht ja beide Funktionen einzeln.