splitten csv-Dateien

[klak]

Hallo *,

ich muss csv-Dateien aufsplitten:

aus

2554 2008-02-29 18:15 fibu_20080229_170010.csv
2554 2008-02-29 18:15 fibu_20080229_170020.csv

soll werden:

1750 2008-02-29 18:18 fibu_20080229_170010-01.csv
804 2008-02-29 18:18 fibu_20080229_170010-02.csv
1750 2008-02-29 18:18 fibu_20080229_170020-01.csv
804 2008-02-29 18:18 fibu_20080229_170020-02.csv

split ist klar - aber wie biege ich die Namen wieder hin.

Dank und Gruss
klak

EDIT: ps: muss unter Linux und AIX laufen

[roli]

Hi,

split ist klar - aber wie biege ich die Namen wieder hin.

wohin willst du sie den biegen?

[zongo]

Hi!

Könntest Du Du die Logik nach welcher Du splitten und umbauen möchtest, mal ein wenig genauer erläutern? Auf Grund des Beispiels wird das nichtso ganz klar ....

Ganz prinizipiell werfe ich aber schonmal "awk" in die runde.

[finupsen]

hallo,

Code: Alles auswählen

split -d -b 1750 --suffix-length=2 <datei> 

vielleicht noch mit einem "for" oder "find" drumrum (wenns viele dateien sind) ...

[klak]

Hallo *,

ich habe bis zu 500 von diesen *.csv Dateien in unterschiedlicher Größe.
Die nachfolgende Verarbeitung (3 Schritte) verarbeitet eine von mir vorgegebene Anzahl an Dateien.
Da momentan einzelne Dateien sehr groß (5 MB) sein können, verursachen Schritt 2 und Schritt 3 Probleme im Zielsystem.
Deshalb will ich alle Dateien in z. B. 1000 Zeilen große Teile zerlegen, wobei der neue Name Rückschlüsse auf den Ursprungsname beinhalten muss.

mein Erguss bisher:

Scripte 1:

#!/bin/sh
#set -x
zeile=20
file1="fibu*.csv"
ext=".csv"
Pref="X_"
file2="${Pref}*-*"
exec1="/home/kkadmin/zzz_work/split-me.sh"
exec2="/home/kkadmin/zzz_work/split-me_rename.sh"
#
find . -maxdepth 1 -name "$file1" -exec $exec1 {} $zeile $ext $Pref \;
#
find . -maxdepth 1 -name "$file2" -exec $exec2 {} $ext $Pref \;

Scripte2:

#!/bin/sh
datei=${1}
zeile=${2}
ext=${3}
pref=${4}
echo
echo "Parameter 1: $datei"
echo "Parameter 2: $zeile"
echo "Parameter 3: $ext"
echo
###
Prefix=$(basename $datei $ext)
Prefix="${pref}${Prefix}-"
split -l $zeile $datei $Prefix
rm $datei

Scipt 3:

#!/bin/sh
datei=${1}
ext=${2}
pref=${3}
###
datei=$(basename $datei)
datein=${datei##"$pref"}
mv $datei $datein$ext

Funktioniert unter Linux, unter AIX aber nicht (wegen maxdepth) und alles in einem Script wäre gut.

Dank und Gruss
klak
EDIT: mit entsprechenden Vorbereitungen geht es natürlich auch ohne maxdepth.

[finupsen]

> Funktioniert unter Linux, unter AIX aber nicht (wegen maxdepth)

gnu-findutils installieren ... http://ftp.gnu.org/pub/gnu/findutils/

> und alles in einem Script wäre gut.

ja stimmt ...