[UNIX] arg list too long

Ciao!

Jaz imam en problem. Pisem v unixu skripte, zaganjam pa jih v putty.
Kopiram direktorije z velikim stevilom fileov (cca 9000 mogoce tudi vec). Javi pa se mi napaka pri listaju, arg list too long!

tu mi javi napako:
ls -l $GGSN/collected/GPRS* | cut -d"/" -f10 > $LISTS/FILES_GGSN_collected

Mi lahko kdo pomaga in mi pove kako se da to resiti, ali obstaja kak ukaz?

Hvala za pomoc!

Ciao ciao Bijonda

Sem ze probala, pa ne gre:
Tu je del skripte:


if [ -d $TAPout/proccesed ]
then
$CD $TAPout/proccesed
test=`$LS | wc -l`
if [ $test -eq 0 ]
then
$ECHO "Dir is empty do not do anything" >> $LOG
else
$LS -l $TAPout/proccesed/CD* | $CUT -d"/" -f7 > $LISTS/FILES_TAPout_proccesed
NUMBER_OF_FILES=`$CAT $LISTS/FILES_TAPout_proccesed | wc -l`
$ECHO "$NUMBER_OF_FILES"

# Copping the files to arhiv
# We will copy only the files that were picked up by the list command
# we also create a new list that has only the files that were successfully copyed
$CAT $LISTS/FILES_TAPout_proccesed | while read line
do
$CP $TAPout/proccesed/$line $TAPoutarh/week_$DATUM/proccesed
if [ $? -eq 0 ]
then
$ECHO $line >> $tapout_dat_proccesed
fi
done

# Check if all the files were actually copyed
NUMBER_OF_FILES_TO_BE_COPYED=`$CAT $LISTS/FILES_TAPout_proccesed | wc -l`
NUMBER_OF_FILES_COPY=`$CAT $tapout_dat_proccesed | wc -l`
$ECHO "$NUMBER_OF_FILES_TO_BE_COPYED"
$ECHO "$NUMBER_OF_FILES_COPY"

if [ $NUMBER_OF_FILES_TO_BE_COPYED -eq $NUMBER_OF_FILES_COPY ]
then
$CAT $LISTS/FILES_TAPout_proccesed | while read line
do
#here we remove a list of files that had been copyed
$ECHO "Sum of files match, going to delete the files" >> $LOG
#$RM -f $TAPout/proccesed/$line
if [ $? -eq 0 ]
then
$ECHO "Succesfully deleted the files" >> $LOG
fi
done
fi
fi
fi # za TAPout/proccesed


Ostalo dela kakor treba, samo pri ls se mi zlomi!

Uporabi xargs

PS: ls -l lahko vrne precej nepredvidljiv rezultat, sploh ce ga uporabljas v kombinaciji z *... :)

Tisto s find more delat! xargs ma pa isti problem kot ls, ce kaj vem

> Hm, xargs je ravno zato, da iz parametrov, ki jih dobi po stdin naredi vec ukazov...

To clo pise v man page-u, samo meni to dela tako, da v argumente stlaci!? wtf

x.sh:
#! /bin/sh
echo "$@" >> /tmp/xx

> echo -en "1\n2\n3\n" | xargs ./x.sh
> cat /tmp/xx
1 2 3
>

*enlightened*

Bi slo tako?

mv old_dir new_dir
mkdir old_dir

Drugace pa kombinacija tistega, kar sta predlagala 64202 in BigWhale.

find ./ -maxdepth 1 -type f -exec basename {} \; |while read file; do cp $file aaa/; done

Ja, hudirja!

Povej kako, da bodo se drugi imeli kaj od tega! ;)


(BW, v upanju, da kdo pogleda stare poste, ko naleti na problem :P )

jah no, problem glih ni rešen

In kaj je razlog za tako omejitev?

16k - 20k ???

Svašta.

Kako misliš ročno?

bijonda, samo da je problem rešen

LP
JPS

bl študentka FMF-ja

Hm verjetno je uporabil

for i in *
do
cp $i $wherever
done

tisti mv $i crkne ob prvem filetku, ki ima v imenu presledek ali kak drug cuden znak... :)

Bolj je varna, ce uporabis:

mv "${i}"

Glede arg list to long, npr. na moji masini imam lahko 27932 fajlov in sele na 27933 se pojavi, tko da to je cisto odvisno od serverja.

Testne fajle zarhiviram na roke.

Sicer pa bom kmalu itak primoran napravit:
rm -rf /Vega

Ogo

še tole - pri find je dobro dodati parameter -print0, pri xargs pa -0
(sicer presledki v imenih naredijo štalo, s temle pa so imena v seznamu ločena z \0)