Ajouter une colonne de nombres dans le shell Unix
Étant donné une liste de fichiers dans files.txt, je peux obtenir une liste de leurs tailles comme celle-ci:
cat files.txt | xargs ls -l | cut -c 23-30
qui produit quelque chose comme ceci:
151552
319488
1536000
225280
Comment puis-je obtenir le total de tous ces chiffres?
... | paste -sd+ - | bc
est le plus court que j'ai trouvé (à partir du UNIX Command Line blog).
Edit: a ajouté l'argument - pour la portabilité, grâce à @Dogbert et @Owen.
Voici
cat files.txt | xargs ls -l | cut -c 23-30 |
awk '{total = total + $1}END{print total}'
cat ne fonctionnera pas s'il y a des espaces dans les noms de fichiers. voici un Perl one-liner à la place.
Perl -nle 'chomp; $x+=(stat($_))[7]; END{print $x}' files.txt
Au lieu d'utiliser cut pour obtenir la taille du fichier à partir de la sortie de ls -l , vous pouvez utiliser directement:
$ cat files.txt | xargs ls -l | awk '{total += $5} END {print "Total:", total, "bytes"}'
Awk interprète "5 $" comme cinquième colonne. C'est la colonne de ls -l qui vous donne la taille du fichier.
cat files.txt | xargs ls -l | cut -c 23-30 | python -c'import sys; print sum(int(x) for x in sys.stdin)'
TMTWWTDI : Perl a un opérateur de taille de fichier (-s)
Perl -lne '$t+=-s;END{print $t}' files.txt
L'ensemble ls -l puis cut est plutôt compliqué lorsque vous avez stat. Il est également vulnérable au format exact de ls -l (cela ne fonctionnait pas tant que je n'ai pas changé les numéros de colonne pour cut)
En outre, corrigé le utilisation inutile du chat .
<files.txt xargs stat -c %s | paste -sd+ - | bc
si vous n'avez pas installé bc, essayez
echo $(( $(... | paste -sd+ -) ))
au lieu de
... | paste -sd+ - | bc
$( ) <- renvoie la valeur d'exécution de la commande
$(( 1+2 )) <- renvoie les résultats évalués
echo <- fait écho à l'écran
En ksh:
echo " 0 $(ls -l $(<files.txt) | awk '{print $5}' | tr '\n' '+') 0" | bc
Je voudrais utiliser "du" à la place.
$ cat files.txt | xargs du -c | tail -1
4480 total
Si vous voulez juste le numéro:
cat files.txt | xargs du -c | tail -1 | awk '{print $1}'
Vous pouvez utiliser le script suivant si vous souhaitez simplement utiliser les scripts Shell sans awk ou d'autres interpréteurs:
#!/bin/bash
total=0
for number in `cat files.txt | xargs ls -l | cut -c 23-30`; do
let total=$total+$number
done
echo $total
Voilà le mien
cat files.txt | xargs ls -l | cut -c 23-30 | sed -e :a -e '$!N;s/\n/+/;ta' | bc
J'aime utiliser ....
echo "
1
2
3 " | sed -e 's,$, + p,g' | dc
ils montreront la somme de chaque ligne ...
appliquer sur cette situation:
ls -ld $(< file.txt) | awk '{print $5}' | sed -e 's,$, + p,g' | dc
Total est la dernière valeur ...
#
# @(#) addup.sh 1.0 90/07/19
#
# Copyright (C) <heh> SjB, 1990
# Adds up a column (default=last) of numbers in a file.
# 95/05/16 updated to allow (999) negative style numbers.
case $1 in
-[0-9])
COLUMN=`echo $1 | tr -d -`
shift
;;
*)
COLUMN="NF"
;;
esac
echo "Adding up column .. $COLUMN .. of file(s) .. $*"
nawk ' OFMT="%.2f" # 1 "%12.2f"
{ x = '$COLUMN' # 2
neg = index($x, "$") # 3
if (neg > 0) X = gsub("\\$", "", $x)
neg = index($x, ",") # 4
if (neg > 1) X = gsub(",", "", $x)
neg = index($x, "(") # 8 neg (123 & change
if (neg > 0) X = gsub("\\(", "", $x)
if (neg > 0) $x = (-1 * $x) # it to "-123.00"
neg = index($x, "-") # 5
if (neg > 1) $x = (-1 * $x) # 6
t += $x # 7
print "x is <<<", $x+0, ">>> running balance:", t
} ' $*
# 1. set numeric format to eliminate rounding errors
# 1.1 had to reset numeric format from 12.2f to .2f 95/05/16
# when a computed number is assigned to a variable ( $x = (-1 * $x) )
# it causes $x to use the OFMT so -1.23 = "________-1.23" vs "-1.23"
# and that causes my #5 (negative check) to not work correctly because
# the index returns a number >1 and to the neg neg than becomes a positive
# this only occurs if the number happened to b a "(" neg number
# 2. find the field we want to add up (comes from the Shell or defaults
# to the last field "NF") in the file
# 3. check for a dollar sign ($) in the number - if there get rid of it
# so we may add it correctly - $12 $1$2 $1$2$ $$1$$2$$ all = 12
# 4. check for a comma (,) in the number - if there get rid of it so we
# may add it correctly - 1,2 12, 1,,2 1,,2,, all = 12 (,12=0)
# 5. check for negative numbers
# 6. if x is a negative number in the form 999- "make" it a recognized
# number like -999 - if x is a negative number like -999 already
# the test fails (y is not >1) and this "true" negative is not made
# positive
# 7. accumulate the total
# 8. if x is a negative number in the form (999) "make it a recognized
# number like -999
# * Note that a (-9) (neg neg number) returns a postive
# * Mite not work rite with all forms of all numbers using $-,+. etc. *
Pipe à gawk:
cat files.txt | xargs ls -l | cut -c 23-30 | gawk 'BEGIN { sum = 0 } // { sum = sum + $0 } END { print sum }'
sizes=( $(cat files.txt | xargs ls -l | cut -c 23-30) )
total=$(( $(IFS="+"; echo "${sizes[*]}") ))
Ou vous pouvez simplement les résumer en lisant les tailles
declare -i total=0
while read x; total+=x; done < <( cat files.txt | xargs ls -l | cut -c 23-30 )
Si vous ne vous souciez pas de la taille des bouchées et des cales, ça va, alors
declare -i total=0
while read s junk; total+=s; done < <( cat files.txt | xargs ls -s )
Si vous avez R, vous pouvez utiliser:
> ... | Rscript -e 'print(sum(scan("stdin")));'
Read 4 items
[1] 2232320
Comme je suis à l'aise avec R, j'ai plusieurs alias pour des choses comme celle-ci, donc je peux les utiliser dans bash sans avoir à me souvenir de cette syntaxe. Par exemple:
alias Rsum=$'Rscript -e \'print(sum(scan("stdin")));\''
que laisse moi faire
> ... | Rsum
Read 4 items
[1] 2232320
Inspiration: Y a-t-il un moyen d'obtenir le min, le max, la médiane et la moyenne d'une liste de nombres en une seule commande?
Pure bash
total=0; for i in $(cat files.txt | xargs ls -l | cut -c 23-30); do
total=$(( $total + $i )); done; echo $total
cat files.txt | awk '{ total += $1} END {print total}'
Vous pouvez utiliser le awk pour faire la même chose, il saute même les non entiers
$ cat files.txt
1
2.3
3.4
ew
1
$ cat files.txt | awk '{ total += $1} END {print total}'
7.7
ou vous pouvez utiliser la commande ls et calculer une sortie lisible par l'homme
$ ls -l | awk '{ sum += $5} END {hum[1024^3]="Gb"; hum[1024^2]="Mb"; hum[1024]="Kb"; for (x=1024^3; x>=1024; x/=1024) { if (sum>=x) { printf "%.2f %s\n",sum/x,hum[x]; break; } } if (sum<1024) print "1kb"; }'
15.69 Mb
$ ls -l *.txt | awk '{ sum += $5} END {hum[1024^3]="Gb"; hum[1024^2]="Mb"; hum[1024]="Kb"; for (x=1024^3; x>=1024; x/=1024) { if (sum>=x) { printf "%.2f %s\n",sum/x,hum[x]; break; } } if (sum<1024) print "1kb"; }'
2.10 Mb
À mon avis, la solution la plus simple est la commande "expr" unix:
s=0;
for i in `cat files.txt | xargs ls -l | cut -c 23-30`
do
s=`expr $s + $i`
done
echo $s