Aide mémoire Shell
Contenu
Commandes shell usuelles (ou un peu moins) avec cas d’usage.
Attention : Je rappelle qu’au quotidien je manipule des systèmes Lignux. Si je ne l’ai pas marqué explicitement, je n’ai pas testé sur un système UNIX.
Pour des astuces spécifiques à Bash vous pouvez consulter son aide mémoire dédiée.
awk
La commande à maintenant sa page dédiée ici.
cp
Pour sauvegarder un dossier en conservant ses attributs :
cp -avr <origine> <destination>
Remarque : cette commande est utile pour une copie temporaire en vue de faire un éventuel retour arrière.
Pour une sauvegarde régulière et plus poussée il vaut mieux se tourner vers des outils comme rsync
.
fallocate
Disponible dans le paquet util-linux
, la commande fallocate
permet de créer d’un coup un fichier de taille conséquente
en préallouant les blocs
fallocate -l 10G mon_fichier
La taille peut être suffixée : GiB, TiB, PiB, EiB, ZiB et YiB (le « iB » est optionnel). Lisez le manuel pour plus de détails.
Remarque à priori ne fonctionne pas sur XFS. Je n’ai pas encore (Novembre 2024) testé.
find
Pour rechercher un motif dans un ensemble de fichiers,
il est possible d’utiliser grep à l’aide de l’argument exec
find <chemin> -name "<fichiers>" -exec grep "<motif>" {} \; -print
La sortie produite ressemblera à
contenu éventuel du grep sur fichier 1
fichier 1 correspondant à -name
fichier 2 correspondant à -name
contenu éventuel du grep sur fichier 3
fichier 3 correspondant à -name
fichier 4 correspondant à -name
contenu éventuel du grep sur fichier N
fichier N correspondant à -name
etc ...
En plaçant l’argument print
avant exec
, la logique d’affichage s’inverse :
d’abord afficher le nom des fichiers puis le contenu éventuel.
ATTENTION Comme il est possible de lancer n’importe quelle commande avec exec
,
il faut absolument être sûr des fichiers sur lesquels on veut agir.
Pour cela il faut utiliser -ls
en tout premier essai.
find <chemin> -name "<fichiers>" -ls
Il vaut mieux perdre quelques dizaines de minutes à relire une liste de fichiers que de perdre des heures ou des jours à restaurer une sauvegarde !
grep
Plus efficace que le chainage avec find
ou cat
, il est possible d’utiliser grep
seul :
grep <motif> <options> <fichier(s)>
# exemple :
grep "getLastTag" -rn *
Git/Script.pm:94: $branch = $this->getLastTag;
Git/Script.pm:197: my $to = shift || $self->getLastTag;
MEP.pm:1362: $h_return->{_info}->{version} = $self->git->getLastTag;
MEP.pm:1450: my $version_generee = $self->git->getLastTag;
# ou dans un seul fichier :
grep "getLastTag" -n "Git/Script.pm"
Git/Script.pm:94: $branch = $this->getLastTag;
Git/Script.pm:197: my $to = shift || $self->getLastTag;
Les options intéressantes sont :
n
: afficher les numéros de ligner
: récursif, lors d’une recherche avec jokeri
: au besoin, pour le motif insensible à la casse
Et sinon grep sait aussi compter ! Plus besoin de chaîner à outrance avec wc
:
netstat -an | grep -c 11211
Autre astuce, quand on fait un ps
, pour ne plus voir grep apparaitre et éviter de devoir rajouter un | grep -v grep
,
l’astuce consiste à entourer le premier caractère de crochets.
Exemple :
ps -elf | grep [s]uperscript.sh
Remarque : Plutôt que de faire ceci, la commande pgrep
pourrait se révéler plus utile.
Voyez ce paragraphe.
heredoc
Je vous redirige vers la page dédiée
ln
Les liens symboliques sont parfois pratiques et la forme la plus courante de la commande est la suivante :
ln -vs <fichier cible> <nom du lien>
# exemple utilisé pour faire croire à un exécutable qu'une bibliothèque se trouvait dans son répertoire :
ln -vs /usr/lib/libudev.so.1.6.2 ./libudev.so.0
L’option -s
permet de créer le lien de manière symbolique et non physique.
Un cas d’usage plus intéressant consiste à faire des liens des fichiers de configuration utilisateur, pour les rassembler dans un seul dossier afin de faciliter leur sauvegarde.
Et en moyen mnémotechnique infallible pour retenir l’ordre des arguments, le manuel de FreeBSD1 dit :
An easy rule to remember is that the argument order for ln is the same as for cp(1): The first argument needs to exist, the second one is created.
lvresize
Cette commande faisant partie de la suite d’outils liés à LVM, j’ai créé une page spécifique que vous trouverez ici : Aide-mémoire LVM.
pgrep
Plutôt que de faire ps -ef | grep process
voire même ps -ef | grep [p]rocess
et autres chaînages parfelus, utiliser plutôt la commande pgrep
.
Voici quelques exemples :
# ps -ef | grep [p]rocess
pgrep -fal process
# ps -ef | grep [p]rocess | awk '{print $1}'
pgrep process
Et ne pas hésiter à aller voir le manuel de cette commande.
Mais à noter qu’en fonction du besoin, ps
n’est pas à oublier non plus.
ps
Pour trouver les processus bloqués, faire ps -elfy |grep '^D'
.
L’état D
correspond à un « uninterruptible sleep ».
C’est moche, mais parfois ça arrive dans la vie d’un processus.
Vous pouvez vous tourner vers cet article (en anglais) qui l’expliquera bien mieux que moi.
Pour une vue plus complète des processus (en utilisant le style BSD) :
ps auwwxf
Qui affichera tous les processus en vue arborescente,
avec également la commande utilisée.
En prenant une largeur illimitée à l’affichage (le ww
).
read
Fichier complet :
while read ma_var; do
echo "${ma_var}"
done < "mon_fichier"
En séparant les champs de fichier :
while IFS=: read user pass uid gid full home shell
do
echo -e "$full :\n\
Pseudo : $user\n\
UID :\t $uid\n\
GID :\t $gid\n\
Home :\t $home\n\
Shell :\t $shell\n\n"
done < /etc/passwd
Et si on ne veut pas tous les champs (la variable “x” contiendra le reste de la ligne):
while IFS=: read user pass uid x
do
echo -e "Pseudo : $user\n\
UID :\t $uid\n\ \n"
done < /etc/passwd
rsync
Dans le cadre d’une sauvegarde via SSH, la commande prend la forme suivante :
rsync -zvrt --delete -e ssh /un/chemin/important utilisateur_distant@<serveur>:/chemin/distant/de/destination
Les arguments zvrt
peuvent être remplacés par auv
si les utilisateurs locaux et distants sont les mêmes.
Dans l’exemple les fichiers tranférés deviendront la propriété de utilisateur distant
.
sed
Pour insérer le contenu d’un fichier dans d’autres. Exemple ici, en insérant le texte d’une licence logicielle en en-tête de scripts, ligne 2.
Mettons un fichier license
contenant le texte à insérer,
et des scripts .sh
(dans le même dossier) :
for f in *.sh; do sed -i -e "1r license" "$f"; done
Remarque la version de sed employée est la version GNU, d’où le -i
.
Avec une autre version de sed, il faudra passer par un fichier intermédiaire :
for f in *.sh; do sed -e "1r license" "$f" > "$f.tmp"; mv "$f.tmp" "$f"; done
Un peu plus ?
J’ai aussi des notes diverses à cet endroit.
Elles parlent notamment de sed
, il y a des choses sur awk
, sur les REGEX, les descripteurs de fichiers, …
Il me faudrait les mettre au propre sur le site un jour, mais elles peuvent néanmoins être utiles.
Remarques
Comme pour la liste de commandes VIM, celle-ci sera mise à jour de temps à autre.