====== Commandes Unix ======

===== Créer un dossier =====

Créer un dossier et ses parents s'ils n'existent pas encore :

<code bash>
mkdir -p /foo/bar/zoo/andsoforth
</code>


===== Copie =====

<code bash>
cp -R source nomcopie 
</code>


===== Liens symboliques =====

<code bash>
ln -s cible nom_lien 
</code>

===== Lister les fichiers =====

  * **-l** : utiliser un format d'affichage long (càd. afficher toutes les informations de droits, taille, date...)
  * **-h** : pour //human-readable//, avec -l ou -s, afficher les tailles en format lisible (par exemple 1K, 234M ou 2G) 

<code bash>
# Lister les fichiers et dossiers du répertoire courant, avec tous les détails, et les tailles compréhensibles par un humain
ls -lh
# Créer un alias pour cette commmande
alias ll="ls -lh"
</code>


  * **-a** : pour //all//, permet d'afficher aussi les fichiers cachés
  * **-R** : pour //recursive//, permet de parcourir les dossiers
  * **-t** : pour trier les fichier par date de modification, du plus récent au plus ancien
  * **-r** : pour inverser le sens de tri
  * **-S** : pour trier les fichier par taille, du plus gros au plus petit

<code bash>
# Lister les fichiers avec un filtre sur leur nom
ls *.pdf
</code>


===== Droits =====

Désigner le propriétaire d'un fichier :
<code bash>
chown owner:group fichier
# Récursif : 
chown -hR owner:group dossier
</code>

Rendre un fichier exécutable pour son propriétaire :
<code bash>
chmod u+x fichier.sh
</code>

Positionner les droits de tous les fichiers à lecture écriture pour le proprio, lecture seule pour les autres :
<code bash>
# Version bash
find . -type f -exec chmod 644 {} \;
</code>
<code bash>
#Version busybox
find "/shares/Public/Shared Videos" -type f -exec chmod u=rw,g=r,o=r \"{}\" \;
</code>


===== Dates =====

Pour analyser les différentes dates des fichiers et répertoire, en passant par un fichier CSV :

<code bash>
cd DOSSIER_A_ANALYSER
printf "nom;mtime (modification);ctime (status change);atime (access)\n" > ~/times.csv
find . -printf "%P;%Td/%Tm/%TY;%Cd/%Cm/%CY;%Ad/%Am/%AY\n" >> ~/times.csv
</code>

Pour rappel les dates sont :
  * mtime : dernière modification du contenu (pas des attributs)
  * ctime : dernière modification du contenu OU des attributs (:!: pas la date de création)
  * atime : dernier accès

Source : https://www.quora.com/What-is-the-difference-between-mtime-atime-and-ctime

Récupérer les fichiers modifiés dans les 15 derniers jours avec leur date/heure de modification :

<code bash>
find ./ -type f -mtime -15 -printf "%p;%TY-%Tm-%Td %TH:%TM\n" > fichiers-modifies.csv
</code>


===== Archives =====

==== Décompresser ====

<code bash>
tar xvf something.tar.bz2
unzip something.zip
unrar x "nom de fichier.rar"
</code>

=== Exclure un dossier ===

<code bash>
tar xvf something.tar.bz2 --exclude="folder"
</code>



=== Spécifier cible et créer un dossier ===

<code bash>
# Créer dossier /var/www/nom-archive et y extraire l'archive
tar xvf /home/ajacquemin/nom-archive.tar.xz --directory /var/www --one-top-level
</code>

<code bash>
# Créer dossier /var/www/nom-specifie et y extraire l'archive
tar xvf /home/ajacquemin/nom-archive.tar.xz --directory /var/www --one-top-level=nom-specifie
</code>

==== Compresser ====

<code bash>
tar cvf repertoire.tar.bz2 repertoire/ 
</code>

Paramètres :
  * ''c'' pour compresser
  * ''v'' pour verbose
  * ''f'' cible = un fichier
  * ''z'' pour GNU Zip, ''j'' pour BZ2 **:!: plus nécessaire**

=== Ne pas inclure toute le hiérarchie des dossiers ===

  * ''<nowiki>--directory=</nowiki>'' suivi du dossier racine à partir duqul archiver

<code bash>
tar cvf archive.tar.bz2 --directory=/var/www dossier

</code>

=== Supprimer les fichiers source après compression ===

<code bash>
tar cjvf repertoire.tar.bz2 repertoire/ --remove-files
</code>


===== Chercher un fichier  =====

<code bash>
find ./ -name NOM_FICHIER
</code>


<code bash>
find ./ -name *.EXTENSION
</code>

==== Chercher à l'intérieur des fichiers ====

En connaissant l'extension, obtenir la liste  des fichiers qui contiennent une chaîne :

<code bash>
find ./ -name \*.php | xargs grep "\x63\x72\x65\x61\x74\x65\x5f\x66"
</code>

Ou autre version plus simple, avec grep uniquement : ((https://stackoverflow.com/a/16957078))
<code bash>
# -r or -R is recursive,
# -n is line number, and
# -w stands for match the whole word.
# -e is the pattern used during the search
grep --include=\*.{php,yml} -rnw '/path/to/somewhere/' -e "pattern"
</code>

Sans connaître l'extension :
<code bash>
grep -rwl './' -e "chaine"
</code>


==== Supprimer fichiers selon leur nom ====

<code bash>
find . -type f -name ".directory" -exec rm -i {} \;
</code>


==== Supprimer fichiers selon leur date ====

<code bash>
find . -name "truc" -mtime +15 -type f -delete
</code>


==== Supprimer dossiers vides ====

<code bash>
find . -mindepth 1 -type d -empty -delete;
</code>


===== SSH =====

==== Se connecter ====

<code bash>
ssh user@host [-p port]
</code>
==== Copier un fichier ====

Envoyer un fichier local vers une machine distante :
<code bash>
scp /source/fichier  user@host:repertoiredistant
</code>

Télécharger un fichier depuis une machine distante :
<code bash>
scp user@host:repertoiredistant/fichier /cible/
</code>


===== MD5 =====

Calculer les hashs de tous les fichiers d'un dossier :

<code bash>
find ./dossier -type f -print0 | xargs -0 md5sum > checksums.md5
</code>

Vérifier que tous les fichiers sont corrects d'après un fichier de hash :

<code bash>
md5sum -c checksums.md5
</code>

===== Multimédia =====

Audio, vidéo... déplacés sur la page [[ffmpeg]]

==== Retirer metatags de toutes les photos d'un dossier ====

<code bash>
exiftool -r -all= -ext jpg -ext gif -ext png /path/to/top/directory/ 
</code>


==== Retirer les premières secondes de plusieurs mp3 ====

<code bash>
find ./ -name '*.mp3' -type f -exec mp3splt -a -f {} 00.10.50 EOF -o "trim/@f" \;
</code>

===== Téléchargement =====

Faire un miroir d'un site (attendre 4 secondes entre chaque page, convertir les extensions en .html, permettre d'actualiser l'archive )

<code bash>
wget --mirror --convert-links --backup-converted --html-extension -w 4 http://example.com/ -o log.txt

# version condensée, sans la réécriture des extension, sans permettre l'actualisation de l'archive
wget -mk -w 4 http://www.example.com
</code>

Juste une page et ses liens :
<code bash>
wget -r -N -w 4 -l 2 --no-remove-listing http://www.example.com
</code>

http://www.gnu.org/software/wget/manual/wget.html#Examples

===== Nombre de fichiers dans chaque dossier =====

<code bash>
find . -type f -iname '*.jp*g' -printf "%h\n" | sort | uniq -c > count.txt
</code>

===== Espace disque utilisé / libre =====

==== Toutes les partitions ====

<code bash>
df -h
</code>

Résultat :
<code>
Sys. de fich.            Tail. Occ. Disp. %Occ. Monté sur
/dev/sda1             9,2G  5,9G  2,9G  68% /
tmpfs                 499M     0  499M   0% /lib/init/rw
varrun                499M  332K  498M   1% /var/run
varlock               499M     0  499M   0% /var/lock
udev                  499M  152K  498M   1% /dev
tmpfs                 499M   12K  498M   1% /dev/shm
lrm                   499M  1,6M  497M   1% /lib/modules/2.6.28-12-netbook-eeepc/volatile
/dev/sda3              65G   61G  600M 100% /home
/dev/sda5             155G  126G   21G  87% /media/partage
</code>

==== Pour un répertoire ====

<code bash>
sudo du -sh /tmp
</code>

<code>
60K     /tmp
</code>

==== Le contenu d'un répertoire ====

<code bash>
sudo du -h /usr/src --max-depth=1
</code>

<code>
7,7M    /usr/src/linux-headers-2.6.28-19-generic
64M     /usr/src/linux-headers-2.6.28-19
52K     /usr/src/rpm
72M     /usr/src
</code>

===== Noyaux actuellement utilisé =====

<code bash>
uname -r
</code>
<code>
2.6.28-12-netbook-eeepc
</code>

===== Monter automatiquement NFS =====

==== Version intiale ====


Dans ''/etc/fstab'' :

<code>
192.168.0.97:/nfs/Public	/media/nas/Public	nfs	user,rw,hard,intr	0	0
</code>

Source : https://help.ubuntu.com/community/SettingUpNFSHowTo#Mounts

==== Version 2017 (autofs) ====

Dans ''/etc/auto.eddie''
<file>
music   -fstype=nfs,rw,intr   192.168.0.42:/volume1/music
music-making   -fstype=nfs,rw,intr   192.168.0.42:/volume1/music-making
photo   -fstype=nfs,rw,intr   192.168.0.42:/volume1/photo
video   -fstype=nfs,rw,intr   192.168.0.42:/volume1/video
public   -fstype=nfs,rw,intr   192.168.0.42:/volume1/public
</file>

==== Version 2021 (systemd) ====

Créer deux fichiers dans ''/etc/systemd/system/''

<file ini mnt-eddie-musicmaking.automount>
[Unit]
Description=Automount Eddie Music Making

[Automount]
Where=/mnt/eddie/musicmaking

[Install]
WantedBy=multi-user.target
</file>

<file ini mnt-eddie-musicmaking.mount>
[Unit]
Description=Eddie Music Making

[Mount]
What=192.168.0.42:/volume1/music-making
Where=/mnt/eddie/musicmaking
Type=nfs

[Install]
WantedBy=multi-user.target
</file>

=== Pour la musique : ===

<file ini mnt-eddie-musique.automount>
[Unit]
Description=Automount Eddie Musique

[Automount]
Where=/mnt/eddie/musique

[Install]
WantedBy=multi-user.target
</file>

<file ini mnt-eddie-musique.mount>
[Unit]
Description=Eddie Musique

[Mount]
What=192.168.0.42:/volume1/music
Where=/mnt/eddie/musique
Type=nfs

[Install]
WantedBy=multi-user.target
</file>

Pour les vidéos :

<file ini mnt-eddie-videos.automount>
[Unit]
Description=Automount Eddie Vidéos

[Automount]
Where=/mnt/eddie/videos

[Install]
WantedBy=multi-user.target
</file>

<file ini mnt-eddie-videos.mount>
[Unit]
Description=Eddie Vidéos

[Mount]
What=192.168.0.42:/volume1/video
Where=/mnt/eddie/videos
Type=nfs

[Install]
WantedBy=multi-user.target
</file>

Annoncer ces fichiers à systemd :

<code bash>
systemctl daemon-reload
systemctl start mnt-eddie-musicmaking.automount
</code>

Source : https://blog.tomecek.net/post/automount-with-systemd/
===== Copier stdout et stderr dans un fichier =====

Tout en continuant à les afficher à l'écran !

<code bash>
ftp -v -u -n -d < ${FTP_COMMAND_FILE} 2>&1 | tee $FTP_RETOUR_FILE
</code>

===== Vérifier réussite FTP =====

Le code retour du client FTP est 0, même si le transfert n'est pas effectué. La solution est d'enregistrer les échanges dans un fichier et de chercher si celui-ci contient le message de réussite.

<code bash>
FTP_SUCCESS_MSG="226 Transfer complete"
ftp  -v -u -n -d < ${FTP_COMMAND_FILE} &>$FTP_RETOUR_FILE
if fgrep "$FTP_SUCCESS_MSG" $FTP_RETOUR_FILE ;then
	echo "   [OK]"
else
	echo "   [KO]"
fi
</code>

Ou plus simple : utiliser lftp


===== Remplacer motif dans un fichier  =====

Dans cet exemple, remplacer toutes les tabulations suivies d'un pipe par un pipe uniquement :

<code bash>
sed -i 's/\t|/|/' monfichier.txt
</code>

-i signifie "faire la modification directement dans le fichier source".

===== Gérer les utilisateurs =====

==== Créer un utilisateur ====
<code bash>
sudo useradd nom_utilisateur
</code>

==== Créer un groupe ====
<code bash>
sudo groupadd nom_groupe
</code>

==== Ajouter un utilisateur dans un groupe ====

<code bash>
sudo adduser nom_utilisateur nom_groupe
</code>

Il faut fermer/ré-ouvrir la session utilisateur pour que ce soit pris en compte (dommage !)

Source : [[https://doc.ubuntu-fr.org/tutoriel/gestion_utilisateurs_et_groupes_en_ligne_de_commande#ajouter_un_utilisateur_a_un_groupe|Wiki Ubuntu-fr > Gestion des utilisateurs et groupes en ligne de commande]]


===== Reformater des fichiers SQL =====

<code bash>
sudo pipx install sqlparse
pipx ensurepath
find . -type f -exec sqlformat --reindent {} -o {}.sql \;
</code>