Misc on slash-root.fr

awaSCII+ Web : Quand l’encodage devient un art de vivre

Sun, 28 Sep 2025 03:55:27 +0200

Préambule

J'ai mis en ligne une interface web awa.noobops.fr pour le délicieux système d'encodage awaSCII+ v5.0.666 de Penthium2 BZHack. Parce que parfois, on a besoin de dire "Hello World!" avec classe.

 awa awa awa awawa awa awa awa , awa awa awa awawawawawa, awa awa awawa awa awa awa awa , awa awa awawa awa awa awa awa , awa awa awawa awa awawawa, awa awawawa awawa awa awa , awa awa awa awa awa awa awawa, awa awa awawa awa awawawa, awa awawa awawa awa awawa, awa awa awawa awa awa awa awa , awa awawa awa awawawa awa , awa awawawa awawawawa

Le projet qui fait "awa"

Pour ceux qui connaissent pas encore cette merveille, awaSCII+ c'est un système d'encodage qui transforme n'importe quel texte en variations de "awa" et "wa". Développé par Penthium2 BZHack, c'est le genre de projet qui te fait comprendre que l'informatique, c'est avant tout de l'art.

Comment ça marche ?

L'algorithme est d'une beauté simple :

Caractère → Index dans une table de 97 caractères
Index → Binaire 8 bits
0 devient " awa ", 1 devient "wa"
Magie : espaces → 💩, tabs → 💨, retours à la ligne → 🍆

Le projet est toujours en développement à l'heure actuelle.

Pourquoi une interface web ?

Les scripts Bash originaux (awacoder.sh / awadecode.sh) c'est cool, mais parfois on veut juste encoder/décoder rapidement sans sortir du navigateur. Et puis, ça manquait cruellement d'un bouton "Écouter" avec l'API Web Speech Synthesis.

Features qui claquent

100% compatible avec les scripts Bash originaux
Design terminal rétro qui fait plaisir aux yeux
Raccourci "Ctrl+Entrée" parce qu'on est des pros
Boutons de copie intégrés (fini le Ctrl+A/Ctrl+C)
Lecture audio du résultat (parce que entendre "awa awa awawawawa" c'est magique)
Statistiques temps réel d'encodage/décodage

Le mot de la fin

awaSCII+ Web c'est l'exemple parfait que l'informatique peut être fun, absurde et techniquement propre à la fois. C'est compatible avec l'original, ça marche sur mobile, et ça fait sourire.

Alors la prochaine fois que vous voulez envoyer un message secret ou juste faire le malin, pensez awaSCII+ !

Liens utiles :

Interface web : awa.noobops.fr
Source originale : awaSCII_5.0.666

PS : Le site est aussi accessible via le menu de navigation. Parce qu'il faut bien que les gens puissent retrouver cette merveille technologique.

Libérez votre swap !

Sun, 01 Dec 2024 06:09:15 +0100

Préambule

Envie de libérer Britney ? Ou plutôt... votre swap ? 🎵

Si vous cherchez à optimiser l'utilisation de votre mémoire virtuelle sur une machine Debian, vous êtes au bon endroit !

Le `swappiness`, c’est quoi ?

Le swappiness est un paramètre du kernel Linux qui contrôle la "proportion" du système à utiliser le swap. Une valeur faible favorise l'utilisation de la RAM, tandis qu'une valeur élevée incite à swapper rapidement sur le disque.

Quelques commandes essentielles

1. Vérifier la valeur actuelle du `swappiness`

cat /proc/sys/vm/swappiness

2. Modifier dynamiquement le `swappiness`

sudo sysctl vm.swappiness=20

⚠️ Cette modification n'est pas persistante et sera perdue au redémarrage.

3. Rendre la configuration persistante

Ajoutez ou modifiez la ligne suivante dans /etc/sysctl.conf :

vm.swappiness=20

Appliquez ensuite la configuration :

sudo sysctl -p

4. Comprendre les valeurs du `swappiness`

100 : Le système swap intensément.
0 : Swap uniquement en cas de RAM complètement saturée.
Défaut : Généralement 60 sur Debian.

5. Désactiver et réactiver le swap

sudo swapoff -a && sudo swapon -a

⚠️ Assurez-vous que la RAM disponible est suffisante pour accueillir les données du swap avant de désactiver ce dernier.

6. Identifier les processus utilisant le swap

Pour examiner les processus gourmands en swap, utilisez cette commande :

for file in /proc/*/status ; do \
 awk '/VmSwap|Name/{printf $2 " " $3}END{ print ""}' $file; \
 done | \
sort -k 2 -n -r | less

Automatisation avec un script Bash

Pour simplifier la gestion du swap, voici un script bash prêt à l'emploi :

Script : `free-swap.sh`

#!/bin/bash

check_command() {
 if [[ $? -ne 0 ]]; then
 echo "Erreur lors de l'exécution de la commande: $1"
 exit 1
 fi
}

free_data=$(free)
check_command "free"
mem_data=$(echo "$free_data" | grep 'Mem:')
free_mem=$(echo "$mem_data" | awk '{print $4}')
buffers=$(echo "$mem_data" | awk '{print $6}')
cache=$(echo "$mem_data" | awk '{print $7}')
total_free=$((free_mem + buffers + cache))

if echo "$free_data" | grep -q 'Échange:'; then
 used_swap=$(echo "$free_data" | grep 'Échange:' | awk '{print $3}')
else
 used_swap=$(echo "$free_data" | grep 'Swap:' | awk '{print $3}')
fi

echo -e "Free memory:\t$total_free kB ($((total_free / 1024)) MB)\nUsed swap:\t$used_swap kB ($((used_swap / 1024)) MB)"

if [[ $used_swap -eq 0 ]]; then
 echo "Félicitations ! Aucun swap n'est utilisé."
elif [[ $used_swap -lt $total_free ]]; then
 echo "Libération du swap..."
 sudo swapoff -a
 check_command "swapoff"
 sudo swapon -a
 check_command "swapon"
else
 echo "Pas assez de mémoire libre pour libérer le swap. Arrêt."
 exit 1
fi

Instructions :

Enregistrez le script dans un fichier, par exemple : free-swap.sh.
Rendez-le exécutable :

chmod u+x free-swap.sh

Exécutez-le :

./free-swap.sh

⚠️ Ne pas utiliser ce script si ZRAM est activé sur votre système, car cela pourrait entraîner des comportements inattendus.

Conclusion

Vous venez de découvrir comment optimiser la gestion du swap sous Debian. Que ce soit via des commandes ou un script Bash, vous êtes désormais armé pour reprendre le contrôle de votre mémoire virtuelle.

Et surtout, souvenez-vous : le swap, c'est bien... mais la RAM, c'est mieux ! 😉

Compression Multithreading : pigz (gzip) & pbzip2 (bzip2)

Mon, 08 Jul 2024 15:05:42 +0200

Préambule

Dans le monde de la gestion des fichiers et des données, l'efficacité des outils de compression est essentielle, surtout à l'ère des volumes de données croissants. Les formats de compression classiques, gzip et bzip2, bien que robustes et largement utilisés, peuvent devenir des goulets d'étranglement sur des systèmes modernes où la puissance de traitement parallèle est sous-exploitée. C'est dans ce contexte que les outils pigz (Parallel Implementation of gzip) et pbzip2 (Parallel bzip2) apportent une révolution significative en offrant une compression multithreading.

Cet article explore ces deux outils puissants, en les comparant aux utilitaires classiques, et en démontrant leur utilisation efficace avec tar, grâce à son option -I qui permet de spécifier un programme de compression externe. J’aborderai les avantages du multithreading pour la compression des données, présenterai des exemples pratiques d'utilisation, et fournirai des conseils pour optimiser vos flux de travail de gestion des fichiers en tirant parti de la parallélisation.

Introduction à la compression multithreading

Contexte et importance de la compression des fichiers

La compression des fichiers est cruciale pour économiser l'espace de stockage et réduire la bande passante lors des transferts de fichiers. Les outils classiques comme gzip et bzip2 sont largement utilisés pour leur efficacité en termes de taux de compression et de compatibilité. Toutefois, sur des systèmes multicœurs modernes, ces outils ne tirent pas parti de la puissance disponible car ils ne fonctionnent que sur un seul thread.

Limites des outils traditionnels gzip et bzip2

Single-threaded : gzip et bzip2 ne peuvent exploiter qu'un seul cœur, ce qui limite leur vitesse de compression sur les systèmes modernes.
Performance : Bien que gzip soit rapide pour la compression simple, il ne compresse pas autant que bzip2. bzip2, quant à lui, offre une meilleure compression mais à une vitesse plus lente.

Présentation de pigz

Fonctionnalités et avantages

pigz (Parallel Implementation of gzip) est une version multi-thread de gzip. Il utilise plusieurs cœurs pour accélérer la compression et la décompression tout en maintenant la compatibilité avec le format gzip.

Multithreading : Exploite plusieurs cœurs pour améliorer la vitesse de compression.
Compatibilité : Produit des fichiers compatibles avec gzip.
Options de compression : Offre des options pour ajuster le nombre de threads, le niveau de compression, etc.

Installation et configuration

Sur une distribution Linux (ex. Debian) :

sudo apt install pigz

Exemples d’utilisation avec tar et l’option `-I`

Compression

Pour compresser une archive tar avec pigz :

tar -cvI pigz -f archive.tar.gz dossier/

Décompression

Pour décompresser une archive tar.gz avec pigz :

tar -xvI pigz -f archive.tar.gz

Présentation de pbzip2

Fonctionnalités et avantages

pbzip2 (Parallel bzip2) est une version multi-thread de bzip2 qui utilise plusieurs cœurs pour accélérer la compression et la décompression. Il produit des fichiers compatibles avec le format bzip2.

Multithreading : Exploite plusieurs cœurs pour améliorer la vitesse de compression.
Compatibilité : Produit des fichiers compatibles avec bzip2.
Efficacité de compression : Offre généralement une meilleure compression que gzip.

Installation et configuration

Sur une distribution Linux (ex. Debian) :

sudo apt install pbzip2

Exemples d’utilisation avec tar et l’option `-I`

Compression

Pour compresser une archive tar avec pbzip2 :

tar -cvI pbzip2 -f archive.tar.bz2 dossier/

Décompression

Pour décompresser une archive tar.bz2 avec pbzip2 :

tar -xvI pbzip2 -f archive.tar.bz2

Comparaison des performances

Test de performance : gzip vs pigz, bzip2 vs pbzip2

Pour évaluer les performances, j’ai compressé et décompressé un dossier de 10 Go de fichiers aléatoires avec gzip, pigz, bzip2, et pbzip2. Ces tests ont été réalisés sur une machine équipée d’un processeur AMD Ryzen 7 7700X @ 5.573GHz avec 16 threads.

Résultats

Outil	Temps de Compression	Temps de Décompression
gzip	170 sec	25 sec
pigz	18 sec	9 sec
bzip2	565 sec	308 sec
pbzip2	68 sec	30 sec

Analyse des résultats et recommandations

Les outils multithreading pigz et pbzip2 montrent une nette amélioration par rapport à leurs homologues single-threaded, surtout sur des systèmes avec plusieurs cœurs disponibles.

Pour une compression rapide : Utilisez pigz si la vitesse est prioritaire.
Pour une compression plus efficace : Utilisez pbzip2 si un meilleur taux de compression est nécessaire, tout en profitant d'une vitesse accrue par rapport à bzip2.

Optimisations

Conseils pour optimiser les opérations de compression

Ajuster le Nombre de Threads : Utilisez les options -p de pigz et -p de pbzip2 pour ajuster le nombre de threads en fonction du nombre de cœurs disponibles.

Exemple :
```
pigz -p 8 -c fichier > fichier.gz
pbzip2 -p8 fichier
```
Combinaison avec tar : Utilisez l'option -I de tar pour spécifier le programme de compression, simplifiant ainsi les commandes complexes.

Exemple :
```
tar -cvI "pigz -p 4" -f archive.tar.gz dossier/
```
Surveiller l'Utilisation des Ressources : Utilisez des outils comme htop ou top pour surveiller l'utilisation des ressources et ajuster les paramètres de compression en conséquence.

Conclusion

La compression multithreading, grâce à des outils comme pigz et pbzip2, représente une avancée significative par rapport aux méthodes traditionnelles. En exploitant les capacités des systèmes multicœurs, ces outils offrent des performances de compression et de décompression bien supérieures. Que vous ayez besoin de rapidité avec pigz ou d'une compression plus efficace avec pbzip2, intégrer ces outils dans vos flux de travail peut transformer la gestion des fichiers et des archives, rendant vos processus plus efficaces et adaptés aux environnements modernes.

Misc on slash-root.fr

awaSCII+ Web : Quand l’encodage devient un art de vivre

Préambule

Le projet qui fait "awa"

Comment ça marche ?

Pourquoi une interface web ?

Features qui claquent

Le mot de la fin

Libérez votre swap !

Préambule

Le swappiness, c’est quoi ?

Quelques commandes essentielles

1. Vérifier la valeur actuelle du swappiness

2. Modifier dynamiquement le swappiness

3. Rendre la configuration persistante

4. Comprendre les valeurs du swappiness

5. Désactiver et réactiver le swap

6. Identifier les processus utilisant le swap

Automatisation avec un script Bash

Script : free-swap.sh

Instructions :

Conclusion

Compression Multithreading : pigz (gzip) & pbzip2 (bzip2)

Préambule

Introduction à la compression multithreading

Contexte et importance de la compression des fichiers

Limites des outils traditionnels gzip et bzip2

Présentation de pigz

Fonctionnalités et avantages

Installation et configuration

Exemples d’utilisation avec tar et l’option -I

Compression

Décompression

Présentation de pbzip2

Fonctionnalités et avantages

Installation et configuration

Exemples d’utilisation avec tar et l’option -I

Compression

Décompression

Comparaison des performances

Test de performance : gzip vs pigz, bzip2 vs pbzip2

Résultats

Analyse des résultats et recommandations

Optimisations

Conseils pour optimiser les opérations de compression

Conclusion

Références

Le `swappiness`, c’est quoi ?

1. Vérifier la valeur actuelle du `swappiness`

2. Modifier dynamiquement le `swappiness`

4. Comprendre les valeurs du `swappiness`

Script : `free-swap.sh`

Exemples d’utilisation avec tar et l’option `-I`

Exemples d’utilisation avec tar et l’option `-I`