Gentoo Francophone

Xen

Stephane Malinet — 2009-03-01T16:13:49Z

Comment mettre en place la virtualisation sous Gentoo avec Xen.

[titre1]Introduction[/titre1]

La virtualisation est un sujet à la mode depuis quelques temps compte tenu des nombreux avantages qu'elle apporte aux infrastructures.

Je ne rentrerai pas dans l'énumération des-dits avantages, et pas non plus dans la description des différentes formes de virtualisation, pour cela je vous invite à vous reporter à l'article de wikipédia.

Le type hyperviseur sous Xen, celui qui nous intéressera dans le reste de ce document :


hyperviseur

L'hyperviseur fourni une couche virtuelle pour les matériels, switch, cartes réseaux (...), et le bios, ne nécéssitant pas de modification de l'OS hôte. L'OS n'est pas conscient d'être virtualisée. Ce type accuse une perte des performances brutes de la VM par rapport à son homologue physique de l'ordre de 35% pour VMware, contre 25% pour Xen. (marge de + ou - 5 points pour les % suivant les cas).

Dans la paravirtualisation, les machines virtuelles (VM) ont conscience d'être virtualisées car elles fonctionnent sur une version Xen du noyau en mode 'domain U' non-privilégié, alors que la machine physique (Hardware Node) fonctionne sur un noyau Xen en mode 'domain 0' privilégié. Cela permet aux VMs des accés beaucoup plus rapide au matériel car Xen ne fait qu'ordonnancer les accés sans traiter la 'traversée' de la couche virtuelle de matériel. Ce type n'accuse une perte de performance de la VM que de l'ordre de 3 à 5%. Mais vous l'aurez compris : seuls les OS linux et BSD permettent ce type car il nécéssite un noyau Xen pour les VMs.

C'est ce mode que nous alons mettre en place car il ne nécéssite pas des processeurs supportant la virtualisation matérielle.

[titre1]Dom0[/titre1]

Le dom0 est le domaine qui va accueillir les domaines invités.

Pour installer notre hyperviseur sous Gentoo, il nous faut demasquer certains paquets et activer certains drapeaux :


 USE="custom-cflags pygrub screen


 echo "sys-kernel/xen-sources ~x86" >> /etc/portage/package.keywords/my.keywords
 echo "app-emulation/xen-tools ~x86" >> /etc/portage/package.keywords/my.keywords
 echo "app-emulation/xen ~x86" >> /etc/portage/package.keywords/my.keywords

Afin d'obtenir les meilleurs performances il vous faut modifier vos CFLAGS.

Exemple pour un x86 :


 CFLAGS="-O2 -march=pentium4 -mno-tls-direct-seg-refs -pipe"

Pour une amd64 :


 CFLAGS="-O2 -march=nocona -mno-tls-direct-seg-refs -pipe"

Recompilez tous vos paquets et installez les xen-sources et outils Xen.


 emerge -ave world && emerge -av xen xen-tools xen-sources

[titre2]Le noyau[/titre2]

Modifions le noms des sources :


 cd /usr/src
 mv linux-2.6.18-xen-r12 linux-2.6.18-xen0-r12
 eselect kernel set linux-2.6.18-xen0-r12
 <code>
 
 En plus de la configuration normale pour votre matériel activez les options suivantes:
 
 <code>
 XEN --->
 [*] Privileged Guest (domain 0)
 <*> Backend driver support
 <*> Block-device backend driver
 <*> Network-device backend driver
 <*> Network-device loopback driver
 <*> PCI-device backend driver
 PCI Backend Mode (Virtual PCI) --->
 <*> Block-device frontend driver
 <*> Network-device frontend driver
 [*] Scrub memory before freeing it to Xen
 [*] Disable serial port drivers
 <*> Export Xen attributes in sysfs
 Device Drivers --->
 Block devices --->
 <*> Loopback device support
 Xen version compatibility (no compatibility code) --->

Compilez votre noyau et installez-le :


 make -j2 && make modules_install
 cp arch/i386/boot/vmlinuz /boot/kernel-2.6.18-xen0-r12

Modifiez grub :


 default 0
 timeout 05
 splashimage=(hd0,0)/grub/splash.xpm.gz
 
 
 title=GENTOO 2.6.18 Xen0 R12
 root (hd0,0)
 kernel /xen.gz dom0_mem=128M vga=gfx-1280x1024x16
 module /kernel-2.6.18-xen0-r12 root=/dev/vg/root max_loop=64
 module /initramfs.gz

Rebootez.

[titre2]Le réseau[/titre2]

Nous utiliserons le le mode bridge pour le réseau ce qui permettra aux machines virtuelles d'avoir leur propre adresse IP :


 dom0: eth0 (fausse eth0) -> peth0 -+
 |
 bridge -> vraie eth0 -> le réseau
 |
 domU: eth0 (fausse eth0) -> vifN.0 -+

modifiez le fichier /etc/xen/xend-config.sxp :


 (network-script network-bridge)
 (vif-script vif-bridge)

Activez le service xend :


 rc-update add xend default
 /etc/init.d/xend start

[titre1]DomU[/titre1]

Passons maintenant à l'installation de notre domaine hôte.

Créons le périphérique block où sera installé notre système virtuelle.

Première solution : utilisez un fichier de 4Go comme périphérique block et formatez-le :


 dd if=/dev/zero of=/var/xen/gentoo.vm0 bs=1M seek=4095 count=1
 mkfs.xfs -l size=64m -b size=1024 /var/xen/gentoo.vm0

Montez ce block :


 mount -o loop /var/xen/gentoo.vm0 /mnt/gentoo

Et procédez à l'installation comme décrit dans le handbook Gentoo.

[titre2]Le noyau[/titre2]

Au moment d'installer votre noyau choisissez les xen-sources et configurez votre noyau avec les options suivantes :


 XEN --->
 [ ] Privileged Guest (domain 0)
 <*> Block-device frontend driver
 <*> Network-device frontend driver
 <*> User-space granted page access driver
 <*> Framebuffer-device frontend driver
 <*> Keyboard-device frontend driver
 [*] Scrub memory before freeing it to Xen
 [*] Disable serial port drivers
 <*> Export Xen attributes in sysfs
 Xen version compatibility (no compatibility code) --->

Editez le fichier /etc/inittab de votre domU afin de ne laisser q'une console :


 # TERMINALS
 c1:12345:respawn:/sbin/agetty 38400 tty1 linux
 #c2:2345:respawn:/sbin/agetty 38400 tty2 linux
 #c3:2345:respawn:/sbin/agetty 38400 tty3 linux
 #c4:2345:respawn:/sbin/agetty 38400 tty4 linux
 #c5:2345:respawn:/sbin/agetty 38400 tty5 linux
 #c6:2345:respawn:/sbin/agetty 38400 tty6 linux

[titre2]Configuration DomU[/titre2]

Concernant la partition swap, je vous conseille de créer un fichier à l'intérieur du domU, cela n'est pas le plus performant comme format mais cela permet d'avoir tout à l'intérieur de la machine virtuelle :


 dd if=/dev/zero of=/var/tmp/swap bs=1M seek=1024 count=1
 mkswap /var/tmp/swap

Configurez le grub du domU :


 default 0
 timeout 05
 splashimage=(hd0,0)/grub/splash.xpm.gz
 
 title=GENTOO 2.6.18 gentoo R12
 root (hd0,0)
 kernel /kernel-2.6.18-xen-r12 root=/dev/sda2 4 rw xencons=tty
 initrd /initramfs.gz

Passons à la configuration de xen pour le domU. Créez, dans le dom0 le fichier de configuration /etc/xen/gentoo, dans le cadre de l'utilisation d'un fichier pour la partition système :


 bootloader = '/usr/bin/pygrub'
 memory = 128
 name = "gentoo"
 vif = [ '' ]
 disk = [ 'file:/var/xen/gentoo.vm0,sda1,w' ]

Ou comme cela si vous utilisez un périphérique block pour le domU :


 bootloader = '/usr/bin/pygrub'
 memory = 128
 name = "gentoo"
 vif = [ '' ]
 disk = [ 'phy:/dev/vg/gentoo,sda1,w' ]

[titre2]Le réseau[/titre2]

Configurez en IP fixe l'interface de votre domU comme s'il s'agissait d'une interface normale eth0.

En revanche, si vous utilisez DHCP, alors pensez à attribuer une adresse matérielle (MAC) pour l'interface en modifiant le fichier de configuration du domU.


 vi /etc/xen/gentoo
 
 vif = [ 'mac=aa:00:00:00:00:01' ]

Une fois que vous avez démontez votre domU, nous allons lancer notre machine virtuelle :


 xm create gentoo

Vérifiez :


 xm list

Et accédez à votre système gentoo virtuelle :


 xm console gentoo

Vous assurez que la machine virtuelle soit lancée au démarrage du système :


 cd /etc/xen/auto
 ln -s ../gentoo
 rc-update add xendomains default

[titre1]Administration des domaines[/titre1]

Nous allons voire les commandes les plus courrantes d'administration de vos domaines.

[titre2]Info dom0[/titre2]


 xm info

les méssages de demarrage de Xen :


 xm dmesg

[titre2]Démarrez domU[/titre2]


 xm create gentoo

Avec le mode console :


 xm create gentoo -c

[titre2]Stoppez domU[/titre2]

Arrêtez normallement le domU :


 xm sutdown gentoo

Arrêt immédiat :


 xm destroy gentoo

Mettre et sortir de pause :


 xm pause gentoo
 xm unpause gentoo

[titre2]Sauvegarder et restaurer domU[/titre2]

Sauvegardez le domU dans un fichier :


 xm save gentoo

Restaurez le domU :


 xm restore gentoo

[titre2]vCPUs[/titre2]

Augmeter ou réduire le nombre de vCPUs (entendez procésseurs virtuels) attribués à un domU (ne peux dépasser la valeur totale de la configuration) :


 xm vcpu-set gentoo 2

[titre2]Mémoire domU[/titre2]

Augmenter ou réduire la mémoire allouée à un domU (ne peux dépasser la somme totale de tous les domU par rapport à la configuration) :


 xm mem-set gentoo 256

Pour plus de commandes, jeter un oeil à :


 xm help

Voilà, amusez-vous bien... ;-)

[titre1]Liens[/titre1]

Initramfs

Stephane Malinet — 2009-02-27T23:06:23Z

Comment créer son propore initramfs.

[titre1]Introduction[/titre1]

L'initramfs permet d'inclure à la fin du démarrage du noyau un mini système de fichier en mémoire vous permettant de lancer par exemple des outils de detection matériel, decrypter la racine d'un système ,ou , dans mon cas, l'activation des volumes LVM pour la racine de mon système.

[titre1]Installation[/titre1]

Il y a deux possibilités : compiler l'initramfs dans le noyau ou alors en faire une archive. Nous verrons cela au moment de la configuration du noyau.

[titre2]Busybox[/titre2]

L' outils de base nécéssaire à faire un initramfs est sys-apps/busybox, en plus de votre noyau bien sûr. Mais il doit impérativement être compilé statiquement, c'est-à-dire avec les bibliothèques nécéssaires inclues dans le binaire executable afin de le rendre autonome.


 USE=static emerge -av1 busybox

[titre2]Mini système[/titre2]

Passons à la création de ce mini système qui sera executé avant le vrai


 cd /usr/src/
 mdkir -p initramfs initramfs/{bin,dev,etc,proc,root,sbin,sys,mnt}

Maintenant mettons le binaire statique de busybox :


 cd initramfs
 cp -a /bin/bb bin/busybox

[titre2]Init[/titre2]

L'init est une partie trés importante de votre iniramfs car c'est ce script qui va être exécuté par le noyau.

Créez un fichier init :


 touch init && chmod +x init

Editez et mettez le code qui suit :


 #!/bin/busybox sh
 
 f_mini_udev()
 {
 busybox --install -s
 echo /sbin/mdev > /proc/sys/kernel/hotplug
 mdev -s
 }
 
 # mount proc, sys and a mini udev
 mount -t proc none /proc
 mount -t sysfs none /sys
 f_mini_udev
 
 # do your magic here
 echo Booting: Initramfs
 
 # LVM
 #lvm vgscan
 #lvm vgchange -a y
 
 # mount the root filesystem, if error then open a shell
 mount -o ro,noatime,logbufs=8 /dev/sda2 /root || exec sh
 
 # clean up
 umount /proc
 umount /sys
 
 # boot the real thing
 exec switch_root /root /sbin/init

[titre2]le noyau[/titre2]

Configurez votre noyau comme ce qui suit si vous voulez y inclure l'initramfs :


 General setup --->
 [*] Initial RAM filesystem and RAM disk (initramfs/initrd) support
 (/usr/src/initramfs)

Sinon en externe :


 General setup --->
 [*] Initial RAM filesystem and RAM disk (initramfs/initrd) support
 ()

Créez un script vous permettant de générer facilement l'archive cpio


 touch /usr/src/mkinitramfs && chmod +x /usr/src/mkinitramfs

Editez et mettez le code qui suit :


 #!/bin/bash
 
 cd /usr/src/initramfs
 find . | cpio -H newc -o > ../initramfs.cpio
 cd ..
 cat initramfs.cpio | gzip > initramfs.gz

Executez le script :


 /usr/src/initramfs

Copiez votre archive dans /boot


 cp /usr/src/initramfs.gz /boot

Ensuite il vous faudra configurer votre chargeur de démarrage.

[titre2]Grub[/titre2]

Editez le fichier /boot/grub/grub.conf :


 default 0
 timeout 05
 splashimage=(hd0,0)/grub/splash.xpm.gz
 
 
 title=GENTOO 2.6.27 Gentoo R8
 root (hd0,0)
 kernel /kernel-2.6.27-gentoo-r8 root=/dev/sda2 video=vesafb:mtrr:3,ywrap vga=0x31a
 initrd /initramfs.gz

Il ne vous reste plus qu'à rebooter... bonne chance ;-)

[titre1]Liens[/titre1]

http://en.gentoo-wiki.com/wiki/Initramfs

OpenVZ

Stephane Malinet — 2008-12-26T21:12:59Z

OpenVZ est une solution de virtualisation basée sur un patch du noyau.

[titre1]Introduction[/titre1]

OpenVZ permet de faire tourner jusqu'à 100 machines virtuelles par machine physique.

Là où les autres solutions de virtualisation affichent une perte de performance d'environ 15 à 20% pour les machines virtuelles, OpenVZ n'en compte que 3 à 5%.

Un des inconvénients majeur par rapport à certains de ses concurrents, est, vu que la solution est basée sur une modification du système d'exploitation, de ne pouvoir faire tourner qu'un linux dans un linux et pas un windows dans un linux...

En revanche, elle permet la migration des machines virtuelles (appelées VE, Virtual Entity, ou CT, container) à chaud ou à froid d'un noeud physique (appelé HN, Hardware Node) à l'autre.

[titre1]Installation du Hardware Node[/titre1]

[titre2]openvz-sources[/titre2]

Après avoir testé les versions stables sur des architectures x86 et x86_64 du noyau openvz-sources, il s'est avéré qu'avec gcc-4.1.2 seule la version openvz-sources-2.6.24.006.5 fonctionne correctement.

[warn]Inutile d'éssayer avec >=gcc-4.2.[/warn]

Commençons donc par démasquer ce paquet :


 echo "sys-kernel/openvz-sources ~x86" >> /etc/portage/package.keywords
 echo "sys-kernel/openvz-sources" >> /etc/portage/package.unmask

Ensuite installez-le :


 emerge -av openvz-sources

[titre2]vzctl[/titre2]

vzctl est l'utilitaire qui vous permet d'administrer les CTs.

Si vous utilisez >=baselayout-2 installez la version la plus récente de la l'arbre de portage :


 echo "sys-cluster/vzctl ~x86" >> /etc/portage/package.keywords
 echo "sys-cluster/vzctl" >> /etc/portage/package.unmask


 emerge -av vzctl

Nous verrons par la suite sa configuration.

[titre1]Configuration du Hardware Node[/titre1]

[titre2]Le noyau[/titre2]

Une fois le paquet openvz-sources installé, passez à sa configuration


 cd /usr/src/linux
 make menuconfig


 -*- Enable the block layer --->
 IO Schedulers --->
 <*> CFQ I/O scheduler
 Default I/O scheduler (CFQ) --->
 OpenVZ --->
 [*] Virtual Environment support
 <M> VE calls interface
 -M- VE network device
 -M- Virtual ethernet device
 -M- VE device
 [*] VE netfiltering
 <M> VE watchdog module
 <M> Checkpointing & restoring Virtual Environments
 File systems --->
 [*] Quota support
 [*] Report quota messages through netlink interface
 <M> Quota format v2 support
 <M> VPS filesystem
 <M> Virtuozzo Disk Quota support
 [ ] Unloadable Virtuozzo Disk Quota module
 [*] Per-user and per-group quota in Virtuozzo quota partitions

Compilez et installez votre noyau après l'avoir configuré pour votre matériel et rebootez.

[titre2]vzctl[/titre2]

Donc vzctl est l'utilitaire qui permet l'administration des CTs : création, démarrage, arrêt, configuration et la migration.

Modifiez la ligne suivante dans le fichier /etc/vz/vz.conf :


 DEF_OSTEMPLATE="gentoo"

Et lancez le service vz afin qu'il charge les modules nécéssaires au fonctionement d'openvz :


 /etc/init.d/vz start
 rc-update add vz default

Vérifiez la liste des modules :


 lsmod
 
 Module Size Used by
 vznetdev 16548 2 
 vzrst 139792 0 
 vzcpt 111904 0 
 tun 12416 2 vzrst,vzcpt
 vzmon 32392 4 vznetdev,vzrst,vzcpt
 simfs 5068 1 
 vzdquota 38168 1 [permanent]
 vzdev 3204 3 vznetdev,vzmon,vzdquota

A ce niveau, notre Hardware Node est pret à recevoir ses premiers Container (CT).

[titre1]Création d'un template Gentoo[/titre1]

Vous pouvez bien évidemment utiliser un template préparé OpenVZ que vous pourrez trouver sur www.funtoo.org mais il manquera dans tous ces derniers quelques paquets par exemple pour la configuration du réseau.

Nous allons donc voire comment préparer un template gentoo.

Télécharger un stage3 correspondant à votre architecture :


 cd /vz/template/cache
 wget http://www.funtoo.org/linux/pentium4/funtoo-pentium4-2008.12.19/stage3-pentium4-2008.12.19.tar.bz2

Décompressez votre archive :


 mkdir gentoo
 cd gentoo
 tar xvjpf stage3-pentium4-2008.12.19.tar.bz2

Copiez votre fichier /etc/make.conf


 cp /etc/make.conf /vz/template/cache/gentoo/etc/make.conf

ou éditez le fichier /vz/template/cache/gentoo/etc/make.conf.

Copiez votre fichier /etc/resolv.conf afin d'avoir la résolution DNS pour la préparation de notre template :


 cp /etc/resolv.conf /vz/template/cache/gentoo/etc

Copiez l'arbre portage afin d'installer et de mettre à jour le template suivant les USE activés :


 cp -a /usr/portage /vz/template/cache/gentoo/usr

Vous pouvez aussi le faire avec un point de montage :


 mount -o bind /usr/portage /vz/template/cache/gentoo/usr/portage

Chrootez :


 mount -t proc none /vz/template/cache/gentoo/proc
 mount -o bind /dev /vz/template/cache/gentoo/dev
 chroot /vz/template/cache/gentoo /bin/bash
 env-update && source /etc/profile

Mettez à jour le système :


 emerge -avuDN world

Installez iproute2 pour le réseau :


 emerge -av iproute2

Créez l'interface qui servira aux futurs CTs :


 cd /etc/init.d/
 ln -s net.lo net.venet0

Les CTs n'ont besoin que de proc :


 echo "proc /proc proc defaults 0 0" > /etc/fstab

Editez le fichier /etc/inittab et commentez les lignes suivantes :


 # TERMINALS
 #c1:12345:respawn:/sbin/agetty 38400 tty1 linux
 #c2:2345:respawn:/sbin/agetty 38400 tty2 linux
 #c3:2345:respawn:/sbin/agetty 38400 tty3 linux
 #c4:2345:respawn:/sbin/agetty 38400 tty4 linux
 #c5:2345:respawn:/sbin/agetty 38400 tty5 linux
 #c6:2345:respawn:/sbin/agetty 38400 tty6 linux

Editez le fichier /etc/shadow :


 root:!:10071:0:::::

Cela désactive le login root ce qui permettra sa ré activation, selon vos besoins, avec la commande suivante :


 vzctl set CTID --userpasswd root:password

Supprimer les services inutiles :


 rc-update del checkroot boot
 rc-update del consolefont boot

Modifiez udev :

=baselayout-1.* :


 vi /etc/conf.d/rc
 
 RC_DEVICE_TARBALL="no"

=baselayout-2.* :


 vi /etc/conf.d/udev
 
 rc_device_tarball="NO"

Créez les devices qui seront nécéssaires à entrer dans un CT :


 cd /lib
 mknod udev/devices/ttyp0 c 3 0
 mknod udev/devices/ptyp0 c 2 0
 mknod udev/devices/ptmx c 5 2

A ce niveau le template est pret.


 exit
 umount /vz/template/cache/gentoo/proc /vz/template/cache/gentoo/dev /vz/template/cache/gentoo/usr/portage

Créons l'archive de notre template :

[warn]OpenVZ ne supporte pas le format bzip2 ![/warn]


 tar cvzpf ../gentoo.tar.gz .
 cd ..
 rm -rf gentoo stage3-pentium4-2008.12.19.tar.bz2

[titre1]Création d'un CT[/titre1]

Pour créer un CT maintenant que notre template est pret cela est simple :


 vzctl create 777 --ostemplate gentoo

Lancez le CT :


 vzctl start 777

Et appréciez :


 vzlist
 
 CTID NPROC STATUS IP_ADDR HOSTNAME 
 777 22 running 192.168.0.2 ct777
 
 vzctl enter 777

[titre1]Adminitration d'un CT[/titre1]

Pour les valeurs des ressources système des CT :


 cat /proc/user_beancounters
 Version: 2.5
 uid resource held maxheld barrier limit failcnt
 777: kmemsize 1314354 2467837 11055923 11377049 0
 lockedpages 0 0 256 256 0
 privvmpages 58603 85448 131072 139264 36
 shmpages 1 2 21504 21504 0
 dummy 0 0 0 0 0
 numproc 21 44 240 240 0
 physpages 29534 54552 0 2147483647 0
 vmguarpages 0 0 33792 2147483647 0
 oomguarpages 29534 54552 26112 2147483647 0
 numtcpsock 3 5 360 360 0
 numflock 35 50 188 206 0
 numpty 1 2 16 16 0
 numsiginfo 0 5 256 256 0
 tcpsndbuf 26784 180792 1720320 2703360 0
 tcprcvbuf 49152 805544 1720320 2703360 0
 othersockbuf 118296 253072 1126080 2097152 0
 dgramrcvbuf 0 8376 262144 262144 0
 numothersock 81 87 360 360 0
 dcachesize 181116 223704 3409920 3624960 0
 numfile 680 1086 9312 9312 0
 dummy 0 0 0 0 0
 dummy 0 0 0 0 0
 dummy 0 0 0 0 0
 numiptent 10 10 128 128 0
 0: kmemsize 3675498 4827817 2147483647 2147483647 0
 lockedpages 0 0 2147483647 2147483647 0
 privvmpages 11010 38156 2147483647 2147483647 0
 shmpages 2594 3602 2147483647 2147483647 0
 dummy 0 0 2147483647 2147483647 0
 numproc 70 93 2147483647 2147483647 0
 physpages 5464 15614 2147483647 2147483647 0
 vmguarpages 0 0 2147483647 2147483647 0
 oomguarpages 5482 15647 2147483647 2147483647 0
 numtcpsock 18 22 2147483647 2147483647 0
 numflock 3 6 2147483647 2147483647 0
 numpty 5 6 2147483647 2147483647 0
 numsiginfo 0 5 2147483647 2147483647 0
 tcpsndbuf 212040 249984 2147483647 2147483647 0
 tcprcvbuf 388888 644952 2147483647 2147483647 0
 othersockbuf 138384 206184 2147483647 2147483647 0
 dgramrcvbuf 0 8376 2147483647 2147483647 0
 numothersock 110 126 2147483647 2147483647 0
 dcachesize 788352 829068 2147483647 2147483647 0
 numfile 1657 2240 2147483647 2147483647 0
 dummy 0 0 2147483647 2147483647 0
 dummy 0 0 2147483647 2147483647 0
 dummy 0 0 2147483647 2147483647 0
 numiptent 24 24 2147483647 2147483647 0

La colonne failcnt permet de voir quelle valeur a été trop restrictive pour le bon fonctionement de votre CT.

[titre2]Le hostname[/titre2]


 vzctl set 777 --hostname ct777 --save

[titre2]Le réseau[/titre2]


 vzctl set 777 --ipadd 192.168.0.2 --nameserver 192.168.0.253 --searchdomain gentoofr.org --save

[titre2]le CPU[/titre2]

La mesure est 100% par CPU, donc si vous avez deux CPU, vous avez 200%...

Limiter le CT à 15% maxi de l'utilisation du HN :


 vzctl set 777 --cpulimit 15 --save

[titre2]La mémoire[/titre2]

Modifier la mémoire allouée à un CT :


 vzctl set 777 --privvmpages $((65536*2)):$((69632*2)) --save

[titre2]AccessTime[/titre2]

Ne pas mettre à jour la date du dernier accés à l'inode (limite les I/O) :


 vzctl set 777 --noatime yes --save

[titre2]IO Priority[/titre2]

Changer les priorités des entrées/sorties :


 vzctl set 777 --ioprio [0-7](default 4) --save

[titre2]Le quota disque[/titre2]


 vzquota stat 777
 
 resource usage softlimit hardlimit grace
 1k-blocks 931791 1048576 1153434 
 inodes 170026 200000 220000

le multiplier par deux :


 vzctl set 777 --diskspace $((1048576*2)):$((1153434*2)) --save

[titre1]Checkpointing[/titre1]

Le checkpointing est une extension d'OpenVZ permettant de sauver la totalité de l'état d'un CT en fonctionement afin de le restaurer sur le même ou un autre HN de manière transparante pour les applications et les connexions réseau.

Pendant la Migration le CT freeze le temps de synchroniser ses fichiers avec le nouvel HN, lorsque cela est terminé tout reprend normalement :


 vzmigrate --online 192.168.0.6 777

Faire le checkpoint manuel :


 vzctl chkpnt 777

Les processus courants du CT sont freezés et sauvegardés comme fichier /vz/dump/Dump.777

Si vous obtenez ce genre de méssage :


 vzctl chkpnt 777
 Setting up checkpoint...
 suspend...
 dump...
 Can not dump container: Invalid argument
 Error: iptables-save exited with 255
 Checkpointing failed

1. Vous utilisez iptables dans votre CT mais vzctl cherche les binaires iptables-save et iptables-restore dans /sbin ou dans /usr/sbin : vérifiez leur présence ou créez les liens nécéssaires.

2. Si vous n'utilisez pas iptables dans dans le CT, créez les liens iptables-save et iptables-restore renvoyant un code de sortie 0 :


 vzctl enter 777
 ln -sf /bin/true /sbin/iptables-save
 ln -sf /bin/true /sbin/iptables-restore

Pour le restaurer :


 vzctl restore 777

[titre1]Liens[/titre1]

tmpfs

Stephane Malinet — 2008-11-08T15:33:19Z

Entendez Temporary File System, est implémenté dans le noyau 2.6 et se base sur ramfs, il propose une limite de taille mémoire allouable fixée au moment du montage modifiable à la volée et utilisant le swap si nécéssaire.

[titre1]Introduction[/titre1]

Le gros avantage de tmpfs par rapport à ramfs est l'allocation dynamique de la mémoire permettant ainsi de ne pas utiliser cette espace si cela n'est pas nécéssaire.

Je m'explique si vous allouez 1Go de ram à un montage tmpfs, que vous y écrivez un fichier de 100Mo, les 900Mo restant seront allouable aux autres ressources.

Je vous invite à regarder les options spécifiques de montage de tmpfs avec man mount.

Par défaut, si vous ne spécifiez pas de valeur de taille, la moitié de votre ram sera allouée.

[warn]Il me semble une trés mauvaise idée d'allouer toute votre ram à tmpfs, cela risque en cas de saturation de l'obliger à swapper et, de fait, d'obtenir des performances inverses...[/warn]

Bien, passons aux exemples.

[titre1]Portage[/titre1]

Par défaut, portage utilise le repertoire de travail temporaire /var/tmp/portage afin d'y décomprésser les sources d'un paquet et d'y faire son travail de compilation (make), mais aussi son installation (make install), ensuite seulement il copie les fichiers installés dans votre système.

Je pense que vous aurez compris le bénéfice en terme de rapidité lors d'un emerge, d'écrire ces fichiers temporaires directement dans la mémoire via tmpfs plutôt que sur le disque dur sachant que généralement votre mémoire devrait être quelque chose comme 200 fois plus rapide que votre disque...

Dans la pratique, vous avez deux solutions : utiliser /dev/shm , ou créer un point de montage spécifique pour votre portage.

[titre2]/dev/shm[/titre2]

/dev/shm alloue la moitié de votre ram avec tmpfs.

Pour ce faire il vous suffit de modifier votre ficher /etc/make.conf avec les valeurs suivantes :

PORTAGE_TMPFS="/dev/shm"
 PORTAGE_TMPDIR="/dev/shm"
 BUILD_PREFIX="/dev/shm"

[titre2]/var/tmp/portage[/titre2]

Si en revanche vous choisissez de créer un point de montage spécifique, vous devrez modifier votre fichier /etc/fstab :

none /var/tmp/portage tmpfs uid=250,gid=250,mode=775,noauto 0 0

Montez-le avant de lancer l'installation d'un paquet :

# mount -v /var/tmp/portage

[warn]Certains paquets tels que gcc ou openoffice auront besoins de plus d'1Go d'espace temporaire, ou encore si vous avez beaucoup de paquets à mettre à jour, n'utilisez pas cette technique car vous arriverez vite à saturation des 1Go faisant ainsi planter vos installations[/warn]

[titre1]/tmp[/titre1]

Une autre utilisation est de monter tout votre /tmp avec tmpfs améliorant passablement les performances des logiciels ou du système lors de l'utilisation de ce repertoire.

Modifiez votre fichier /etc/fstab :

/dev/shm /tmp tmpfs defaults,nosuid,nodev,noexec 0 0

Ce qui, comme expliqué plus haut, allouera la moitié de votre mémoire à ce repertoire.

Je ne saurais trop vous conseillez dans ce cas d'ajouter une crontab root purgeant régulièrement le repertoire /tmp au cas où certaines applications ne le fassent pas correctement :

# vidage du repertoire /tmp des fichiers vieux de 24H toutes les 12H 
 0 */12 * * * find /tmp -type f -mmin +1440 -delete > /dev/null

[titre1]MySQL[/titre1]

Sous gentoo, la configuration par défaut de MySQL est d'utiliser le repertoire /tmp, donc si vous utilisez déjà tmpfs sur /tmp passez votre chemin... ;-)

Si en revanche vous désirez séparer le repertoire de travail temporaire de MySQL, modifiez votre fichier /etc/mysql/my.cnf :

tmpdir = /var/tmp/mysql

Créez le repertoire en question :

# mkdir /var/tmp/mysql

Modifiez ensuite votre fichier /etc/fstab :

none /var/tmp/mysql tmpfs uid=60,gid=60,mode=775 0 0

Passons à son activation :

# mount -v /var/tmp/mysql && /etc/init.d/mysql restart

[titre1]Conclusion[/titre1]

tmpfs est trés simple à utliser et peux du coup être adapté à tous vos besoins à condition d'avoir, vous l'aurez compris, une quantité de ram conséquente... ;-)

lsof

Stephane Malinet — 2008-09-27T11:01:38Z

lsof permet de lister les fichiers et repertoires ouverts mais aussi les sockets (TCP et UDP)...

[titre1]Introduction[/titre1]

Ne vous est-il jamais arrivé de vouloir supprimer un repertoire ou de démonter une partition et que cela vous soit refusé même en tant que root ? Probablement que si car c'est un problème qui survient lorsque la ressource est utilisée par une application ou un utilisateur, et c'est là que lsof intervient...

Regardons par quelques exemples ce dont il retourne...

[titre1]Installation[/titre1]

# emerge -av lsof

La Gentoo c'est quand même formidable !

[titre1]Utilisation[/titre1]

Imaginons que vous vouliez reformater la partition correspondant au repertoire /home et que vous n'arrivez pas à la démonter.

# umount /home
 umount: /home: périphérique occupé
 umount: /home: périphérique occupé

Nous allons rechercher le soucis :

# lsof | grep /home
 zsh 16001 babykart cwd DIR 8,18 34 65537 /home/babykart

Il semble donc que nous ayons le coupable : l'utilisateur babykart utilisant un shell zsh dans le repertoire /home/babykart.

Soit vous faites changer de repertoire à babykart soit vous killez nerveusement... ;-)

Sinon lsof vous permet de lister les connexions :

lsof -i:80
 COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME
 lighttpd 30521 lighttpd 4u IPv4 311283 TCP *:http (LISTEN)
 lighttpd 30522 lighttpd 4u IPv4 311283 TCP *:http (LISTEN)
 lighttpd 30523 lighttpd 4u IPv4 311283 TCP *:http (LISTEN)

Pour d'autres options reportez-vous au man ...

[titre1]Remerciements[/titre1]

Ce "trucs" est tiré de la partie "4. Tips and Tricks" de la Gentoo Monthly Newsletter du 31-08-2008.

La vie de gentoofr.org 21-09-2008

Stephane Malinet — 2008-09-21T18:15:13Z

Nous avons dernièrement pris notre courage à deux mains afin de mettre un peu à jour notre site... Et quel ne fut pas notre stupeur de constater que les forums ouverts étaient pollués de liens en tout genre allant de la location de voiture, aux agences de voyage, en passant par des vendeurs de logiciels, de cheveaux, de médicaments... et vite fait avec ça ! en 24 heures quelques robots chasseur de pagerank nous avaient pourri notre site !

Et en particulier sur l'article Clavier Dvorak dont nous avions des liens entrants venant de sites pornographiques... Quelle horreur ! :-D

Mesures d'urgence, fureteurs lancés : suppression des forums non pertinents, fermeture de tous les forums en attendant de les re activer avec moderation 'a priori'... bref, quelques heures de nettoyage... pas toujours désagréables... :-D

Ouais m'enfin le net c'est quand même une sacrée jungle des fois...

A côté de cela, nous en avons profité pour remettre à jour la documentation DHCP + LDAP : les liens cassés (merci à Etienne Lafore) et ajout d'un ebuild dhcp-4.0.0 non testé (la compilation est passée sur x86) dont le patch proviens du cvs Redhat.

Petit lifting aussi sur les articles Migration vers reiser4, Support de reiser4 sur un noyau gentoo ou vanilla et Configuration simplifiée iptables...

Le premier article de la rubrique Trucs et Astuces a été splité en deux petits articles : a2ps dans emacs et Le service multiposte de Free et vlc.

La page Télécharger Gentoo a été modifiée afin d'y inclure SystemRescueCD pour les liveCD et Funtoo, par Daniel Robbins le créateur de la Gentoo, pour les stages, tildés ou non, à télécharger. En plus bien évidemment de tout le support officiel Gentoo.

a2ps dans emacs

Thierry Volpiatto — 2008-09-21T17:22:04Z

L'extension a2ps-print permet d'imprimer sous l'editeur Emacs [1].

[titre1]a2ps dans emacs[/titre1]

Pour installer a2ps-print sur votre Gentoo, il suffit d'installer le paquet a2ps :

# emerge -av a2ps

Le fichier contenant l'extension propose quelques exemples de configuration pour votre fichier .emacs. Elle ne marchent pas toutes en tout cas avec gentoo , voici ce que j'ai mis dans mon .emacs :

(load "a2ps-print")
 (global-set-key (kbd "<f12> a") 'a2ps-buffer) 
 (global-set-key (kbd "<f12> z") 'a2ps-region) 
 (setq a2ps-switches `("-C" "--line-numbers=1"))

a2ps-print.el utilise par défaut l'impression en mode paysage en double page, or en général quand on est dans emacs on veut imprimer du texte en mode portrait , donc pour cela , il faut :

(une petite sauvegarde du fichier original en cas de boulette...)
 # cp /usr/share/emacs/site-lisp/a2ps-print.el /usr/share/emacs/site-lisp/a2ps-print.el_ORI

Editer en root /usr/share/emacs/site-lisp/a2ps-print.el
Ajouter à la fin du fichier, juste aprés (concat "-d") et en passant à la ligne : (ligne 96) (concat "-1Rf12") et enregistrez
Revenir sur la liste du répertoire et mettre son curseur sur a2ps-print et éxécuter la commande "Byte-compile" avec : "B"
Redemarrez emacs
ouvrir un fichier et faire "f12 a" pour imprimer tout le buffer ou mettre une zone en surbrillance et l'imprimer en faisant : "f12 z" Vous pouvez changer ces macros à votre convenance dans .emacs.

[1] Emacs ou Editing MACroS est une famille d'éditeurs de texte disposant d'un ensemble extensible de fonctionnalités et qui est très populaire parmi les programmeurs (wikipédia)

Le service multiposte de Free et vlc

Maxime Brunel — 2008-09-21T17:20:30Z

Free conseille le lecteur Vlc pour l'utilisation de son service multiposte. Ce lecteur permet de lire une multitude de formats vidéos et d'audios, DVD, VCD... et en ce qui nous intéresse ici un flux réseau.

[titre2]Configuration des use de vlc et du masque pour certaines versions de live[/titre2]

Avant d'installer vlc, nous allons déjà configurer correctement les USE pour que vlc puisse lire le flux de free pour la télévision.

# echo "media-video/vlc live stream">> /etc/portage/packages.use

Nous vous conseillons aussi les USE :

oggvorbis, theora, mpeg, ffmpeg, flac, matroska, win32codecs : support du format ogg, ogg, théora, mpeg, matroska, et différents codecs windows.
dvd : support des dvd
dts : support de dts
cdda, cddb : support des cd audio et récupération des informations des cds
wxwindows : interface graphique de vlc

Pour avoir plus d'informations sur les USE, vous pouvez utiliser la commande (euse est disponible dans le paquet gentoolkit) : # euse -i use

Le paquet live, qui permet la lecture des flux rtp/rctp/rts utilisés pour le multiposte, connait des bugs dans les versions supérieurs à 2005.11.11. C'est pourquoi, avant d'installer vlc, nous allons masquer ces versions : # echo ">media-plugins/live-2005.11.11" >> /etc/portage/package.mask

[titre2]Installation[/titre2]

Enfin il ne vous reste plus qu'à installer vlc : # emerge -av vlc

[titre2]Utilisation[/titre2]

Pour l'utilisation, vous n'avez normalement rien à configurer. Pour lancer la télévision, la commande est la suivante : # vlc http://mafreebox.freebox.fr/freeboxtv/playlist.m3u

Vous trouverez plus d'informations sur le multiposte sur http://adsl.free.fr/tv/multiposte/.

Sortie de la 2008.0

Stephane Malinet — 2008-07-31T18:13:50Z

Le 6 juillet 2008 l'équipe de Gentoo annonce la sortie de sa première version pour l'année 2008 : 2008.0.

Cette version a pour nom de code "It's got what plants crave".

L'on notera la sortie de la version 2008.0-r1 deux jours plus tard, le 8 juillet 2008, corrigeant deux bugs critiques (Bug #230998, Bug #231024).

Cela dit, les nouveautés sont une fois de plus au rendez-vous, heureusement me direz-vous, attendu que la dernière version stable (2007.0) date de mai 2007...

Parmis ces nouveautés, l' "installeur" a été mis à jour en version 0.6.6, on trouve aussi la version 2.1.4.4 de portage, le noyau 2.6.24 avec lui un support matériel plus complet, Xfce 4.4.2, gcc 4.1.2 et la glibc 2.6.1.

Les gentooistes ayant déjà un système à jour savent que cela n'a pas une grande importance car ces versions ne sont en fait que des clichés à un instant donné de Gentoo Linux.

Ces derniers n'ayant qu'à mettre à jour leur profile qui, à mon sens, est la grosse nouveauté de cette version, car il a été completement restructuré apparaissant maintenant sous la forme /usr/portage/profiles/default/linux/ alors qu'avant il s'agissait du chemin /usr/portage/profiles/default-linux/.

Je vous invite d'ailleurs à vous reporter au guide de migration afin de mettre à jour votre profile.

libATA

Stephane Malinet — 2008-05-18T16:36:33Z

La libATA est une bibliothèque utilisée sous le noyau linux pour le support des controlleurs et périphériques ATA. Elle permet de gérer les transferts ATA et ATAPI via le sous-système SCSI.

[titre1]Introduction[/titre1]

La libATA est une bibliothèque du noyau linux pour le support des controlleurs et périphériques ATA. Elle permet de gérer les transferts ATA et ATAPI via le sous-système SCSI. Apparue dans le noyau 2.6.18, à la base développée pour le support des disques Serial ATA, elle s'est imposée comme le futur standard des disques Paralell ATA (entendez les disques à interfaces IDE). De fait à terme les drivers IDE seront probablement amenés à disparaitre du noyau au détriment de la libATA. Un des gros avantages, est de n'avoir à paramétrer qu'un seul format de périphérique peu importe le type d'interface IDE, SATA, ou SCSI : tout sera vu en /dev/sd* et /dev/sr* pour les lecteurs et graveurs CD DVD.

[titre1]Configuration[/titre1]

[titre2]Le Noyau[/titre2]

Nous allons donc dans un premier temps changer la configuration du noyau :

# cd /usr/src/linux
 # make menuconfig

Si vous n'avez que des disques SATA et que vous utilisez des clés USB, alors votre configuration noyau est déjà trés proche de celle ci-dessous, pensez à désativer le support ATA/ATAPI... et à activer le support des lecteurs de CDROM SCSI. Sélectionnez les options suivantes afin de n'activer que le support libATA :

Device Drivers --->
 < > ATA/ATAPI/MFM/RLL support --->
 SCSI device support --->
 -*- SCSI device support
 <*> SCSI target support
 [*] legacy /proc/scsi/ support
 <*> SCSI disk support
 <*> SCSI CDROM support
 [*] Enable vendor-specific extensions (for SCSI CDROM)
 <*> SCSI generic support
 [*] SCSI logging facility
 [*] Asynchronous SCSI scanning
 <*> Serial ATA (prod) and Parallel ATA (experimental) drivers --->
 (sélectionnez le support de votre chipset à l'aide de la commande lspci, dans notre exemple un intel)
 <*> Intel ESB, ICH, PIIX3, PIIX4 PATA/SATA support

Ensuite recompilez votre noyau :

# make -j2 && make modules_install

[titre2]Le fichier /etc/fstab[/titre2]

C'est là que cela se complique un peu puisque les disques IDE seront vus comme des disques SCSI, si vous n'aviez que des disques IDE, alors ce sera relativement simple puisque d'une manière générale, /dev/hda deviendra /dev/sda, /dev/hdb -> /dev/sdb... en revanche, si vous mixiez disques SATA et disques IDE alors il va falloir trouver un moyen de savoir comment seront nommés les disques.

Une méthode serait de labeliser vos partitions c'est-à-dire de donner un nom à ces partitions afin de pouvoir nommer la partition /boot en BOOT par exemple. L'opération de mettre des labels sur vos partitions doit impérativement se faire sur des partitions non montées, le mieux est donc depuis un liveCD. Pour ce faire utilisez les outils suivant :

sur ext2/3 : tune2fs (16 caractères maximum)

# tune2fs -L BOOT /dev/hda1

sur reiserfs : reiserfstune (16 caractères maximum)

# reiserfstune -l ROOT /dev/hda2

sur xfs : xfs_admin (12 caractères maximum)

# xfs_admin -L USR /dev/hda3

sur jfs : jfs_tune (16 caractères maximum)

# jfs_tune -L VAR /dev/hda6

Pour la partition de swap :

# mkswap -L SWAP /dev/hda5

Modifiez ensuite le fichier /etc/fstab :


 [...]
 LABEL=ROOT / reiserfs noatime 0 2
 [...]

Autre méthode est d'utiliser la dénomination par UUID (entendez Universal Unique IDentifier) des partitions.

Pour les connaître :

# ls -lh /dev/disk/by-uuid/
 total 0
 lrwxrwxrwx 1 root root 10 mai 11 18:44 136cea0d-4971-45f7-a22f-184c28325e0d -> ../../hdb1
 lrwxrwxrwx 1 root root 10 mai 11 18:44 19f589de-5fe1-4ef8-886e-5407bdd09242 -> ../../hda6
 lrwxrwxrwx 1 root root 10 mai 11 18:44 23522038-ec20-4d27-b082-2cb7cb01d18f -> ../../hda7
 lrwxrwxrwx 1 root root 10 mai 11 18:44 28176ab9-04a4-4661-ae7b-aad4e2adc4e3 -> ../../hda3
 lrwxrwxrwx 1 root root 10 mai 11 18:44 81b59432-398e-40fd-8098-f6f7b4abc52a -> ../../hda5
 lrwxrwxrwx 1 root root 10 mai 11 18:44 88f09f52-b4f6-4ee3-b96f-d86b6d4b1e57 -> ../../hda1
 lrwxrwxrwx 1 root root 10 mai 11 18:44 c422bb01-014d-46b2-98cd-73071234df6f -> ../../hda8
 lrwxrwxrwx 1 root root 10 mai 11 18:44 d605fa56-f3bb-416c-9b65-27cde7a703f6 -> ../../hda2

Remplacez donc dans le fichier /etc/fstab vos /dev/hd* par les UUID correspondantes :


 [...]
 UUID=d605fa56-f3bb-416c-9b65-27cde7a703f6 / reiser4 noatime,nodiratime 0 2
 [...]

Dans tout les cas n'oubliez pas vos lecteurs et/ou graveurs CD DVD :

/dev/sr0 /mnt/dvdrom iso9660 noauto,ro,user 0 0
 /dev/sr1 /mnt/cdr iso9660 noauto,ro,user 0 0

[titre2]Le Chargeur de démarrage[/titre2]

Grub

Modifiez le fichier /boot/grub/grub.conf :

title=GENTOO 2.6.25 entropie R3
 root (hd0,0)
 kernel /kernel-2.6.25-entropie-r3 root="LABEL=ROOT"

Lilo

Modifiez votre fichier /etc/lilo.conf :

boot=/dev/sda
 prompt
 timeout=50
 default=Gentoo
 
 image=/boot/kernel-2.6.25-gentoofr-r5
 label=Gentoo
 read-only
 root="LABEL=ROOT"

A ce niveau il ne vous reste plus qu'à rebooter... Ceci dit, pensez à vérifier vos configurations hdparm et lvm... Dans le pire des cas vous ne verrez aucune différence en terme de performances, en revanche dans le meilleur des cas ces dernières seront améliorées.