Flox-arts.net - Développement & Ingénierie

Python 2.6 sur Debian Lenny

Florent MONTHEL — Mon, 17 Jan 2011 23:52:00 +0100

La distribution Debian Lenny 5.0.7 propose sur les dépôts officiels la version 2.5 de Python et il s'avère qu'elle devient obsolète.

Dans mon précédent article sur OpenSVC, je propose l'installation de la version Python 2.6 via une mise à jour de /etc/apt/sources.list ce qui n'est pas le plus propre. Voici une autre méthode.

Nous allons compiler Python depuis les sources :

apt-get install build-essential libssl-dev
cd /tmp
wget http://www.python.org/ftp/python/2.6.6/Python-2.6.6.tar.bz2
tar xvjf Python-2.6.6.tar.bz2
cd Python-2.6.6
./configure --prefix=/usr/local/python2.6 --with-threads --enable-shared
make
make install

Nous allons désormais mettre à jour le système pour utiliser cette version :

cd /usr/bin/
rm -f python
ln -s /usr/local/python2.6/bin/python python2.6
ln -s python2.6 python
ln -s /usr/local/python2.6/lib/libpython2.6.so.1.0 /usr/lib/
ln -s /usr/local/python2.6/lib/libpython2.6.so /usr/

Facile non ?

Cluster OpenSVC sur Cloud Gandi

Florent MONTHEL — Sun, 21 Nov 2010 21:30:00 +0100

OpenSVC est un nouveau logiciel libre français, qui fournit une solution de haute disponibilité (HA) pour les services critiques.

OpenSVC permet le pilotage de ressources (IP, volume de disques, systèmes de fichiers, synchronisations, lanceurs d’applications) et la reprise de vos services en minimisant le temps d’interruption grâce au mécanisme de bascule automatique entre noeuds.

Quel est le rapport avec Gandi ?

Gandi nous propose un hébergement de serveur sur infrastructure Cloud avec la possibilité d'ajouter des ressources à la demande (IPs, disques, RAM, etc).
Depuis le début octobre, ils ont lancés une API afin de manipuler ces ressources en automatique (XML-RPC).

L'API va nous servir à contrôler l'attribution des ressources de service à tel ou tel noeud.

Cahier des charges

Nous avons besoin de créer un service applicatif qui sera complètement étanche vis à vis du serveur physique.

Ce service pourra donc basculer d'une machine à l'autre sans impact fort côté "client" (migration, cluster, etc).

Nous avons donc besoin :

d'une adresse IP de service dédiée
d'un disque dédié de 1Go
d'un nom de service = flatstapp01.flox-arts.net (fla = trigramme Flox-arts.net; tst comme test; app01 comme nom d'application)

Un service MySQL pourrait s'appeler flaprdsql02.flox-arts.net

Préparation côté OpenSVC

Il faut créer un compte via cette page OpenSVC.

Une fois cette étape faite, il vous faut envoyer un mail à support[@]opensvc.com afin de leur demander d'attacher votre compte à votre nom de domaine.
Pour ma part, mon compte est attaché au nom de domaine flox-arts.net.
De ce fait, tous les services, noeuds que vous allez créer avec votre nom de domaine vont remonter dans le collecteur OpenSVC.

Préparation de la VM Gandi (Cloud)

Pour notre test, une machine 1 part suffit largement. La première étape constitue donc à créer cette VM :

1 part Gandi
Mode expert
Image Debian 5 - 32 bits
Un hostname bien défini => ici c'est "athena"
le reste, c'est selon votre convenance

Ne pas prendre l'image Debian 5 - 64 bits, un bug existe

Pendant la création de la VM je vous invite à mettre à jour votre entrée DNS, ici j'ai fait pointer l'adresse IP 92.243.14.166 avec athena.flox-arts.net :

Ne pas oublier de mettre à jour le reverse de l'IP 92.243.14.166 :

Préparation des ressources Gandi dédiées au service

Créons un disque de donnée de 1G que l'on appellera flatstapp01 :

Il faut également créer une IP dédiée (reverse DNS flatstapp01.flox-arts.net) donc mettre à jour le fichier de zone du domaine flox-arts.net dans mon cas :

Ici j'ai fait pointer l'IP 95.142.170.211 avec flatstapp01.flox-arts.net

Configuration de notre VM Gandi pour OpenSVC

On met à jour notre OS :

apt-get update
apt-get upgrade

Clef publique SSH

Je vous conseille de configurer depuis votre poste d'administration l'authentification en root par clef publique pour que ça soit plus commode :

yoshi:~ fmonthel$ ssh root@athena
Flox-art.net - Ceci est un systeme prive
Seul les utilisateurs possedant un compte ont le droit de s'authentifier
Linux athena 2.6.18-xenU #1 SMP Tue Nov 24 18:35:42 CET 2009 i686

The programs included with the Debian GNU/Linux system are free software;
the exact distribution terms for each program are described in the
individual files in /usr/share/doc/*/copyright.

Debian GNU/Linux comes with ABSOLUTELY NO WARRANTY, to the extent
permitted by applicable law.
athena:~#

Python 2.6

OpenSVC a besoin de Python 2.6 pour fonctionner. Par défaut sur une Debian 5 c'est Python 2.5 qui est installé.
On va ajouter des dépôts dans le fichier /etc/apt/sources.list pour qu'il ressemble à ça :

deb http://mirrors.gandi.net/debian lenny main contrib non-free
deb http://mirrors.gandi.net/gandi/debian lenny main
deb http://security.debian.org/ lenny/updates main contrib non-free
# Apt source for python 2.6
deb http://http.us.debian.org/debian stable main contrib non-free
deb http://ftp.uk.debian.org/debian unstable main

On met à jour apt et on installe Python 2.6 :

apt-get update
apt-get install python2.6

On repositionne ensuite nos dépôts dans /etc/apt/source.list suivi d'un petit apt-get update :

deb http://mirrors.gandi.net/debian lenny main contrib non-free
deb http://mirrors.gandi.net/gandi/debian lenny main
deb http://security.debian.org/ lenny/updates main contrib non-free

Mise à l'heure du système

Il est primordial que votre serveur soit à l'heure pour que les remontées dans le collecteur OpenSVC soient correctes :

apt-get install ntpdate
ntpdate ntp.gandi.net

Mise à jour de la timezone dans le fichier /etc/timezone :

Europe/Paris

On peut automatiser la mise à jour régulière de l'heure du système en crontab par exemple (etc/crontab)

Installation d'OpenSVC sur notre VM Gandi

Vous pouvez suivre la documentation officielle, je détaille ci-dessous l'essentiel pour une VM Gandi.

On télécharge et installe le dernier repository OpenSVC :

cd /tmp
wget http://repo.opensvc.com/deb/opensvc-1.0-101008.1159.noarch.deb
dpkg -i opensvc-1.0-101008.1159.noarch.deb

Voilà OpenSVC est installé dans le répertoire /opt/opensvc.

Configuration d'OpenSVC sur notre VM Gandi

Il faut définir le type de serveur que nous avons installé.
Un serveur peut être enregistré comme noeud PRD ou DEV, ici nous choisirons DEV (fichier /opt/opensvc/var/host_mode) :

athena:/tmp# more /opt/opensvc/var/host_mode
DEV

Afin que la remontée d'information dans le collecteur OpenSVC se passe bien, il faut que le nom generic dbopensvc pointe vers collector.opensvc.com.
On ajoute donc cette entrée dans le fichier /etc/hosts :

# Collecteur OpenSVC
188.165.36.82   collector.opensvc.com   dbopensvc

OpenSVC a besoin que la commande hostname retourne le FQDN (afin de lier votre serveur à votre compte OpenSVC).

Pratique, Gandi propose cette option dans le fichier /etc/default/gandi :

athena:~# more /etc/default/gandi | grep HOSTNAME
HOSTNAME_TYPE=full
athena:~# reboot

Le hostname sera le reverse DNS de l'interface VM (eth0)

Création du service OpenSVC sur notre VM Gandi

On est prêt à créer notre service flatstapp01.flox-arts.net, vous pouvez suivre la documentation officielle.
On se place dans le répertoire de configuration des services :

cd /opt/opensvc/etc

Ce lien symbolique permet de passer toutes les commandes relatives au service :

ln -s ../bin/svcmgr flatstapp01.flox-arts.net

Ce lien symbolique est essentiel pour démarrer les applications de notre service :

ln -s /srv/flatstapp01/etc/init.d flatstapp01.flox-arts.net.d

On va créer le fichier de configuration /opt/opensvc/etc/flatstapp01.flox-arts.net.env :

[default]
app = FLA
comment = FLA APP TST service 
mode = hosted
service_type = TST
nodes =  athena.flox-arts.net
autostart_node = athena.flox-arts.net
[ip#1]
ipname = flatstapp01.flox-arts.net
ipdev = eth1
pre_start = /opt/opensvc/extern/ip-action.py --action attach --ip 95.142.170.211
pre_stop = /opt/opensvc/extern/ip-action.py --action detach --ip 95.142.170.211
[fs#1]
dev = /dev/xvdb
mnt = /srv/flatstapp01
type = ext3
pre_start = /opt/opensvc/extern/disk-action.py --action attach --disk flatstapp01
pre_stop = /opt/opensvc/extern/disk-action.py --action detach --disk flatstapp01

Il faut bien sûr l'adapter à votre configuration (IP, FS, etc)

Comme vous pouvez le remarquer on utilise les options pre_start et pre_stop de la section IP et FS pour exécuter un script python.
Ces scripts s'occupent d'attacher ou détacher les ressources du service via l'API Gandi :

cd /tmp
wget http://download.flox-arts.net/opensvc-gandi.tar.gz
tar -xvzf opensvc-gandi.tar.gz
mv opensvc-gandi /opt/opensvc/extern
chmod -R 700 /opt/opensvc/extern

Il vous faut éditer les 2 scripts python pour y renseigner votre clef API Gandi (ligne 35)

Bouquet final, le démarrage de notre service OpenSVC

Voilà votre "enveloppe" de service est prête, vous pouvez suivre ces quelques "best practices" :

/srv/flatstapp01/data => stockage des données de votre service (datafiles MySQL par exemple)
/srv/flatstapp01/tools => binaires des applications de votre services (binaire MySQL par exemple)
/srv/flatstapp01/etc/init.d => scripts de démarrage/arrêt des applications de votre service (SysV style)

Allez on démarre notre service minime (IP + FS) :

athena:/# /opt/opensvc/etc/flatstapp01.flox-arts.net start
2010-11-21 19:35:26,838 - FLATSTAPP01.FLOX-ARTS.NET.IP#1 - INFO - /opt/opensvc/extern/ip-action.py --action attach --ip 95.142.170.211
2010-11-21 19:35:51,738 - FLATSTAPP01.FLOX-ARTS.NET.IP#1 - INFO - 95.142.170.211 is already up on eth1
2010-11-21 19:35:51,751 - FLATSTAPP01.FLOX-ARTS.NET.FS#1 - INFO - /opt/opensvc/extern/disk-action.py --action attach --disk flatstapp01
2010-11-21 19:36:31,335 - FLATSTAPP01.FLOX-ARTS.NET.FS#1 - INFO - fs(/dev/xvdb /srv/flatstapp01) is already mounted

On vérifie le statut :

athena:/# /opt/opensvc/etc/flatstapp01.flox-arts.net print_status
rid      status   label
---      ------   -----
fs#1     up       /dev/xvdb@/srv/flatstapp01
ip#1     up       flatstapp01.flox-arts.net@eth1
sync#i0  n/a      rsync svc config to drpnodes, nodes
                  # no destination nodes
sync#i1  n/a      rsync system files to drpnodes
                  # no destination nodes
app      n/a      app
                  # no startup script
overall  up

Et on vérifie que ça remonte bien via le collecteur OpenSVC :

Tutoriel terminé, plus d'informations via :

OpenSVC via http://www.opensvc.com
Gandi hébergement via http://www.gandi.net/hebergement

Nouveau site PluXml.org !

Florent MONTHEL — Fri, 20 Mar 2009 00:00:00 +0100

Nous avons décidé de donner un coup de jeune au site PluXml.org qui n'avait pas évolué depuis la naissance de projet en 2006.
C'est chose faite avec ce design de notre graphiste Ti_Pierre et ce logo de SapinTremblant et NS-shnalla du forum. Merci à eux !

Un wiki digne de ce nom est maintenant accessible à l'adresse wiki.pluxml.org et vous pouvez avec votre compte PluXml créer et éditer de nouvelles pages.

Pour le reste, un forum sous FluxBB et le reste ... sous Pluxml Blog bien sûr !

Article original : http://pluxml.org/?article20/nouveau-site-pluxml-org

Le projet de script Pluxml

Florent MONTHEL — Sun, 27 Jul 2008 13:36:00 +0200

Pluxml est un script pour créer un site ou un blog, nul besoin de connaissance en programmation ni besoin d'une base de données sur son hébergement, un environnement php classique lui suffit. Pluxml se veut léger et facile d'utilisation grâce à une interface d'administration simple et le stockage de vos écrits dans des fichiers Xml facilement transportables.

Le créateur Skyline a malheureusement plus beaucoup le temps de maintenir ce script et je suis donc chargé de reprendre ce projet fort intéressant.

La version blog beta 4, sur laquelle je travaille, sera d'ailleurs :

plus rapide
plus fonctionnelle
plus accessible
respectueuse de l'esprit initial du script

Internet-creation.fr devient Flox-arts.net !

Florent MONTHEL — Sun, 27 Jul 2008 13:19:00 +0200

Blasé par le nom de domaine Internet-creation.fr, je l'ai changé récemment pour Flox-arts.net; un petit clin d'oeil à mon papa ;)

Pluxml - Gestion des liens et des utilisateurs

Florent MONTHEL — Tue, 01 May 2007 12:55:00 +0200

J'ai developpé sous Pluxml, CMS blog et basé uniquement sur des fichiers XML, des modules qui permettent :

la gestion des liens externes = topic ici
la gestion des utilisateurs (avec plusieurs niveaux) = topic ici

Ces deux modules sont inspirés des fonctions de Pluxml et respectent donc "la politique" de ce script léger et rapide
Une petite modification cependant dans la stratégie des variables de sessions de l'administration pour le module "utilisateurs"

// Fonction d'édition des liens externes
function editLiens($content){

	$content = unslash($content);
	$xml = "\n\n";

	foreach($content as $lien_num => $lien_name){
		if(is_numeric($lien_num) & trim($lien_name) != ''){
			$lien_ord = trim($content[$lien_num.'_ord']);
			$lien_url = trim($content[$lien_num.'_url']);
			$xml .= "\t".amp($lien_name)."\n";
		}
	}
	$xml .= "";
	if(write($xml, PLX_DOC.$this->config['liens'])){
		return 'Liens modifiées';
	}else{
		return 'Erreur dans la modification du fichier '.PLX_DOC.$this->config['liens'];
	}
}

// Fonction qui parse le fichier des utilisateurs et qui retourne un tableau
function getUsers($url_file){
	$data = implode("",file($url_file));
	$parser = xml_parser_create('ISO-8859-1');
	xml_parser_set_option($parser,XML_OPTION_CASE_FOLDING,0);
	xml_parser_set_option($parser,XML_OPTION_SKIP_WHITE,0);
	xml_parse_into_struct($parser,$data,$valeurs,$index_tags);
	xml_parser_free($parser);

	if(isset($index_tags['user'])){
		for($i=0;$i < count($index_tags['user']);$i++) {
			$array[$valeurs[$index_tags['user'][$i]]['attributes']['number']]['login']
			= $valeurs[$index_tags['user'][$i]]['attributes']['login'];
			$array[$valeurs[$index_tags['user'][$i]]['attributes']['number']]['type']
			= $valeurs[$index_tags['user'][$i]]['attributes']['type'];
			$array[$valeurs[$index_tags['user'][$i]]['attributes']['number']]['actif']
			= $valeurs[$index_tags['user'][$i]]['attributes']['actif'];
			$array[$valeurs[$index_tags['user'][$i]]['attributes']['number']]['pwd']
			= $valeurs[$index_tags['user'][$i]]['value'];
		}
	return $array;
	}
}