Tensin

Démarrer une virtualbox en plein écran sur un desktop dédié

SRG — Wed, 12 Dec 2012 17:09:00 +0100

En trois lignes :

démarrer la machine virtuelle avec la commande “VirtualBox” et les bons paramètres (startvm et fullscreen)
récupérer l’ID de la fenêtre démarrée avec wmctrl
positionner, toujours avec wmctrl, cette fenêtre sur un autre desktop

Fonctionne parfaitement dans mon cas sur Ubuntu + Cinnamon.

La version longue (à enregistrer dans un .sh, dont le premier paramètre sera le nom de la virtualbox et le deuxième le numéro du desktop) :

#!/bin/zsh
[[ "$#" -ne 2 ]] && echo "Usage: $(basename $0) VIRTUALBOX_NAME DESKTOP_ID" && exit 1
VIRTUALBOX="$1"
DESKTOP="$2"

# === Starts virtualbox in fullscreen mode (detached from the current shell)
[[ $(wmctrl -l|egrep -i ".*${VIRTUALBOX}.*running.*virtualbox.*"|wc -l) -eq 1 ]] && echo "Virtualbox [$VIRTUALBOX] already running" && exit 1
nohup VirtualBox --startvm "$VIRTUALBOX" --fullscreen >/dev/null 2>&1 &

# === Move window to another desktop as soon as the window is available
WINDOW_ID=""
COUNT=0
while [[ -z "$WINDOW_ID" ]] ; do
  wmctrl -l|egrep -i ".*${VIRTUALBOX}.*running.*virtualbox.*"|read WINDOW_ID DUMMY
  if [[ -z "$WINDOW_ID" ]] ; then
    COUNT=$(expr $COUNT + 1)
    if [[ "$COUNT" -gt 10 ]] ; then
      echo "Waited 10 seconds without finding the virtual box window, now stopping ..."
      exit 1
    fi
    sleep 1
  else
    break;
  fi
done  

echo "Now sending virtualbox [$VIRTUALBOX] running on window [$WINDOW_ID] to desktop [$DESKTOP]"
wmctrl -i -r "$WINDOW_ID" -t "$DESKTOP"

Remarque : à savoir, pour le positionnement sur un desktop précis, le premier bureau est numéroté 0.

Commandes utiles additionnelles.

Lister tous les desktops disponibles :

wmctrl -d

Ex. :

0  * DG: 1920x1080  VP: 0,0  WA: 0,0 1920x1080  Espace de travail 1
1  - DG: 1920x1080  VP: N/A  WA: 0,0 1920x1080  Espace de travail 2

Liste toutes les fenêtres :

wmctrl -l

Stopper une virtualbox par la ligne de commande :

VBoxManage controlvm NOM_VIRTUALBOX savestate

Eclipse, astuces & optimisations

SRG — Tue, 21 Aug 2012 15:16:00 +0200

Ci-dessous les slides d’une présentation réalisée pour le boulot et détaillant un certain nombre d’astuces, de raccourcis-claviers, d’optimisations, de plugins, que l’on gagne à connaître quand on utilise Eclipse comme IDE de développement Java.

Il y a un peu de tout, chaque développeur en connaît forcément une bonne partie, mais peut-être pas tout. Cette présentation ne se veut aucunement exhaustive, c’est juste un moyen de centraliser un certain nombre d’informations à même de permettre de mieux utiliser l’outil.

Elle est essentiellement centrée sur Eclipse 3.7 Indigo, mais tout ce qui y figure est toujours valide pour Eclipse 3.8/4.2 Juno.

Au programme : des plugins injustement méconnus et pourtant très utiles comme Grep Console, les raccourcis-claviers indispensables (recherche incrémentale, quick-edit, etc.), des optimisations (sur le content-assist, la purge du cache OSGI, certaines désactivations, la bonne cohabitation Eclipse / Maven), etc.

La présentation en HTML5/javascript étant propulsée par deck.js, un navigateur récent (Chrome ou FireFox) est obligatoire. Une version .pdf, non interactive (pas de vidéos, pas d’images aggrandissables) est toutefois disponible en complément ici.

Convertir une image virtuelle VMDK (VMWare) au format VirtualBox (VDI)

SRG — Tue, 21 Aug 2012 15:11:00 +0200

Pour convertir un disque source au format .vmdk (format natif VMWare) vers le format VirtualBox (.vdi), utiliser :

vboxmanage clonehd image-source.vmdk image-destination.vdi -format VDI

Ce qui s’avère plus efficace et plus direct que de faire un transfert logique avec un outil de clonage comme CloneZilla

PS3MediaServer et boîtier Sony SMP-N200

SRG — Tue, 08 May 2012 17:53:00 +0200

Sony propose depuis quelques mois un boîtier multimédia dont le coeur est issu de celui de la PS3 : le boîter Sony SMP-N200. La navigation dans les menus reprend celle du XMB de la PS3.

Pour accéder depuis ce boîtier, par le réseau, au contenu diffusé par PS3MediaServer, il faut utiliser la configuration suivante (adaptée depuis le fichier de configuration du lecteur BluRay de Sony).

Fichier à placer : renderers/SMP-N200.conf

RendererName=Sony SMP-N200
RendererIcon=/home/applications/ps3mediaserver/1.52.1/SMP-N200.png
UserAgentSearch=UPnP/1.0
UserAgentAdditionalHeader=X-AV-Client-Info
UserAgentAdditionalHeaderSearch=(cn="Sony Corporation"; mn="Media Player" )
Video=true
Audio=true
Image=true
SeekByTime=true
DLNALocalizationRequired=true
TranscodeVideo=MPEGAC3
TranscodeAudio=WAV
DefaultVBVBufSize=true
MuxH264ToMpegTS=false
MuxDTSToMpeg=false
WrapDTSIntoPCM=false
MuxLPCMToMpeg=false
MaxVideoBitrateMbps=0
MaxVideoWidth=0
MaxVideoHeight=0
H264Level41Limited=true
TranscodeAudioTo441kHz=false
TranscodeFastStart=false
TranscodedVideoFileSize=0
AutoExifRotate=true
MimeTypesChanges=video/avi=video/x-divx
StreamExtensions=
ChunkedTransfer=true
ForceJPGThumbnails=true
MediaInfo=true
# Supported = f:mpegps|mpegts    v:mpeg2    a:ac3|aac|mpa   m:video/mpeg
# Supported = f:mp3   m:audio/mpeg
# Supported = f:lpcm  m:audio/L16
# Supported = f:jpg   m:image/jpeg
# --- video ---
Supported = f:mpegps|mpegts     v:mpeg1|mpeg2   a:ac3|dts|lpcm|mpa|mp3  m:video/mpeg
Supported = f:mpegts    v:h264|vc1      a:ac3|dts|dtshd|truehd|aac|lpcm|mpa|mp3 m:video/vnd.dlna.mpeg-tts
Supported = f:mp4|m4v   v:mp4|h264      a:ac3|dts|dtshd|truehd|aac|lpcm|mpa|mp3 m:video/mpeg
######### NON-US MODELS: CHANGE THE FOLLOWING 2 MIME-TYPES TO m:video/divx
Supported = f:avi|divx  v:divx|mp4      a:ac3|lpcm|mpa|mp3      m:video/divx
Supported = f:mkv       v:mp4|divx|h264 a:ac3|dts|dtshd|truehd|aac|lpcm|mpa|mp3 m:video/divx
# --- audio ---
Supported = f:wma       n:2     m:audio/mpeg
Supported = f:mp3       n:2     m:audio/mpeg
Supported = f:lpcm n:2 s:48000 m:audio/L16
# --- image ---
Supported = f:jpg       m:image/jpeg

En finir avec les répertoires target de Maven sous Eclipse

SRG — Tue, 10 Apr 2012 17:18:00 +0200

Pour ne plus être pollué par le contenu des répertoires target de Maven (contenant notamment les classes compilées) lorsque l’on travaille sous Eclipse, il suffit de les marquer en “derived”. Ceci permet d’indiquer à Eclipse que le contenu de ce répertoire ne doit pas être pris en compte lors des recherches, lors des mécanismes de navigation type CTRL+T, etc. C’est un vrai gain de temps sur de gros projets (sans compter que le résultat des recherches est dès lors plus clair).

Cette manipulation n’est aujourd’hui pas automatisable depuis Maven (même si d’antédiluviens bugs y font référence). Le problème étant dès lors qu’à chaque fois qu’une opération “clean” est effectuée côté Maven, le répertoire est effacé, et Eclipse perd l’état derived, qu’il faut donc réappliquer.

La solution pour s’en sortir est de paramétrer Maven, côté pom.xml, pour qu’il n’efface plus le répertoire target, mais uniquement son contenu.

Pour ce faire il suffit de mettre à jour la configuration du plugin maven-clean-plugin.

<plugin>
  <groupId>org.apache.maven.plugins</groupId>
  <artifactId>maven-clean-plugin</artifactId>
  <version>2.4.1</version>
  <configuration>
    <excludeDefaultDirectories>true</excludeDefaultDirectories>
      <filesets>
        <fileset>
          <directory>target</directory>
          <includes>
            <include>**/*</include>
          </includes>
        </fileset>
      </filesets>
  </configuration>
</plugin>

Le résultat est visible dans la log de Maven :

------------------------------------------------------------------------
[INFO] Building sonos-root
[INFO]    task-segment: [clean]
[INFO] ------------------------------------------------------------------------
[INFO] [clean:clean {execution: default-clean}]
[INFO] Deleting /home/users/sergio/Java/workspaces/eclipse/perso-java/sonos-root/target (includes = [**/*], excludes = [])
[INFO] [cobertura:clean {execution: clean}]
[INFO] ------------------------------------------------------------------------

Cette paramétrie gagne bien sûr à être mutualisée à travers différents projets en la définissant dans pom parent root.

Colorer différemment le background de vos sessions SSH

SRG — Thu, 10 Mar 2011 00:31:00 +0100

Pour mettre en couleur le fond d’un terminal sous Linux, il n’y a guère de solutions … Jusqu’ici le plus simple était de jouer avec les profils de Gnome-Terminal (ou autre) et d’associer à tous les onglets la même couleur de fond. Par contre pour avoir une couleur différente sur chaque onglet, c’était jusqu’ici mission impossible, ce qui au demeurant est relativement étonnant, pour ma part j’aurais besoin de cette fonctionnalité :

au travail pour avoir une couleur de fond différente selon le type de machine sur laquelle je me connecte (rouge pour les machines en production, noir pour les serveurs de développement par ex.) ;
chez moi pour différencier la machine sur laquelle je suis connecté (serveur domotique, serveur dédié en ligne, etc.) ;

Je configure bien ces infos dans le prompt (via PS1, avec le login et le hostname), mais c’est très insuffisant (pas suffisament visuel).

Or une solution plutôt élégante existe désormais, mise en place par Ian Blanes : un petit programme en C, sans dépendances, qui s’appelle “colorize”. C’est ce programme qui lance la commande ssh, redirige les entrées / sorties entre le terminal et la connexion ssh, et dans l’intervalle, modifie les couleurs de fond et/ou de police de caractères.

Testée sous evilvte et gnome-terminal, çà fonctionne parfaitement bien, à priori sans ralentissements visibles. Ian explique toutefois que les lignes ayant déjà nativement un fond de couleur se comporteront mal (ce n’est quasiment jamais le cas chez moi).

Sources : http://deic.uab.es/~iblanes/colorize-0.1-src.tar.gz [Colorizer (sources) v0.1mirror ] Homepage : http://deic.uab.es/~iblanes/

L’installation est très simple :

wget http://deic.uab.es/~iblanes/colorize-0.1-src.tar.gz tar xzvf colorize-0.1-src.tar.gz make

Copier ensuite le programme colorize dans un répertoire accessible via le path, par ex. /usr/bin. Le lancement se fait ensuite via pour lancer un SSH avec un fond (-b) gris foncé (Ox333333) par ex. :

colorize -b 0x333333 — ssh root@192.168.0.1

Ensuite à l’utilisation, deux possibilités. Soit définir des alias de commande ssh pour chacune des machines sur laquelle se connecter.

alias ssh-production=’colorize -b 0x333333 — ssh root@192.168.0.1’

alias ssh-dedie=’colorize -b 0xCC0000 — ssh tensin’ # réutilisation alias défini dans ~/.ssh/config

Soit enrober l’appel de la commande ssh avec un fichier de paramétrie. Il suffit dans dans ce cas de créer un fichier ~/.ssh-colorize avec le contenu suivant (premier champ = le hostname, ou l’alias ssh ; deuxième champ, la couleur de background) :

192.168.0.2    0x440000
192.168.0.3    0x440000
solaris        0x000044

Et dans son fichier .profile (ou équivalent si autre shell) mettre en place la fonction suivante :

function ssh {
  typeset DEST=$1
  if [[ -s ~/.ssh-colorize ]] ; then
    HOSTNAME=$(echo "$DEST" | sed 's/.*@//')
    egrep "^$HOSTNAME" .ssh-colorize 2>/dev/null | awk ' { print $2 } ' | read COLOR
  fi
  if [[ ! -z "${COLOR}" ]] ; then
    colorize -b "${COLOR}" -- /usr/bin/ssh "${DEST}"
  else
    /usr/bin/ssh "${DEST}"
  fi
}

De fait, tous les appels ssh passeront par cette fonction, qui ira relire dans ~/.ssh-colorize, si renseigné, le code couleur de background à utiliser ! Ca permet de centraliser toutes les définitions de couleur de background et de facilement en ajouter sans devoir créer des alias.

Choix du workspace Eclipse à utiliser au démarrage via un launcher interactif (Linux)

SRG — Tue, 08 Mar 2011 20:55:00 +0100

Comme je travaille avec plusieurs workspaces Eclipse (regroupant chaque plusieurs projets Eclipse corrélés entre eux, par ex. tous les modules d’un même projet, ou tous mes projets personnels Java ou PHP, ou tous mes projets de tests, etc.), il est beaucoup plus pratique pour moi de choisir le workspace sur lequel je veux travailler directement en démarrant Eclipse (plutôt que de switcher après coup).

De fait, tous mes raccourcis Eclipse pointent en fait sur le script ci-dessous.

Le script se base sur le méconnu mais assez pratique Zenity pour gérer la fenêtre de lancement, et se contente ensuite de démarrer Eclipse avec le paramètre -location chemin_du_workspace.

Visuellement et concrètement çà ressemble à çà, la liste des workspaces, le nombre de projets dans chaque workspace, il suffit de sélectionner celui sur lequel on veut démarrer :

Remarque : bien sûr l’autre manière de changer de workspace consiste à switcher depuis un Eclipse déjà démarré vers un autre workspace (ne pas oublier dans ce cas de cocher la petite case “Copy Settings > Workbench Layout” pour garder la disposition des fenêtres / perspectives).

Le script ( eclipse-launcher.sheclipse-launcher.sh ). A adapter pour les paramètres qui vous seraient propres, bien sûr (chemin vers Eclipse et paramètres additionnels Eclipse notamment).

#!/bin/ksh
 
# ========================================================
# === Variables
# ========================================================
export windows_title="Eclipse Launcher"
export WNG_ICON="/opt/gnome/share/pixmaps/gnome-warning.png"
export ECLIPSE_ICON="/opt/Eclipse_DEV/Eclipse-V3-2-1/icon.xpm"
export WORKSPACES_DIR="/home/user/java/workspaces/eclipse/"
export JAVA_HOME="/home/user/applications/java/jdk1.6.0_24"
export ECLIPSE_BIN="/home/user/applications/eclipse/helios/java/eclipse"
export JAVA_PARAMETERS="-vmargs -Xss4m -Xms326m -Xmx444m -XX:PermSize=256m -XX:MaxPermSize=256m"
 
# ========================================================
# === Récupération de la liste des workspaces
# === et construction pour affichage par Zenity
# ========================================================
WORKSPACES=""
ls -1d "${WORKSPACES_DIR}"/* | egrep -v "\..*|*\.xml" | sort -u | while read ITEM
do
	WORKSPACE_NAME="$(basename ${ITEM})"
	WORKSPACE_COUNT=$(ls -1d "${ITEM}"/* 2>/dev/null | grep -v total | wc -l)
	WORKSPACES="${WORKSPACES}${WORKSPACE_NAME} 	${WORKSPACE_COUNT}
"
done
 
# ========================================================
# === Lancement de Zenity
# ========================================================
ret=`zenity --list --width="320" --height="520" --window-icon="${ECLIPSE_ICON}" \
--text "Choisissez le workspace" \
--column "Workspace" \
--column "Projets" \
$WORKSPACES --title "${windows_title}"`
 
# ========================================================
# === Démarrage d'Eclipse avec le bon workspace
# ========================================================
if [[ ! -z $ret ]] ; then
	export GTL_MODULES="";
	cmd='nohup '${ECLIPSE_BIN}' -showlocation -data "'${WORKSPACES_DIR}$ret'" -vm '${JAVA_HOME}'/bin/java ${JAVA_PARAMETERS} >/dev/null 2>&1 &'
    echo $cmd
    eval $cmd
fi

Recevoir un mail de notification quand de nouveaux paquets apt-get sont disponibles

SRG — Tue, 08 Mar 2011 20:38:00 +0100

Ayant plusieurs machines dont deux connectées constamment sur le net’, je n’aime pas ne pas les avoir à jour. En même temps, je ne tiens pas à activer l’installation automatique des packages, afin de garder la main sur ce qui est installé et d’éviter les mauvaises surprises (typiquement pouvant survenir sur une montée de version sensible comme PHP).

Du coup j’ai installé ce petit script très simple en cron sur chaque machine, il tourne une fois par jour et m’envoi un mail pour m’indiquer s’il y a des mises à jour en attente sur ce système. Le principe est simplement de lancer la commande apt-get en mode simulation pour savoir s’il y a des installations à faire.

A noter :

j’utilise sur toutes mes machines le très simple esmtp plutôt que sendmail ;
le script fonctionne sur un système anglais ou français (j’ai les deux) ;
le script fonctionne sous Debian Squeeze et Ubuntu (j’ai les deux aussi) ;
au sein du mail reçu, les packages sont clickables et renvoit sur la documentation officielle correspondante ;
il doit bien sûr être lancé en root pour pouvoir exécuter les commandes apt-get ;

Résultat du mail.

Lancement en cron (par ex. depuis /etc/crontab).

Le script (à mettre dans /usr/bin/notify_apt_updates.sh et à paramétrer) ( notify_apt_updates.sh ).

#!/bin/ksh
 
# ======================================================================
# === Mise à jour
# ======================================================================
echo "--- DEBUT -------------------- $(date) --------------------"
apt-get update
 
# ======================================================================
# === Variables système
# ======================================================================
HOSTNAME=$(hostname)
IP=$(ifconfig | grep "inet ad" | grep -v "127.0.0.1" | head -1 | cut -f2 -d: | awk '{print $1}')
DATE=$(date "+%Y-%m-%d %H:%M:%S")
SYSTEM_NAME=$(lsb_release -a 2>/dev/null | grep -i codename | awk ' { print $2 } ' )
SYSTEM_TYPE=$(lsb_release -a 2>/dev/null | grep -i "distributor id" | awk ' { print $3 } ' )
SYSTEM_TYPE_m=$(echo "${SYSTEM_TYPE}" | tr "[A-Z]" "[a-z]")
MAIL_CONTENT_FILENAME="/tmp/mail_content_$$.txt"
PACKAGES_BASE_URL=""
if [[ "${SYSTEM_TYPE_m}" = "debian" ]] ; then
  PACKAGES_BASE_URL="http://packages.debian.org/${SYSTEM_NAME}/"
else 
  if [[ "${SYSTEM_TYPE_m}" = "ubuntu" ]] ; then
    PACKAGES_BASE_URL="http://packages.ubuntu.com/fr/${SYSTEM_NAME}/"
  fi
fi
 
# ======================================================================
# === Variables à paramétrer
# ======================================================================
MAIL_FROM="me@hostname"
MAIL_DEST="me@hostname"
MAIL_SUBJECT="Server [${HOSTNAME}] - new updates found"
 
# ======================================================================
# === Corps du traitement
# === Exemple de sortie apt-get si mise à jour :
# ===    18 upgraded, 0 newly installed, 0 to remove and 0 not upgraded.
# ======================================================================
NB_EN=$(apt-get -s upgrade | egrep ".*upgraded.*newly installed.*remove" | grep -v "0 upgraded" | wc -l)
NB_FR=$(apt-get -s upgrade | egrep ".*mis à jour.*nouvellement installés.*à enlever.*non mis à jour" | grep -v "0 mis à jour" | wc -l)
if [[ "$NB_EN" -eq 0 && "$NB_FR" -eq 0 ]] ; then
  echo "No updates found, nothing to notify." 
else 
  echo "Updates found."
  PACKAGES=""
  HTML_PACKAGES=""
  apt-get -s upgrade 2>/dev/null | grep "^Inst" | while read INST PACKAGE DUMMY 
  do
    if [[ ! -z "${HTML_PACKAGES}" ]] ; then
      HTML_PACKAGES="${HTML_PACKAGES}, "
      PACKAGES="${PACKAGES} "
    fi
    if [[ ! -z "${PACKAGES_BASE_URL}" ]] ; then
      URL='<a href="'${PACKAGES_BASE_URL}${PACKAGE}'">'${PACKAGE}'</a>'
    else 
      URL="${PACKAGE}"
    fi
    HTML_PACKAGES="${HTML_PACKAGES}${URL}"
    PACKAGES="${PACKAGES}${PACKAGE}"
  done
  echo "Packages to be updated : ${PACKAGES}"
  cat << EOF > "${MAIL_CONTENT_FILENAME}"
From: ${MAIL_FROM}
To: ${MAIL_DEST}
Subject: ${MAIL_SUBJECT}
MIME-Version: 1.0
Content-Type: multipart/mixed;
 boundary="PAA08673.1018277622/${HOSTNAME}"
 
 
This is a MIME-encapsulated message
 
 
--PAA08673.1018277622/${HOSTNAME}
Content-Type: text/html
 
    <html>
    <head>
        <title>${MAIL_SUBJECT}</title>
    </head>
    <body>
        <table border="0">
          <tr>
            <td><b>Server</b></td><td>&nbsp;:&nbsp;</td><td>${HOSTNAME} (${IP}) [${SYSTEM_TYPE_m}-${SYSTEM_NAME}]</td>
          </tr><tr>
            <td><b>Date</b></td><td>&nbsp;:&nbsp;</td><td>${DATE}</td>
          </tr><tr>
            <td><b>New packages</b></td><td>&nbsp;:&nbsp;</td><td>${HTML_PACKAGES}</td>
          </tr>
        </table>
    </body>
    </html>
EOF
  echo "Sending mail to : ${MAIL_DEST}"
  esmtp -t < "${MAIL_CONTENT_FILENAME}"
fi
echo "--- FIN   -------------------- $(date) --------------------\n"

Quelle solution de backup

SRG — Sat, 01 Jan 2011 14:56:00 +0100

Voilà, je cherche une solution de backup à installer sur mon environnement réseau, et j’ai du mal à trouver une.

Je liste ci-dessous ce que j’ai à sauvegarder, les outils essayés ou en cours de tests, et quelques pistes de réflexion sur une solution “idéale” pour mon cas de figure.

Ma configuration à backuper :

Un PC “serveur” Linux sous Ubuntu 10.10 : sauvegarde de fichiers de configuration, sites web, plusieurs bases de données, repository GIT, données personnelles. Donc des fichiers locaux à sauvegarder (tout /etc, quelques fichiers sous /usr/bin, un /home/user, etc.).
Un serveur dédié Linux sous Ubuntu 9.10 en ligne (chez OVH) : sauvegarde de fichiers de configuration, sites web, plusieurs bases de données, repository GIT.
Un PC portable sous Linux SUSE Enterprise SLED11 : fichiers de configuration, fichiers personnels, bases de données MySQL, etc.
Un netbook sous Windows XP : quelques rares fichiers de configuration.
Un plug computer sous Debian : fichiers de configuration.

Mes souhaits pour l’outil de backup :

simplicité de configuration (tant pour le serveur principal que pour les machines à sauvegarder) ;
installation simple (pas de dépendances compliquées) ;
fonctionnement possible en réseau : backup vers une machine centrale, backups croisés, mode push et/ou pull, etc. ;
multi-protocoles : sauvegarde de fichiers locaux, de fichiers distants, exports de bases de données, prises de snapshot de repository GiT, CVS et éventuellement SubVersion, etc. ;
si possible, facilité d’accès aux fichiers sauvegardés : pas de manipulations compliquées pour récupérer un fichier : comme la récupération est tout de même rare et ponctuelle, ce point est mineur, mais dans l’idéal une récupération directement sur disque serait parfaite ;
interfaçage DropBox ou autre (Amazon S3) pour envoi de certains fichiers en ligne ;
encryption éventuelle des données sauvegardées ;
fonctionnement obligatoire en ligne de commande (configuration + lancement), mais interface de configuration / manipulation à côté envisageable (client lourd ou client web) ;
projet actif ;
une bonne gestion des erreurs : si quelque chose se passe mal, il faut que j’en sois averti !

Les fonctions dont je n’ai pas besoin et que beaucoup de solutions de backup proposent :

gravage des données sur disques ou bandes ;
mécanismes de sauvegardes incrémentales / différentielles ;

Bref pour résumer, dans l’idéal, il me faudrait un système de plugins (qui doivent être faciles à écrire / modifier / paramétrer) :

plusieurs plugins en entrée quoi sauvegarder (fichiers locaux, fichiers distants, bases de données, outils, etc.) ;
plusieurs plugins en sortie où sauvegarder (FTP, SSH distant, machine locale, DropBox, Amazon S3, etc.) ;

Avec simplement un appairage entre éléments en entrée et éléments en sortie (quoi sauvegarder, où).

Les pistes de logiciels existants à ma connaissance :

rsnapshot : l’outil que j’utilise actuellement mais qui ne me satisfait clairement pas totalement (configuration laborieuse et peu souple, mauvaise gestion des erreurs, …) ;
Unison ;
Duplicity + frontal ;
Cedar backup ;
Backup Manager : voilà bien un projet que je trouve obscur et pas intuitif … pas pour moi ;
Backupeur : pas mal, léger, mais tout en shell script (donc difficilement portable, et nécessiterait pas mal d’évolutions) ;
rdup ;
rdiff-backup ;
boxbackup ;
dirvish ;
backupninja : semble intéressant, à creuser ;

Concernant les outils “bas-niveau”, il y a bien sûr :

rsync : répond nativement à une partie des problématiques, sauvegarde différentielle de répertoires locaux ou distants ;
dar : Disk ARchive, projet très intéressant, une sorte de tar plus évolué, adapté aux sauvegardes de type backup ;

Ces outils en eux-même ne gèrent pas toutes les problématiques que je souhaite couvrir.

Reste la piste de créer moi-même mon propre système de backup … réflexion en cours, pour le moment je partirais sur :

réalisation en Java ;
principe client / serveur : dans un premier temps, une partie serveur, exécutable sur une ou plusieurs machines, et dans un deuxième temps un ou plusieurs clients (client lourd / client web) ;
le principe de plugins en entrée et en sortie évoqué plus haut ;
problème n°1 : la librairie rsync n’a pas de réelle implémentation Java (il y a 2 projets non terminés et qui n’évoluent plus : librsync et jarsync, plus peut-être plus tard java-rsync, mais ce projet n’a encore produit aucun code) ;
problèmé n°2 : la librairie dar n’existe pas en Java, donc pas d’usage possible en natif ;
ces outils ne seraient donc utilisables, comme les autres commandes systèmes type export de bases de données mysql, que par exécution depuis la couche Java de commandes systèmes, ce qui est évidemment facile à faire, mais tout de même moins élégant (problème de configuration, de multi-plateforme, etc.) ;

Annexes.

A noter un ouvrage chez O’Reilly dédié à cette problématique : backup and recovery.

Quelques liens en vrac en complément :

Un script PERL pour automatiser le backup de bases MySQL, ZManda ;
Le mini-howto sur DAR ;
A simple Linux backup method ;
Un billet qui détaille la configuration de rsnapshot ;
Comment sauvegarder une base mysql distante avec rsnapshot
Un tutorial en français sur la mise en place de rsnapshot
BoxBackup ;

Retirer en ligne de commande le password d'un fichier .pdf

SRG — Sat, 01 Jan 2011 13:40:00 +0100

Pour retirer, sous Linux, le mot de passe d’un fichier .pdf, rien de plus simple. On parle bien ici du cas de figure où l’on est (légalement) en possession de ce password et où on veut simplement rendre l’usage du .pdf plus souple (cas d’un achat en ligne dont le .pdf est verrouillé par un password, password qu’il faut saisir à chaque lecture, ce qui s’avère passablement exaspérant à la longue).

Plusieurs solutions existent mais la plus simple est de passer par qpdf.

Installer qpdf :

sudo apt-get install qpdf

Procéder au retrait du mot de passe :

qpdf --password=xxxxxxx --decrypt fichier_avec_password.pdf fichier_destination.pdf

D’autres solutions existent (conversion .pdf > .ps puis retour en .ps avec xpdf-utils, manipulations avec pdftk, etc.), mais la version en ligne de commande avec qpdf est vraiment la plus simple.

La semi-déception du jour : plug computer Ionics Stratus

SRG — Sun, 19 Dec 2010 02:43:00 +0100

Après le fiasco des Guruplug trop bruyants - que je m’étais fait remboursés sans problème par NewIT, très corrects dans l’histoire et sans doute très embêtés par les problèmes de retards et de bruits de ces serveurs - j’étais parti sur un autre modèle : un Stratus Plug Computer (sur base de Sheevaplug), produit par une société américaine, Ionics Plug.

Reçus il y a peu, et à nouveau une grosse déception : alors que j’ai bien commandé un modèle compatible avec les prises françaises, c’est un modèle US qui m’a été expédié !

Le pire c’est que :

j’ai contacté le service des ventes avant commande, on m’a bien répondu que oui, il était possible d’avoir ces plugs au format européen, mais qu’il y aurait un délai supplémentaire ;
je le précise bien lors de ma commande : il me faut deux plugs avec prises françaises ;
on me répond immédiatement après ma commande “attention, nous n’avons que des versions avec prises US en stock, que doit-on faire de votre commande ?”, ce à quoi je maintiens ma commande de plugs avec prise françaises, en forwardant le mail initial ;

Et bien malgré tout çà, j’ai quand même reçu (deux mois après ma commande) des plugs avec prises US.

Et le support d’Ionics, recontacté, ne me propose que soit un remboursement, soit … d’aller à la quincaillerie du coin m’acheter des adaptateurs US > FR. Ben voyons.

Comme c’est mon deuxième fiasco sur ce sujet, et que çà commence à me faire cher en frais d’expéditions UK > France, France > UK, US > France, je n’ai pas trop d’autres choix que d’en rester là, mais du coup, avec un adaptateur US > France, impossible de faire tenir le plug au mur comme prévu (avec l’adaptateur, il faut forcément le laisser à plat sur une multiprise au sol (sans quoi, à la verticale, étant relativement lourd, il ne tient pas en place, à cause du poids et du décalage lié à l’adaptateur).

Quant au plug lui-même - qui fonctionne heureusement en 110-220V / 50-60Hz - il fonctionne tout de même bien. Il chauffe, mais il ne fait pas de bruit, c’est déjà çà. Plus d’informations sans doute dans un billet ultérieur

Au passage, les CD-Rom fournis (contenant le kit de développement) sont totalement illisibles (testés sur 3 lecteurs différents). Dommage aussi. Recontacté à ce sujet, le support ne m’a pas donné de réponse sur ce sujet.

Enfin, le packaging sur la boîte n’indique même pas quelles sont les options des plugs à l’intérieur, alors que j’en ai commandé un standard (pas pour moi) et un avec option Zigbee, difficile - sans pouvoir les démarrer pour le problème de prises - du coup de savoir quel boîtier est à qui.

Bref, de mon point de vue, un service commercial pas très efficace de la part d’Ionics.

Donc pour résumer :

les Guruplugs sont trop bruyants pour une utilisation normale, mais NewIT, l’importateur UK, a un très bon service ;
les Ionics Plugs ne sont pas bruyants du tout (mais chauffent un peu quand même), mais les services logistique et commercial d’Ionics n’est vraiment pas bon : incapables d’envoyer ce qui a été commandé, et incapables de corriger comme il le faudrait leur erreur (au passage, ils auraient suffi qu’ils me réexpédient la pièce - (dé)clipsable, voir photos ci-dessous - qui correspond à la prise elle-même … mais non). Bref, je déconseille finalement de commander auprès de cette société.

Quelques photos du plug en open-the-box pour finir :

Accéder à un repository GIT / subversion derrière un proxy authentifié.

SRG — Sun, 05 Dec 2010 13:07:00 +0100

GIT

Pour accéder à un repository GIT en étant derrière un proxy d’entreprise (avec authentification).

Installer socat.

sudo apt-get install socat

Créer le script git-proxy.sh (dans un répertoire accessible via le PATH courant, ex. /usr/bin) :

#!/bin/bash
HTTP_PROXY_HOSTNAME="url_du_proxy_d_entreprise"
HTTP_PROXY_PORT="port_du_proxy"
HTTP_PROXY_USERNAME="username"
HTTP_PROXY_PASSWORD="password"
socat STDIO PROXY:${HTTP_PROXY_HOSTNAME}:$1:$2,proxyport=${HTTP_PROXY_PORT},proxyauth=${HTTP_PROXY_USERNAME}:${HTTP_PROXY_PASSWORD}

Remarque : il suffit de retirer la partie “,proxyauth” si le proxy ne demande pas d’authentification.

En ligne de commande il suffit ensuite de positionner l’accès au proxy pour GIT :

export GIT_PROXY_COMMAND=git-proxy.sh

Puis de lancer normalement une commande git, par ex. :

git clone git://git.gnome.org/conduit

Subversion

La manipulation est nettement plus simple pour subversion.

Il suffit d’éditer le fichier ~/.subversion/servers, de localiser la paramétrie “[global]” et de décommenter / renseigner ou ajouter les lignes suivantes :

\[global\]
http-proxy-host = url_du_proxy_d_entreprise
http-proxy-port = port_du_proxy
http-proxy-username = username
http-proxy-password = password

Retour sur migration d'une partition en ext3 vers ext4 sur une baie RAID5

SRG — Sun, 17 Oct 2010 23:22:00 +0200

Suite au passage sans trop de problèmes en Ubuntu 10.10 ce week-end pluvieux, j’ai franchi le pas aussi pour le format de la partition de ma partition RAID5 qui était jusqu’ici en ext3, que j’ai migrée en ext4.

Ce format de partition me semble aujourd’hui suffisamment stable, je l’utilise depuis Ubuntu 10.04 sur ma partition système sans soucis. Qui plus est, sur cette partition RAID5 en ext3, je rencontrais des problèmes de temps de réponses, notamment des créations de répertoires assez longues, temps que j’espère meilleurs en ext4.

La manipulation pour faire la conversion sans tout reformater est décrite partout sur le web, comme par exemple ici : Convert file system from ext3 to ext4.

Dans mon cas, j’ai migré une partition /dev/md0/ constituée de quatre disques Samsung 1.5TO - soit en pratique 3 disques utiles et 1 spare — pour une taille utilisable de 4.1TO, remplie avant la manipulation à 3.3TO.

/dev/md0      ext4    4,1T  3,3T  749G  82% /mnt/internal/1500go-raid

Au final, la conversion est longue, mais s’est bien passée (j’avais tout de même un backup partiel des données au cas où …).

Etape 1. Un premier fsck pour valider que tout va bien sur la partition durée = __120 minutes__

# sudo e2fsck -pf /dev/md0

Résultat :

/dev/md0 : 964328/274718720 fichiers (3.1% non contigus), 902621888/1098851952 blocs

Etape 2. La conversion des inodes par tune2fs durée = __0 minutes__

# sudo tune2fs -O extents,uninit_bg,dir_index /dev/md0

Etape 3. Un deuxième fsck (obligatoire) durée = __116 minutes__

# sudo e2fsck -pf /dev/md0

Etape 4. Changer le type de la partition de ext3 en ext4 dans /etc/fstab

# sudo vi /etc/fstab

Pour avoir :

/dev/md0                                        /mnt/internal/1500go-raid 	ext4	     defaults,relatime		 0  3

Etape 5. Remontage manuel et/ou reboot.

# sudo mount /dev/md0

A noter la présence d’une floppée d’erreurs “normales” lors de l’étape 3 (voir par exemple ce lien qui confirme que c’est le comportement attendu) :

(...)
Le checksum du descripteur de groupe 33533 est invalide. CORRIGÉ.
Le checksum du descripteur de groupe 33534 est invalide. CORRIGÉ.
Passe 1 : vérification des i-noeuds, des blocs et des tailles

Passe 2 : vérification de la structure des répertoires
Passe 3 : vérification de la connectivité des répertoires
Passe 4 : vérification des compteurs de référence
Passe 5 : vérification de l'information du sommaire de groupe
/dev/md0 : 964328/274718720 fichiers (3.1% non contigus), 902621888/1098851952 blocs

Bien sûr, le bénéfice de cette migration sera moins important qu’après un reformatage complet : c’est seulement au fur et à mesure que les données seront réécrites sur la partition migrée que les optimisations liées à ext4 auront lieu.

En premier test qui ne veut vraiment pas dire grand chose : j’ai un site web stocké sur cette partition RAID5 et qui a une utilisation assez intensive du filesystem. Pour une recherche précise qui mettait 0.08 secondes en ext3, je suis passé maintenant à 0.02 secondes en ext4

MAJ : par contre petite déception, dans certains cas (profondeur assez importante dans l’arborescence des répertoires), la création d’un nouveau sous-répertoire tout simple n’est toujours pas instantannée en ext4 chez moi. A première vue çà prendrait un poil moins de temps qu’en ext3, mais plus que sur d’autres partitions (je suppose que c’est le nombre de fichiers / répertoires présents sur cette partition qui est pénalisant, au demeurant la partition RAID5 en question se porte très bien et affiche de bonnes perfs’ en lecture/écriture, donc pas de problèmes matériels). A voir dans la durée au fur et à mesure que les données seront réécrites …

Convertir un enregistrement iPhone .m4a en .mp3 sous linux

SRG — Sat, 02 Oct 2010 15:37:00 +0200

Rien de plus simple, pour convertir les fichiers audio par ex. enregistrés sur un iPhone en .mp3.

Il suffit d’avoir lame et faad (Advanced Audio Decoder player). Il est bien sûr possible d’en profiter pour utiliser les différentes fonctions de LAME (changement du bitrate, ajout de métadata avec les options ~~tt pour le titre,~~ tg pour le genre, etc.).

sudo apt-get install faad lame

Et de lancer la conversion comme ceci :

faad -o - “fichier_source.m4a” | lame - “fichier_destination.mp3”

Exemple de sortie :

guruplug.m4a file info:

LC AAC	17.120 secs, 2 ch, 44100 Hz

  ---------------------
 | Config:  2 Ch       |
  ---------------------
 | Ch |    Position    |
  ---------------------
 | 00 | Left front     |
 | 01 | Right front    |
  ---------------------

Decoding guruplug.m4a took:  0.04 sec. 427.99x real-time.
LAME 3.98.3 64bits (http://www.mp3dev.org/)
Using polyphase lowpass filter, transition band: 16538 Hz - 17071 Hz
Encoding <stdin> to guruplug.mp3
Encoding as 44.1 kHz j-stereo MPEG-1 Layer III (11x) 128 kbps qval=3

En bonus un petit script qui encapsule cette commande pour réaliser ce traitement en batch en lien externe.

Guru Plug Server Plus : bonne petite machine, mais trop bruyante

SRG — Sat, 02 Oct 2010 13:51:00 +0200

La déception du jour : le serveur Guru Plus Server Plus (un plug computer).

Sur le papier c’est une excellente petite machine permettant d’avoir un serveur Linux complet dans un boîtier de la taille d’un boîtier CPL, avec les caractéristiques suivantes :

processeur Marvell 1.2Ghz ;
512 mo de RAM interne ;
512 mo de flash interne ;
1x port micro-SD ;
2x ports ethernet Gigabit 10/100/1000 ;
Wi-Fi ;
bluetooth ;
2x ports USB ;
1x port e-SATA ;

Avec une consommation max donnée à 5W seulement. Le serveur est livré prêt à l’emploi avec une distribution Debian déjà installée.

Et tout çà pour 99$, soit 120 euros port compris chez le revendeur UK NewIT. Bref, une machine très complète pour faire un parfait petit serveur avec de nombreux usages potentiels (serveur de fichier, de mail, routage, domotique, etc.).

Pour l’heure, c’est toutefois une grosse déception. J’ai pré-commandé le boîtier en mai 2010, et les premiers envois ont rapidement été interrompus car il s’est avéré que le boîtier chauffait anormalement, notamment au niveau des connecteurs ethernet (au point de s’y brûler au touché).

La société qui produit le plug, Globalscape, a pris quelques mois pour revoir sa copie avec le fabricant chinois, pour ajouter, sur l’unité dont j’ai reçu un modèle ce jour, un petit ventilateur à l’intérieur. Vu la petite taille du boîtier, ils n’ont évidemment pas pu mettre un gros heatsink et un gros ventilateur, le ventilateur équipé ne fait que 20 mm x 20 mm.

Au final il remplit à peu près son rôle de ventilateur (le boîtier reste cependant après 3 heures de fonctionnement chaud au toucher sur les côtés et le dessus), mais le bruit généré par l’engin est franchement conséquent (bien au delà du niveau sonore de n’importe quel PC traditionnel que j’ai déjà pu entendre).

Une petite vidéo pour se rendre compte (je pense qu’en vrai, c’est encore plus perceptible que sur la vidéo, le .mp3 ci-dessous est d’ailleurs plus représentatif). Le plug s’entend ronronner sans problèmes à plusieurs mètres.

Que de bruit

fichier mp3 autonome (enregistrement brut sans altérations)

Qui plus est des tests poussés réalisés par des personnes ayant reçue la première version font état de piètres performances de la partie matérielle, voir ce très bon test sur le sujet : GuruPlug Server Plus : don’t waste your money on it!.

Cela dit, pour mon usage, je pense que les performances de la machine seraient tout à fait suffisantes.

Pour moi, le bruit généré rend ce serveur totalement impropre à l’utilisation auquel je le destinais : avoir un mini-serveur silencieux, ne consommant pratiquement rien, sur lequel faire tourner un certain nombre de services de gestion et de services domotiques sous Linux. Vu sa faible taille, je comptais le mettre entre mon entrée et mon salon, pour y brancher dessus un mir:ror de Violet (lecteur RFID). Le bruit conséquent que génère le serveur rend cet usage impossible. J’hésite entre l’ouvrir et le bidouiller (faisable, mais sans garanties de réussir à mettre en place une bonne dissipation thermique sans bruit, pour au final un boîtier qui risque de devoir resté ouvert ou qui risque d’être découpé de partout, donc on sera loin du concept initial d’un simple boîtier intègre sans câbles) ou le retourner pour remboursement et trouver un autre modèle (peut-être l’ancien modèle, le sheevaplug (qui ne semblait pas souffrir de ces défauts de chauffe), ou un Ionics plug).

Quelques photos en open-the-box :

Au déballage, pas de soucis pour s’en servir, bien qu’il n’y ait aucune documentation fournie avec le packaging.

Le serveur boote en moins de 30 secondes et, avec la configuration par défaut, se retrouve en Wi-Fi “Access Point”, ce qui fait qu’il suffit de se connecter dessus en ssh, par exemple depuis un PC portable en WiFi (en prenant le réseau ouvert par le guruplug, quelque chose du genre Plug2-uAP-1713) :

ssh root@192.168.1.1

Le mot de passe root par défaut étant “nosoup4u”.

Et en liens annexes … :

Photos de l’intérieur du Guru Plug (modèle avec fan) : http://plugcomputer.org/plugforum/index.php?topic=2295.msg12908
Forum dédié sur le site de l’importateur UK : http://www.newit.co.uk/forum/index.php?action=collapse;c=7;sa=collapse;#7
Une page très complète sur les problèmes de dissipation thermique du Guruplug, avec la présentation de toutes les solutions matérielles possibles ;

Optimisations web et outils associés

SRG — Tue, 03 Aug 2010 19:42:00 +0200

Venant de découvrir ShowSlow (un site qui aggrège les données remontées par YSlow et Page Speed, voir ci-dessous), j’en ai profité pour appliquer cette astuce toute bête sur tous mes sites qui le permettent et qui n’étaient pas forcément à jour.

Au programme dans ce billet : une optimisation toute simple de l’usage du cache pour toutes les ressources (par .htaccess), et le rappel de quelques outils d’aide au diagnostic (que j’imagine tous les développeurs web connaissent, mais sait-on jamais) : YSlow, Page Speed, ShowSlow et WebPageTest.

Tous ces outils sont intéressants, mais il ne faut pas s’attendre à avoir des gains de performances de l’ordre de 100%. Par ailleurs, ces outils se focalisent tous sur l’analyse des performances côté navigateur, il ne faut pas oublier l’analyse et les optimisations côté back-office.

Optimisation de l’usage du cache pour toutes les ressources (par .htaccess)

Le principe consiste, pour optimiser la conservation en cache des ressources statiques commes les images, les .css ou les .js, à forcer une durée de rétention importante via une directive stockée dans un .htaccess

Avantages : tous les fichiers du site (ou du répertoire concerné par le .htaccess) sont automatiquement paramétrés avec ce délai d’expiration. Les fichiers resteront donc systématiquement dans le cache du navigateur (jusqu’à purge manuelle ou expiration de la durée indiquée).

Inconvénient : il ne sera en l’état pas possible de modifier ces fichiers. Autrement dit si un de ces fichiers est modifié en ligne, il ne sera pas récupéré par les visiteurs qui seront déjà venus précédemment sur le site (mais des solutions existent, sur une base de versionning de fichiers, voir cet excellent article de ce non moins excellent blog).

Le code à mettre dans le fichier .htaccess (à adapter au besoin sur le type de fichiers concernés et la durée de conservation dans le cache) :

<IfModule mod_expires.c>
SetEnv mod_expires On
ExpiresActive On
ExpiresByType image/png "access plus 1 year"
ExpiresByType image/gif "access plus 1 year"
ExpiresByType image/jpeg "access plus 1 year"
ExpiresByType image/vnd.microsoft.icon "access plus 1 year"
ExpiresByType text/css "access plus 1 year"
ExpiresByType application/x-javascript "access plus 1 year"
ExpiresByType application/javascript "access plus 1 year"
ExpiresByType text/javascript "access plus 1 year"
</IfModule>

Installation du module expire sous Apache :

sudo a2enmod expires

That’s all !

En utilisant les outils ci-dessous (et en partant à chaque fois d’un cache vide) on constate bien une (légère) différence de temps de chargement, et différence dans les résultats d’analyse.

Outillage en rapport.

YSlow

YSlow est une extension FireFox qui enrichit le plugin FireBug, Le principe est ensuite, une fois une page analysée, de lister un certain nombre d’éléments pertinents à corriger / modifier pour obtenir de meilleures performances, notamment (tout est rappelé sur la page Best practices for speeding up your web site) :

réduire le nombre de requêtes HTTP = concaténer les fichiers qui peuvent l’être (.css, .js) ;
paramétrer correctement les expirations de cache (cf. ci-dessus par ex.) ;
mettre en place une compression GZip (soit au sein du framework utilisé (la plupart le permette), soit par soi même (en PHP via les méthodes de capture de flux, etc.), soit encore par une paramétrie globale par ex. côté Apache) ;
mettre les feuilles de style en début de page ;
et les scripts en bas de page ;
rendre les ressources .css et .js externes (afin qu’elles puissent être mises en cache) et les compresser (avec Google Closure ou YUI Compressor) ;
etc.

Page Speed

Autre extension pour FireFox, toujours sous forme d’ajout à FireBug, toujours sur le même principe : analyser la page, et faire une liste de recommandations en conséquence.

Au final j’ai quand même plus tendance à utiliser YSlow et à me passer de Page Speed, même si certains trouvent certains avantages à Page Speed. Evidemment, çà ne coûte pas grand chose d’installer les deux (les deux s’intégrant parfaitement dans FireBug) et de faire une passe sur son site avec chaque outil (qui ne prend qu’une ou deux secondes).

Le site de Page Speed : http://code.google.com/intl/fr-FR/speed/page-speed/

Showslow

Il s’agit d’un site (à installer soi-même sur son serveur), développé en PHP, et qui permet d’historiser les valeurs remontées par YSlow et Page Speed, en automatique (une fois son FireFox correctement configuré). Ce n’est clairement pas indispensable, mais çà permet d’avoir un historique des performances de ses sites web.

Il suffit de suivre la documentation d’installation, bien faite et tout à fait suffisante, pour installer la coeur de l’outil, et d’ensuite paramétrer les deux plugins FireBug en conséquence.

WebPageTest

Découvert pour ma part dans la foulée de ShowSlow, WebPageTest permet de faire le même type d’analyses, certes en moins poussé, mais déclenchées cette fois en ligne, et surtout avec deux avantages notables :

les tests peuvent se faire depuis des machines hébergées en différents points du globe (Paris, Amsterdam, différentes villes en Amérique, la Chine, la Nouvelle-Zélande, …) ;
il est possible de tester l’accès à sa page sur différents navigateurs.

Extraire en java les données stockées dans JIRA

SRG — Mon, 02 Aug 2010 20:29:00 +0200

Cette semaine, j’ai passé un peu de temps au boulot à travailler sur l’extraction de données stockées dans JIRA, en Java. Pour rappel, JIRA est un système de suivi de bugs, un système de gestion des incidents, et un système de gestion de projets, fourni par Atlassian, et c’est bien sûr le système que l’on utilise dans ma boîte. Dans le cadre d’un nouveau projet dont je m’occupe, pour lequel je stocke sous JIRA l’ensemble des tâches à réaliser par toute l’équipe, j’ai besoin d’extraire toutes les informations liées à chacune de ces tâches pour construire en automatique un planning GANTT.

Remarque : il y a bien un plugin officiel pour JIRA orienté “gestion de projet”, il s’agit de Greenhopper, malheureusement il est payant et il n’est pas envisagé aujourd’hui de s’en équiper chez nous.

Atlassian fournit donc plusieurs mécanismes pour interagir avec JIRA (en action - création de nouvelles tâches par ex. - et/ou en extraction). A ma connaissance il y a :

l’API XML-RPC ;
l’API SOAP ;
les flux XML et RSS directement depuis le serveur JIRA ;
les Jelly Scripts.

En préambule, il est conseillé de jeter un oeil sur la page How JIRA works.

XML-RPC

XML-RPC est un protocole d’interaction (Remote Procedure Call) permettant d’inteagir par XML avec le système. En lui même, c’est donc juste un ensemble de méthodes à utiliser par des appels XML. Autrement dit utilisable avec n’importe quel langage.

Une documentation JIRA présente ce protocole : JIRA, XML-RPC Overview.

Une implémentation (non-officielle) est par ailleurs disponible en Java et fonctionne parfaitement bien : il s’agit de la librairie Swizzle [http://swizzle.codehaus.org/Home ].

J’avais déjà réalisé un traitement Java avec cette librairie il y a quelques mois, pour récupérer l’ensemble des fiches JIRA liées à une version projet et créer en automatique de nouvelles fiches.

L’utilisation de la librairie Swizzle est cependant très simple, exemple de connexion :

try {
    org.codehaus.swizzle.jira.Jira jira = new Jira(url);
    jira.login(username, password);
} catch (MalformedURLException e) {
    throw new BaseException(e);
} catch (Exception e) {
    throw new BaseException(e);
}

Et un exemple de récupération de données sur une recherche libre (il y a bien sûr d’autres méthodes pour récupérer les données) :

Vector v = new Vector();
v.add("CLE_DU_PROJET_JIRA"); // le ou les projets sur lesquels faire la recherche
String critereDeRecherche = ""; // On ramène toutes les fiches JIRA
int nbFichesARamener = 1000; // nombre max de fiches JIRA à récupérer
List issues = jira.getIssuesFromTextSearchWithProject(v, critereDeRecherche, nbFichesARamener);

Ensuite la plupart des informations se retrouvent sur l’objet Issue correspondant. Il y a bien sûr des objets Java pour représenter les Versions JIRA, les filtres, les utilisateurs, le projet JIRA, etc.

Le seul problème vient du fait que toutes les opérations / informations disponibles sous JIRA ne le sont pas au travers de l’API XML-RPC, notamment dans le cas qui m’intéresse, les informations relatives aux sous-tâches et aux champs personnalisés ne sont pas exportées, donc obligé de faire autrement, d’où le switch sur la 2e API proposée par Atlassian, via SOAP.

SOAP

Il s’agit d’une API externe également, avec cette fois une implémentation Java “officielle” fournie par Atlassian (ainsi qu’une implémentation Python, au passage).

La mise en place est moins évidente qu’avec Swizzle, puisqu’il en faut ici :

récupérer le projet SOAP client en ligne ;
récupérer le fichier WSDL sur le serveur JIRA sur lequel on veut se mapper (fichier décrivant l’ensemble des services disponibles) ;
utiliser un profile Maven pour générer à partir de ce fichier WDSL les classes Java (dans “target/generated-classes/*.class”) correspondant aux services disponibles ;
toujours avec Maven, mettre à jour le .classpath Eclipse ;
pouvoir enfin utiliser les objets natifs Java permettant d’interagir avec JIRA via SOAP ;
plus en bonus, mettre en place un packaging sous forme de .jar de ces classes générées pour ne pas avoir à refaire ces manipulations à chaque fois (à faire par soi même) ;

Toutes ces opérations sont détaillées dans la documentation en ligne Atlassian : Creating a SOAP Client pour la présentation générale de l’API SOAP et dans le README du projet exemple pour le détail des manipulations techniques.

S’il n’y a rien de compliqué, c’est moins simple que de simplement ajouter une dépendance comme Swizzle, mais cela a l’avantage de construire une API de services correspondant réellement aux services disponibles sur le serveur JIRA utilisé, quelle que soit la version de ce dernier.

L’usage de ce client Java SOAP est très simple également et ressemble bigrement à l’API XML-RPC, exemple pour la connexion :

String url = "http://jira.domaine.tld/";
String username = "login de servitude";
String password = "password du compte de servitude";
(...)
JiraSoapServiceService jiraSoapServiceLocator = new JiraSoapServiceServiceLocator();
JiraSoapService jiraSoapService = null;
String authToken; // il est important de garder ce auth token, toutes les méthodes en auront besoin ensuite
RemoteType[] remoteTypes; // on va conserver en local la liste des types disponibles au niveau du projet
                                         // pour pouvoir ensuite facilement retrouver à quoi correspondant le type d'une tâche
RemoteStatus[] remoteStatuses  // Idem pour les status
try {
    if (url == null) {
        jiraSoapService = jiraSoapServiceLocator.getJirasoapserviceV2();
    } else {
        jiraSoapService = jiraSoapServiceLocator.getJirasoapserviceV2(url);
        log.info("SOAP Session service endpoint at " + url.toExternalForm());
    }
 
    authToken = getJiraSoapService().login(username, password);
    remoteTypes = getJiraSoapService().getIssueTypes(getAuthToken());
    remoteStatuses = getJiraSoapService().getStatuses(getAuthToken());
} catch (ServiceException e) {
    throw new BaseException("ServiceException during SOAPClient contruction", e);
} catch (RemoteAuthenticationException e) {
    throw new BaseException("RemoteAuthenticationException during SOAPClient contruction", e);
} catch (RemoteException e) {
    throw new BaseException("RemoteException during SOAPClient contruction", e);
} catch (java.rmi.RemoteException e) {
    throw new BaseException("RemoteException during SOAPClient contruction", e);
}

Et pour comparaison, la récupération de données dans JIRA (qui ressemble toujours bigrement à la méthode précédente) :

RemoteIssue[] issues;
int nbFichesARamener = 1000; // nombre max de fiches JIRA à récupérer
try {
    issues = getJiraSoapService().getIssuesFromTextSearchWithProject(getAuthToken(), new String[] { project.getKey() }, "", nbFichesARamener);
} catch (RemoteException e) {
    throw new BaseException(e);
} catch (java.rmi.RemoteException e) {
    throw new BaseException(e);
}

Malheureusement, toujours les mêmes limitations : de nombreuses informations ne sont pas disponibles.

Visiblement je ne suis pas le seul à le déplorer, on trouve de nombreuses issues ouvertes chez Atlassian sur ce sujet … certaines depuis 2005 (voir par ex. ce thread sur Stackoverflow.com et celui-ci dans le forum JIRA et un patch a même été développé).

Donc à ce stade après avoir passé quelques heures à jouer avec le mécanisme SOAP, je n’ai toujours pas moyen de récupérer toutes les informations dont j’ai besoin.

Si les solutions officielles et “propres” fournies par les API JIRA ne fonctionnent pas, il va alors falloir revenir à quelque chose de plus simple : les exports XML.

Bonus : un tutorial très détaillé pour l’utilisation de l’api JIRA SOAP, Vérifier le JIRA avant de faire la release.

XML

Un peu partout dans JIRA, on peut trouver des liens “RSS” et “XML” qui exportent les données JIRA correspondant à la recherche courante. En regardant le contenu, on voit que cette fois il y a bien absolument toutes les informations nécessaires, y compris les champs supplémentaires et les informations sur les sous-tâches (à l’exception notable de la “date de démarrage”, mais je peux m’en passer).

Il suffit donc de mettre en place une récupération par HTTPClient pour récupérer le flux XML, et de le parser (dans mon cas avec la très bonne API simple-xml, qui permet de facilement mapper dans les deux sens du XML vers des beans java par simples annotations) pour récupérer toutes les infos souhaitées. Ca marche mais c’est moins rigoureux, il faut notamment récupérer les informations de type “date” sous une forme textuelle et faire un parsing dessus (autrement dit le format des dates peut changer à la faveur d’une montée de version du serveur, par ex.). Mais vu que je n’ai pas trop le choix …

Il faut bien sûr toujours avoir un compte qui puisse accéder par HTTP aux pages JIRA (dans mon cas, un “compte de service” que j’ai créé uniquement à cet usage, pour ne pas avoir à utiliser mon identifiant réseau propre).

Exemple de récupération du flux XML par HTTPClient :

String host = "jira.domaine.tld";
String username = "login de servitude";
String password = "password du compte de servitude";
 
final GetMethod method = new GetMethod(url);
try {
 
    final HttpClient client = new HttpClient();
    client.getHostConfiguration().setHost("host", 80, "http");
    final Credentials defaultcreds = new UsernamePasswordCredentials(username, password);
    client.getState().setCredentials(new AuthScope(host, 80, AuthScope.ANY_REALM), defaultcreds);
    method.getParams().setParameter(HttpMethodParams.RETRY_HANDLER, new DefaultHttpMethodRetryHandler(3, false));
 
    int statusCode = client.executeMethod(method);
 
    InputStream responseBody = method.getResponseBodyAsStream();
    InputStreamReader reader = new InputStreamReader(responseBody);
 
    Serializer serializer = new Persister();
    JIRAXMLRss rss = serializer.read(JIRAXMLRss.class, reader);
 
    return rss.getChannel().getItems(); // Retourne une liste de beans "maison" alimentés depuis le XML par SimpleXML
} catch (HttpException e) {
    throw new BaseException(e);
} catch (IOException e) {
    throw new BaseException(e);
} catch (Exception e) {
    throw new BaseException(e);
} finally {
    method.releaseConnection();
    // autres releases ...
}

Mise en place.

Au final - les quelques lignes de code ci-dessus n’étant que des exemples, comme j’avais déjà codé le tout, j’ai fini par garder les 3 implémentations et pouvoir ainsi facilement en switcher selon les usages (je ne détaille pas plus avant, ce post se voulant seulement une présentation des manières d’accéder à JIRA en Java).

Annexes

Jelly scripts

Les scripts Jelly sont des scripts XML exécutables, permettant de réaliser des opérations à partir d’un formalisme XML. C’est un projet Apache, implémenté dans JIRA, mais surtout pour des opérations de type export / import. Je connaissais pour avoir déjà été amené à utiliser ce mécanisme dans le cadre d’une migration Bugzilla vers JIRA lorsque l’on a switché sur ce dernier, mais les fonctions proposées sont plus orientées traitement de masse et semblent ne pas tout couvrir non plus, j’ai donc laissé tomber.

Des exemples de Jelly scripts.

Extension du serveur JIRA.

Comme je n’ai pas la main sur le serveur JIRA (impossible d’y modifier quoi que ce soit de mon côté), je n’ai pas pu déployer cette extension qui aurait corrigé mon problème : Jira Extended Webservice.

C’est un patch qui apporte la gestion des sous-tâches sur l’API SOAP, développé par un utilisateur externe à Atlassian. Voir également le Google Group correspondant.

Bonus

En side point, une présentation vidéo intéressante sur la construction du client lourd JIRA : Killer JIRA CLI.

Achat d'équipement moto en allemagne

SRG — Sat, 24 Jul 2010 18:00:00 +0200

Si vous cherchez de l’équipement ou du matériel moto pas trop cher, et de qualité, les chaînes de magasins allemands peuvent être une piste intéressante. En France il n’y a que peu de concurrences, à part Dafy Moto.

Il y a (à ma connaissance seulement) deux grandes chaînes de ce type en allemagne : Polo et Louis.de.

Toutes deux possèdent d’innombrables boutiques en allemagne (et parfois en suisse), dont certaines près de la frontière franco-allemande, ainsi qu’un site web dédié. Depuis peu, les deux sites internet sont intégralement disponibles en anglais.

On trouve de tout dans ces enseignes : vêtements moto, casques, bagagerie / sellerie, outils, pièces de rechanges, bottes, etc., à des prix parfois très intéressants, même si certains articles sont parfois au même prix qu’en France. Il y a cependant bien plus de choix de modèles, tailles, etc. que chez un concessionnaire moto classique en France.

Louis.de

URL : http://www.louis.de/

Avantages :

Vaste choix de produits ;
Marques “maison” de bonne qualité (Streetfighter, Probiker) et à prix très agressifs ;
Catalogue .pdf disponible en ligne ;
Tous les mois, une brochure présentant des promotions (valables pour les 2 prochains mois) sur un ensemble de produitsn divers (avec parfois des remises conséquentes) est éditée (consultable en ligne ou envoyée par la poste pour les clients, y compris en france) (exemple) ;
Tous les 2, 3 mois, une promotion par email est envoyée du type “-15% ou -20% sur l’article de votre choix” pendant un week-end : c’est une vraie bonne occasion d’avoir une grosse réduction sur un produit cher (comme un casque haut-de-gamme) (réduction valable en boutique ou en ligne) ;
Présence de boutiques frontalières : Weil-Am-Rhein (tout près de Saint-Louis ou à 20 minutes de Mulhouse), Kehl ;
Le magasin de Weil-Am-Rhein auquel j’ai l’habitude de me rendre est gigantesque (aussi grand qu’un Décathlon en France) et une bonne moitié des vendeurs parlent français ; le magasin ferme à 20h en semaine ce qui est pratique pour y aller après le boulot ;
Carte de fidélité plutôt intéressante qui rapporte des euros tous les ans en proportion à la somme dépensée chez eux.

Inconvénients :

Frais de port un peu élevés pour une commande par internet vers la France (la dernière fois, j’en ai eu pour 14€95).

Polo

URL : http://www.polo-motorrad.de/

Avantages :

Présence de boutiques frontalières : Lorräch (à 10 minutes de Saint-Louis ou à 15 minutes de Mulhouse), Kehl ;
Site internet bien gaulé, disponible en allemand / anglais ;
Bon choix de produits également ;
Marque maison “FLM” pas trop mal non plus.

Inconvénients :

Magasin de Lorräch un peu petit, et les vendeurs n’y parlent pas français (on arrive tout de même évidemment à se faire comprendre sans problèmes en anglais, mais pour une question technique précise, c’est plus simple chez Louis.de à Weil-Am-Rhein) ;
A ma connaissance, moins de promos que chez Louis.de.

Catalogues

Ces deux chaînes éditent par ailleurs un imposant catalogue papier (largement aussi épais / volumineux qu’un catalogue de la Redoute), mais avec, donc, uniquement des accessoires moto.

Jusqu’à il y a peu il était possible de recevoir un catalogue “Polo” gratuitement par la Poste, y compris pour les résidents Français, ce n’est désormais plus le cas. L’envoi d’un catalogue “Louis.de” par la poste vers la France coûte un peu moins de 10 euros. Il y en a évidemment des palettes entières en libre distribution dans tous les magasins.

Conclusion

Personnellement, résidant dans l’est de la France, je me rends typiquement à Weil-Am-Rein pour le magasin Louis.de et à Lörrach pour le magasin Polo, j’y ai acheté mon casque (un Schuberth R1 mat avec visière pare-soleil intégrée, pas mal), des bottes d’été, des gants, un rail “Motoboy II” Telefix pour déplacer facilement la moto au fond du garage (un peu cher mais diablement pratique), …).

Bref si vous cherchez à vous équiper en matériel moto et que vous voulez du choix, je vous conseille de faire un tour chez Louis.de, de vous inscrire à leur newsletter et à leur brochure, et de guetter les promos qu’ils font régulièrement.

Quelques services intéressants à installer sur un serveur Linux

SRG — Sat, 24 Jul 2010 16:32:00 +0200

Voici la présentation de quelques services qu’il peut être à mon sens intéressant / pertinent d’installer sur un serveur Linux (je suis pour ma part sous Ubuntu 9.04 et 10.04, et j’installe ces services sur toutes mes machines) : ShellInABox, HDDTemp, Monit, Logwatch, DenyHosts & Fail2Ban.

De nombreux tutoriaux détaillés sont disponibles sur le net pour ces services (quelques pointeurs figurent ci-dessous), mais l’installation de ces cinq outils est de toutes façons très simple.

ShellInABox

Permet d’avoir un accès SSH depuis une page web sur sa machine, autrement dit :

d’accéder par SSH à une machine même si un proxy / firewall bloque le port SSH par défaut (cas d’un réseau d’entreprise par ex.) ;
de ne pas forwarder vers l’extérieur depuis sa machine le port SSH par défaut (pour éviter les tentatives d’intrusions) tout en gardant un accès SSH ponctuel (sur un autre port que d’éventuels hackers devront connaître pour tenter une intrusion, et qui plus est, ne répondant pas au protocole SSH mais HTTP, ces tentatives intrusions seront moins facilement automatisables) (cas de figure d’un PC à la maison dont certains services sont publiés (ex. le serveur web), mais pas tous) ;

Lien : http://code.google.com/p/shellinabox/

D’autres projets du même style existent mais bien moins aboutis (notamment niveau installation) (par ex. ajax web shell).

Ici ShellInABox gère tout par lui même : c’est un démon qui génère le rendu d’IHM et non un mapping Ajax sur une page servie par Apache.

L’installation est du coup très simple (un package qui fonctionne “out of the box” est disponible sous Ubuntu, y compris 64bits, et la documentation d’installation est en ligne sur le Google Code du projet).

A l’usage, c’est au final très réactif ! (j’ai été bluffé par la vitesse d’affichage, je m’attendais à quelque chose de poussif, à l’usage c’est tout à fait utilisable).

Le seul souci que je n’ai pas encore terminé de résoudre est la gestion du certificat, afin d’avoir un certificat valide et ne plus avoir l’alerte de sécurité qui apparaît quand on passe par l’URL “https” (mais ce n’est en rien gênant au demeurant).

HDDTemp

Petit outillage permettant d’obtenir la température des disques. Vu que j’ai 5 disques en RAID-5 collés les uns sur les autres à l’intérieur de mon serveur à la maison, çà m’intéressait de savoir à quelle température ils montent. Je monitore ces valeurs avec DomotiGa, qui m’envoit un mail si la température dépasse un certain seuil (paramétrable).

Disponible dans toutes les distributions, par ex. sous Ubuntu / Debian :

sudo apt-get install hddtemp

L’utilisation en ligne de commande est tout à fait possible, ex. :

hddtemp /dev/sd?

Donnera :

/dev/sda: WDC WD360GD-00FNA0: 35°C
/dev/sdb: ST31500341AS: 30°C
/dev/sdc: ST31500341AS: 33°C
/dev/sdd: ST31500341AS: 31°C
/dev/sde: SAMSUNG HD154UI: 22°C
/dev/sdf: SAMSUNG HD753LJ:  lecteur connu, mais il ne possède pas de capteur de température.
/dev/sdg: SAMSUNG HD753LJ: 32°C

Monit

Outil de surveillance très pratique, permettant de détecter certains problèmes (process absents, surconsommation) et d’agir en conséuqnce.

Je paramètre ainsi essentiellement les applications soit dans un état “peu stable” (qui peuvent donc planter occasionnellement), soit dont je veux être sûr qu’elles soient toujours accessibles. De fait, je ne déclare même pas les applications très stables comme Apache2, même si dans l’idéal le mécanisme de redémarrage en cas de surchage CPU peut être intéressant (pour éviter qu’Apache tourne en boucle pendant des heures sur un script PHP parti en vrille, etc.).

Sont donc paramétrés sur ma machine de développement :

l’interface web sonos qui me permet de piloter mon audio-multiroom, un système Sonos (interface non-officielle écrite en PERL, interfacée sur le réseau en UPnP, et qui plante ponctuellement) ;
le serveur domotique DomotiGa, encore balbutiant, et dont je souhaite qu’il soit constamment en ligne (pour enregistrer les événéments domotiques qui passent sur le réseau) ;
ShellInABox, pour être sûr de toujours avoir un accès SSH de secours ;
mon media player pour la Playstation 3 (PS3), ps3mediaplayer, très efficace au passage ;

Logwatch

Logwatch permet, une fois paramétré, de recevoir par mail des informations sur sa machine :

recherche d’erreurs au sein des logs ;
récapitulatif des installations systèmes (via apt, etc.) ;
détail des comptes s’étant connecté sur la machine ;
occupation disque ;
etc. ;

Le tout est paramétrable (bien que la configuration soit un peu bordélique), le seul souci du système étant qu’il finit par envoyer chaque jour un mail, et qu’au final on ne les ouvre jamais, je n’ai pas réussi jusqu’ici à n’avoir des alertes que pour les événements réellement importants (comme un problème hardware sur les disques).

DenyHosts & Fail2Ban

Deux outils plus ou moins complémentaires (leur couverture fonctionnelle se recoupe tout de même en partie), qui permettent de bannir automatiquement toutes les adresses IP qui réalisent des opérations “louches” sur ma machine.

DenyHosts agira uniquement sur analyse des logs de connexion SSH et placera les tentatives répétées (et en échec) de connexion par SSH dans le fichier /etc/hosts.deny pour définitivement bloquer les IPs correspondantes. Fail2Ban monitore quant à lui plus de type de logs différentes (dont celles liées à PHP, Apache, …) et agira en modifiant les règles iptables. Ci-dessous un tutoriel rapide pour l’installation de Fail2Ban.

Ces deux outils gagnent vraiment à être installés, même avec la configuration initiale (ils gagnent bien sûr à être customisés selon les cas de figures et selon ce que l’on peut constater dans les logs Apache par ex. (fail2ban permet notamment de bloquer les attaques Apache w00tw00t).

Extrait de log remontée par Logwatch à propos de DenyHosts et Fail2Ban :


 --------------------- Denyhosts Begin ------------------------

 new denied hosts:
    217.16.83.178
    188.187.7.37

 ---------------------- Denyhosts End -------------------------


 --------------------- fail2ban-messages Begin ------------------------


 Banned services with Fail2Ban:                          Bans:Unbans
   ssh:                                                    [  1:1  ]

 ---------------------- fail2ban-messages End -------------------------


 --------------------- httpd Begin ------------------------


 Requests with error response codes
   400 Bad Request
      /w00tw00t.at.ISC.SANS.DFind:): 11 Time(s)

 ---------------------- httpd End -------------------------


 --------------------- Named Begin ------------------------


 **Unmatched Entries**
   error (unexpected RCODE SERVFAIL) resolving 'ns1.mymmode.com/A/IN': 209.183.52.21#53: 1 Time(s)
   error (unexpected RCODE SERVFAIL) resolving 'ns2.mymmode.com/A/IN': 209.183.52.20#53: 1 Time(s)
   success resolving '50.91.247.82.in-addr.arpa/PTR' (in '91.247.82.in-addr.arpa'?) after disabling EDNS: 1 Time(s)

 ---------------------- Named End -------------------------

Migration technique du serveur dédié terminée

SRG — Sat, 24 Jul 2010 12:10:00 +0200

Depuis deux ans et demi, je disposais d’un serveur dédié “Kimsufi” chez OVH. Il s’agissait d’un serveur Kimsufi Reloaded 08, processeur “Intel Celeron 220 1.2Ghz”, 1GO de RAM DD2, 250GO de disque dur, bande passante garantie de 100 mbits/secondes.

Ces caractéristiques peuvent ne pas sembler très puissantes, mais pour un serveur déporté et pour mon usage, c’est largement suffisant. Je m’en sers en effet pour, principalement :

héberger ce blog et plusieurs autres sites / services sur d’autres noms de domaines sur un serveur Apache2 / PHP5 ;
faire tourner des sites J2EE sur un serveur Tomcat6 (il est difficile sinon de trouver où héberger de tels sites sur des offres mutualisées) ;
faire office serveur de backup distant pour sauver en ligne certains fichiers (photos, documentations, etc.) que je ne souhaite pas perdre en cas de problème chez moi - bien que mon serveur Linux “at home” tourne en RAID5 - celà me permet d’avoir une sauvegarde déportée et d’accéder au besoin à ces fichiers de partout ;
comme repository de codes sources (historiquement, d’abord sous CVS, puis Subversion et maintenant uniquement GiT), ce qui me permet de récupérer de partout mon travail ;

Installé il y a 2 ans et demi sur un Ubuntu 8.04 32bits, j’ai profité d’une baisse de tarifs chez OVH (grâce à la concurrence acharnée avec Dedibox qui propose une offre très similaire), pour prendre un autre serveur dédié de même catégorie (toujours un Kimsufi), ce qui m’a permis, outre de bénéficier d’une réduction de quelques euros par mois, d’avoir un serveur avec les mêmes caractéristiques de base mais le double de RAM (toujours bon à prendre pour Tomcat), et de facilement pouvoir migrer le système en Ubuntu 10.04 64bits, ayant accès aux deux machines en parallèle pendant quelques jours.

Autant j’ai toujours été très déçu des prestations d’OVH en matière d’hébergement mutualisé, autant je n’ai jamais eu de problèmes avec leurs offres de serveurs dédiés.

La migration quant à elle s’est au final très bien passée (une grosse soirée de migration).

En effet, je m’étais créé lors de ma première installation d’une machine de ce type un petit script de post-paramétrie d’un serveur dédié (qui sera peut être détaillé dans un billet futur), à base de SHELL et d’ANT, qui me permet depuis une machine cliente chez moi de facilement appliquer en automatique toutes la paramétrie dont je veux disposer, soit (en vrac et de manière non exhaustive) :

création des comptes systèmes et application de la paramétrie correspondante (dont publication des clés SSH) ;
installation des packages souhaités et retraits des packages inutiles ;
sécurisation de base du serveur (pas d’accès ssh pour root, etc.) ;
création des users et bases MySQL ;
création des VirtualHost Apache ;
installation et paramétrie d’un certain nombre de services (fail2ban, denyhosts, monit, …) ;
installation de Dropbox ;
etc.

Ensuite, une fois la base du serveur configuré, j’ai juste eu à :

modifier mes DNS chez BookMyName pour les faire pointer sur la nouvelle IP ;
ne rien faire pour la partie messagerie (toujours une plaie à configurer) vu qu’elle est liée au domaine chez Google Apps (c’est l’intérêt même de ce système, disposer d’une messagerie, paramétrée aux niveaux du domaine (sur les DNS) et donc indépendantes du serveur qui est réellement lié à ce domaine) ;
migrer le coeur des données : recopie par SSH des répertoire www d’Apache, export / réimport manuel du contenu des bases de données MySQL, etc. ;
remise en place manuelle de la rare configuration qu’il me restait à faire ;
vérifier que tout fonctionne (rien de grave à déplorer) ;

Enfin, par sécurité, avant de libérer l’ancien serveur dédié, j’ai fait un backup complet de ce dernier, que je conservé en local quelques jours, au cas où j’aurais oublié un fichier de paramétrie quelque part. Soit un .tar complet du système :

sudo tar cvvzf /backup.tar.gz / --exclude /proc --exclude /backup.* --exclude /sys --exclude /dev --exclude /media --exclude /mnt --exclude /tmp --totals --show-omitted-dirs >> /backup.log 2>&1 &

Prendre la main sur la session courante avec VNC

SRG — Sun, 04 Jul 2010 17:10:00 +0200

Par défaut, la connexion par VNC sur un serveur distant sous Linux démarre une nouvelle session. Ce n’est pas forcément ce que l’on souhaite toujours, personnellement, ne démarrant une session X que pour de rares applications qui ne sont pas lançables en ligne de commande, je préfère retomber sur la session de connexion courante.

Pour ce faire rien de plus simple, il suffit d’installer et de démarrer x11vnc dans la session sur laquelle on veut prendre la main.

Installation classique sous Ubuntu via :

sudo apt-get install x11vnc

Mise en place du password (qui sera demandé lors de la connexion depuis le PC client) :

x11vnc -storepasswd

Le fichier password sera par défaut stocké dans le répertoire home de l’utilisateur, sous ~/.vnc/passwd. Il est tout à fait possible d’utiliser une autre localisation (voir l’aide en ligne de x11vnc).

Ensuite un petit script pour démarrer x11vnc sur le serveur Linux, dans la session que l’on veut retrouver ensuite via VNC sur un poste client.

#!/bin/zsh
x11vnc -noxdamage -ncache 10 -display :0 -forever -usepw

A lancer en nohup ou à automatiser au démarrage.

Ensuite sur le PC client, j’utilise TightVNC, mais çà marche bien sûr avec toute autre implémentation VNC, y compris UltraVNC sous Windows ou WiNE :

vncviewer 192.168.0.2

Après saisie du mot de passe, on se retrouve en mode fenêtré sur la session démarrée sur le serveur distant.

Liens :

Documentation sur VNC sous Linux.

Installation APR sous TomCat

SRG — Fri, 21 May 2010 16:21:00 +0200

J’utilise le serveur d’applications TomCat 6, aussi bien en développement sur poste local sous Eclipse/WTP qu’en environnement Linux (pour faire tourner Hudson ou Sonar).

Une petite optimisation permettant de gagner un peu de temps au démarrage est d’installer les APR : ApachePortableRuntime.

Avant :

INFO: Server startup in 8477 ms

Une fois APR installé :

INFO: Server startup in 7908 ms

Donc un gain pas énorme au final, mais vu que la manipulation d’installation n’est pas très compliquée, autant ne pas s’en priver.

La doc se trouve ici : http://tomcat.apache.org/native-doc/ Site officiel du module APR : http://apr.apache.org/

Installation de APR et APR-UTILS

Installation de APR :

tar xvzf ../apr-1.3.8.tar.gz 
cd apr-1.3.8/
./configure 
make && sudo make install

Installation de APR-UTILS :

tar xzvf ../apr-util-1.3.9.tar.gz 
cd apr-util-1.3.9/
./configure --with-apr=/usr/local/apr/bin/
make
sudo make install

Installation de Tomcat APR

cd jni/native/
./configure --with-apr=/usr/local/apr/bin/apr-1-config --with-java-home=/home/applications/java/jdk1.6.0_15 --with-ssl=no --prefix=/home/applications/apache/tomcat/6.0.18
make
make install

Démarrage autonome de TomCat

Il suffit de mettre en place partie setenv.sh comme indiqué dans la documentation pour lancement manuel de tomcat

Démarrage de TomCat sous Eclipse/WTP

Il suffit, dans les préférences du serveur sous WTP (Web Tools Platform), d’indiquer sous “Open Launch Configuration” / “Environnement” la même valeur de la variable LD_LIBRARY_PATH que ci-dessus (soit le chemin donné à la compilation jni ci-dessus sous “prefix”).

Exemple sur mon poste :

Contenu du répertoire lib de Tomcat :

~/applications/apache/tomcat/6.0.18/lib> lr
total 6260
-rw-r--r-- 1 domain users   49019 2008-07-22 02:01 tomcat-i18n-ja.jar
-rw-r--r-- 1 domain users   42702 2008-07-22 02:01 tomcat-i18n-fr.jar
-rw-r--r-- 1 domain users   45686 2008-07-22 02:01 tomcat-i18n-es.jar
-rw-r--r-- 1 domain users  197443 2008-07-22 02:01 tomcat-dbcp.jar
-rw-r--r-- 1 domain users  742085 2008-07-22 02:01 tomcat-coyote.jar
-rw-r--r-- 1 domain users   83787 2008-07-22 02:01 servlet-api.jar
-rw-r--r-- 1 domain users   72183 2008-07-22 02:01 jsp-api.jar
-rw-r--r-- 1 domain users 1395264 2008-07-22 02:01 jasper-jdt.jar
-rw-r--r-- 1 domain users  511634 2008-07-22 02:01 jasper.jar
-rw-r--r-- 1 domain users  102282 2008-07-22 02:01 jasper-el.jar
-rw-r--r-- 1 domain users   27690 2008-07-22 02:01 el-api.jar
-rw-r--r-- 1 domain users  228471 2008-07-22 02:01 catalina-tribes.jar
-rw-r--r-- 1 domain users 1129912 2008-07-22 02:01 catalina.jar
-rw-r--r-- 1 domain users  123115 2008-07-22 02:01 catalina-ha.jar
-rw-r--r-- 1 domain users   49145 2008-07-22 02:01 catalina-ant.jar
-rw-r--r-- 1 domain users   10805 2008-07-22 02:01 annotations-api.jar
-rw-r--r-- 1 domain users   18501 2009-07-21 18:01 tomcat-devloader.jar
drwxr-xr-x 2 domain users    4096 2009-11-06 15:54 pkgconfig
-rwxr-xr-x 1 domain users  613512 2009-11-06 15:54 libtcnative-1.so.0.1.16
lrwxrwxrwx 1 domain users      23 2009-11-06 15:54 libtcnative-1.so.0 -> libtcnative-1.so.0.1.16
lrwxrwxrwx 1 domain users      23 2009-11-06 15:54 libtcnative-1.so -> libtcnative-1.so.0.1.16
-rwxr-xr-x 1 domain users     939 2009-11-06 15:54 libtcnative-1.la
-rw-r--r-- 1 domain users  880544 2009-11-06 15:54 libtcnative-1.a

Démarrage d’Eclipse / WTP

Si tout s’est bien passé on aura :

6 nov. 2009 15:59:20 org.apache.catalina.core.AprLifecycleListener init
INFO: Loaded APR based Apache Tomcat Native library 1.1.16.
6 nov. 2009 15:59:20 org.apache.catalina.core.AprLifecycleListener init
INFO: APR capabilities: IPv6 [true], sendfile [true], accept filters [false], random [true].
6 nov. 2009 15:59:20 org.apache.catalina.core.AprLifecycleListener lifecycleEvent
INFO: Failed to initialize the SSLEngine.
6 nov. 2009 15:59:20 org.apache.coyote.http11.Http11AprProtocol init
INFO: Initialisation de Coyote HTTP/1.1 sur http-8080
6 nov. 2009 15:59:20 org.apache.coyote.ajp.AjpAprProtocol init
INFO: Initializing Coyote AJP/1.3 on ajp-8009
6 nov. 2009 15:59:20 org.apache.catalina.startup.Catalina load
INFO: Initialization processed in 832 ms
6 nov. 2009 15:59:20 org.apache.catalina.core.StandardService start
INFO: Dï¿½marrage du service Catalina
6 nov. 2009 15:59:20 org.apache.catalina.core.StandardEngine start
INFO: Starting Servlet Engine: Apache Tomcat/6.0.18
INFO: Using JVM encoding charset = UTF-8

Alternatives à PowerPoint / OpenOffice

SRG — Sun, 21 Mar 2010 20:46:00 +0100

Lassé des innombrables bugs d’OpenOffice et des incompatibilités avec les fichiers PowerPoint qui me font vite perdre trop de temps pour de simples problèmes de mises à pages (mhh les puces sous OpenOffice qui réagissent n’importe comment …), j’ai trouvé quelques alternatives plutôt pas mal.

Dans mon cahier de charges de la solution alternative à PowerPoint :

simplicité de la solution (simplicité d’utilisation, simplicité d’installation) ;
portabilité (doit pouvoir fonctionner sur plusieurs plateformes) ;
capacité à publier de différente manière la présentation : sous forme de slideshows bien sûr (projection au vidéo-projecteur), mais aussi en version papier voir faciliter la publication HTML au sein d’un site ;
génération automatique de la table des matières (parce que je trouve aberrant de perdre du temps sur çà en rédigeant un .ppt) ;
navigation intelligente (notamment lorsqu’il y a des animations - par ex. des puces qui apparaissent de manière incrémentale, pouvoir passer à l’animation suivante bien sûr mais aussi directement passer au slide suivant) ;

J’ai trouvé plusieurs outils, détaillés ci-dessous, qui respectent presque tous la même philosophie : un moteur HTML (ou XHTML, ou XML) avec un peu de JavaScript pour gérer l’aspect slideshow.

HTML Slidy ;
S5, son add-on de rendu visuel Presentacular, et le fork S5 Reloaded ;
Slideous (le meilleur choix selon moi, voir plus loin) ;
AJAX-S ;
Enfin, Impress!ive (anciennement KeyJNote), qui est le seul à avoir une autre philosophie ;

HTML Slidy

La norme du W3C, très similaire à S5 dont on sent d’ailleurs l’inspiration ; pas mal du tout, mais n’a pas l’air très répandu au final.

Lien : http://www.w3.org/2005/03/slideshow.html

S5

Sans doute le projet le plus répandu sur cette philosophie et au final le plus actif (avec ses add-ons et ses dérivés). Le principe est le même que HTML Slidy, une page HTML et du Javascript pour en gérer l’affichage. Le projet originel n’est plus maintenu.

Un add-on intéessant à S5 est : Presentacular, qui améliore l’affichage, avec grâce à l’introduction de la librairie JavaScript Spetacular quelques effets (déplacement de blocs de texte, “vibration” de ligne de texte, etc.), qui peuvent être utile dans certains cas (mais sont totalement superflus à mes yeux).

Voici un exemple en ligne avec Presentacular. Et ici un tutorial très complet sur S5 + Presentacular (sur Framasoft).

Lien : http://meyerweb.com/eric/tools/s5/structure-min.html

S5 Reloaded.

Comme le projet S5 n’est plus actif, d’autres bonnes volontés se sont manifestées pour enrichir ce projet open-source avec des fonctionnalités supplémentaires, c’est ainsi qu’est né S5 Reloaded, qui est donc une reprise et un enrichissement du projet S5. Pour quelqu’un qui voudrait partir sur S5, c’est bien sûr sur cette version qu’il faut aller.

Les nouveautés sont essentiellement :

gestion du multimédia (audio via des MP3, fichiers vectoriels SVG, fichiers flash) ;
gestion d’un fondu entre les pages ;
meilleure gestion des éléments graphiques type images (redimensionnement automatique) ;
gestion de l’autoplay (= déroulement automatique des slides) ;
pannel de navigation en bas qui apparaît lorsque l’on déplace la souris en bas de l’écran avec des fonctions de navigation type DVD (pause, next, etc.) ;

La rançon de ses fonctionnalités est qu’il y a plus de fichiers à inclure / gérer (même si çà reste très facile), une feuille de style spécifique pour Opera, etc.

Un exemple en ligne et la page de download.

Au final S5 / S5 Reloaded est une solution intéressante mais :

Le changement de slide est mal fichu quand il y a des puces qui s’affiche de manière itérative : impossible de passer au slide suivant sans faire défiler toutes les puces : il aurait été mieux que ESPACE et FLECHE BAS fassent apparaître les puces et PAGE DOWN ou FLECHE DROITE amène au slide suivant par ex. ;
Il n’y a pas de navigation par vignettes (difficile à faire vu le principe de S5) ;

Lien : http://www.netzgesta.de/S5/reloaded/

Slideous

Slideous a été réécrit après la publication de S5 et d’HTML Slidy. Il en reprend les grands principes mais apporte plusieurs fonctions de navigations intéressantes qui m’intéressent bigrement :

génération automatique de la table des matières à partir des titres des différents slides ;
status bar très complète ;
navigation intelligente au sein des slides : quand il y a des éléments comme des puces qui s’affichent un par un, il est toujours possible de passer directement au slide suivant (indispensable quand en fin de présentation on veut naviguer dans les slides pour en remontrer un) ;

De plus Slideous est particulièrement simple niveau intégration (autant que HTML Slidy, et plus que S5 Reloaded) : il y a juste un fichier .css et un fichier .js à intégrer dans le HTML de présentation.

Un exemple de page toute simple affichée (ici sur Google Chrome) :

Un exemple de code :

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN"
    "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/1999/xhtml">
  <head>
    <title>Réunion</title>
    <meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
    <meta name="author" content="auteur" /> 
    <meta name="date" content="date" /> 
    <meta name="autoincrement" content="true" /> 
    <link rel="stylesheet" type="text/css" href="ui/slideous.css" /> 
    <script src="ui/slideous.js" type="text/javascript"></script>
  </head>
  <body>
    <!-- statusbar -->
    <div id="statusbar">
      <span style="float:right;">
        <span style="margin-right:4em;font-weight:bold;"><span id="slideidx"></span> of {$slidecount}</span>
        <button id="prevslidebutton" title="previous slide">&laquo;</button>
        <button id="previtembutton" title="previous item">&lsaquo;</button>
        <button id="nextitembutton" title="next item">&rsaquo;</button>
        <button id="nextslidebutton" title="next slide">&raquo;</button>
        <button id="incfontbutton" title="content">A+</button>
        <button id="decfontbutton" title="first slide">A-</button>
        <select id="tocbox" size="1"><option></option></select>
      </span>
      <span id="eos">&frac12;</span>
      <span title="{$location}, {$date}">{$title}, {$author}</span>
    </div>

    <!-- slides -->
    <div class="slide">
      <h1>Introduction</h1>
    </div>

    <div class="slide">
      <h1>Table des matières</h1>
      <ul id="toc" class="incremental"><li></li></ul>
    </div>

    <div class="slide">
      <h1>Slide 1</h1>
    </div>
  </body>
</html>

En gros tout le début ne change pas (sauf l’auteur, etc.), et il suffit d’écrire des blocs div pour chaque slide, et c’est tout. Je trouve çà plutôt simple et rapide (copié / collé facilités, changement de thème via la CSS, etc.).

Lien : http://goessner.net/articles/slideous/slideous.html

AJAX-S

Je n’ai pas beaucoup creusé cette version parce que Slideous me convient bien, mais un des intérêts d’AJAX-S est qu’il fonctionne en XML pur, donc il n’est pas nécessaire d’écrire du HTML. Sinon il est à l’usage et sur le principe relativement semblable aux autres.

Lien : http://robertnyman.com/ajax-s/

Impress!ve

Il s’agit d’un moteur de rendu de fichiers .pdf avec plusieurs fonctionnalités sympas, notamment la surbrillance à la souris, la navigation au sein des diapos par vignettes et l’enchaînement automatique des slides.

Le principe est simple : il faut générer un .pdf d’une manière quelconque (Word, OpenOffice, etc.), et Impressi!ve se charge d’en faire l’affichage en mode présentation, pour un rendu très agréable (la surbrillance t les vignettes notamment).

Si ce mode de publication peut paraître simple, en pratique j’y trouve des inconvénients :

La génération du .pdf peut être laborieuse : il faut un outil “annexe” à Impress!ve ;
Impress!ve est basé sur Python avec plusieurs dépendances système, et du coup c’est assez laborieux à installer (personnellement j’ai laissé tomber après 30 minutes à cause de l’installation de tous ces modules pytons un peu compliquée sur mon poste SuSE bridé) ;

Lien : http://impressive.sourceforge.net/

Matrice de comparaison.

	Impress!ve	HTML &Tidy	S5	S5 &Reloaded	Slideous	AJAXS

Projet vivant
Communauté active
Installation simple
Table des matières automatique
Navigation intelligente
Fonctions de navigations avancées
Navigation par vignette
Facilité de publication externe
Séparation fond/forme

Conclusion.

Pour conclure, tous les projets ont leurs avantages et leurs inconvénients. S5 (via S5 Reloaded) est le plus actif et a la meilleure gestion multimédia, HTML Slidy a pour lui le côté standard du W3C mais est resté plutôt confidentiel, Impress!ve a des fonctionnalités de navigation très sympas que n’ont pas les autres, AJAX-S a la meilleure séparation fond / forme puisqu’il n’est pas nécessaire de faire du HTML …

Du coup, au final, même s’il ne présente pas d’avancées majeures face aux autres, le choix le plus intéressant reste clairement pour moi Slideous, peu d’inconvénients, et couverture de quasiment toutes les fonctionnalités dont j’ai besoin.

Enfin, pratiquement toutes ces solutions reste du Javascript et c’est bien dommage - je n’aime vraiment pas le Javascript, techniquement j’aurais préféré un autre mécanisme … mais je suis néanmoins plutôt content du résultat final : une fois le système en place, c’est publiable à différents endroits (y compris sur un site généré par Maven par ex.).

Annexes.

Une présentation en anglais de KeyJNote et S5.

En complément, même si je n’ai pas exploré cette piste, une autre alternative serait de passer par un document LaTeX : à partir d’un document source LaTeX, il est possible de générer du .pdf et du .html et il existe des extensions pour la présentation (notamment TexPoint et Beamer).

Il y a bien sûr d’autres alternatives plus dans la même logique que PowerPoint, voir par exemple ce comparatif “11 alternatives pour se passer de Powerpoint”.

Convertir des fichiers FLV an AVI (Xvid) sous Linux

SRG — Sun, 07 Feb 2010 18:40:00 +0100

Je télécharge depuis peu quelques fichiers en .flv depuis le site de Canal+, notamment les épisodes de Groland toutes les semaines. Las, sans que je sache pourquoi, les .flv ne se lisent pas bien en streaming avec vlc sur mon Karmic Koala. Donc il me faut les convertir en avi, avec mencoder. La conversion est automatisée à l’aide du script ci-dessous en .avi (au format libre Xvid).

Le coeur de la conversion se fait avec ces paramètres :

mencoder input.flv -oac mp3lame -lameopts preset=standard:fast -ovc xvid -xvidencopts pass=2:bitrate=650:vhq=4:autoaspect -vf pp=h1/v1/al/dr/tn,hqdn3d -o output.flv

Après plusieurs tests j’ai donc opté pour un encodage en 650kbits niveau bitrate :

La taille du fichier est au final très proche de la taille initiale en .flv ;
Visuellement je ne perçois pas de réelles différences avec le fichier .flv original ;

L’encodage se fait en deux passes pour une meilleure qualité (en une seule passe les artefacts de compression sont en effet bien plus visibles).

Différence de taille entre le fichier original en .flc et la conversion en .avi :

ubuntu:/home/downloads/Canal+/groland> ll *0130*
-rw-r--r-- 1 root   root   110233294 2010-02-07 17:52 groland_100130.avi
-rw-r--r-- 1 root   root   106066014 2010-01-31 15:08 groland_100130.flv

Une image de la vidéo streamée :

Le script de conversion qui s’utilise en passant le fichier à convertir en paramètre (sera effacé en fin de traitement). Lien direct vers le .sh : convert_flv_to_avi.sh

#!/bin/zsh

INPUT_FILENAME="${1}"
OUTPUT_FILENAME=${INPUT_FILENAME%%.*}.avi
DIVX_TEMP_FILENAME="divx2pass.log"
if [[ ! -f "${INPUT_FILENAME}" ]] ; then
  echo "Le fichier '${INPUT_FILENAME}' n'existe pas."
  exit 1
fi

echo "Destination : '${OUTPUT_FILENAME}'"

[[ -f "${OUTPUT_FILENAME}" ]] && rm -f "${OUTPUT_FILENAME}" >/dev/null 2>&1

# -lameopts cbr=128
VIDEO_BITRATE="650"
AUDIO_OPTIONS_PASS1="-oac copy" # Inutile de convertir l'audio pour la premiere passe, qui ne produit aucun fichier
AUDIO_OPTIONS_PASS2="-oac mp3lame -lameopts preset=standard:fast"
VIDEO_OPTIONS_PASS1="-ovc xvid -xvidencopts pass=1:bitrate=${VIDEO_BITRATE}:vhq=4:autoaspect -vf pp=h1/v1/al/dr/tn,hqdn3d"
VIDEO_OPTIONS_PASS2="-ovc xvid -xvidencopts pass=2:bitrate=${VIDEO_BITRATE}:vhq=4:autoaspect -vf pp=h1/v1/al/dr/tn,hqdn3d"

echo "Passe 1"
eval mencoder "${INPUT_FILENAME}" ${AUDIO_OPTIONS_PASS1} ${VIDEO_OPTIONS_PASS1} -o /dev/null
echo "Passe 2"
eval mencoder "${INPUT_FILENAME}" ${AUDIO_OPTIONS_PASS2} ${VIDEO_OPTIONS_PASS2} -o "${OUTPUT_FILENAME}"

[[ -f "${DIVX_TEMP_FILENAME}" ]] && rm -f "${DIVX_TEMP_FILENAME}" >/dev/null 2>&1
[[ -f "${OUTPUT_FILENAME}" && ! -s "${OUTPUT_FILENAME}" ]] && rm -f "${INPUT_FILENAME}" >/dev/null 2>&1

Installation (en tant que root) :

cd /usr/bin/
wget http://blog.tensin.org/public/ressources/convert_flv_to_avi.sh
chmod a+x convert_flv_to_avi.sh
apt-get install zsh mencoder

Utilisation :

convert_flv_to_avi.sh groland_100130.flv

Lien vers un article très complet sur l’encodage sous Linux (choix du codec, calcul du bitrate, dvdrip,etc.) chez Autour de Linux.

Effacer intégralement le contenu d'un disque dur

SRG — Wed, 20 Jan 2010 15:56:00 +0100

Le simple fait :

d’effacer des fichiers ;
de formatter une partition ;
de détruire la partition (avec GParted ou autre) ;

ne suffit aucunement à retirer les fichiers physiquement du disque : les données des fichiers sont toujours présentes sur le disque et il est (relativement) facilement facile de les récupérer (par exemple avec l’outil en ligne de commande foremost).

Pour les effacer de manière plus sécurisée, par exemple avant de revendre un PC ou de donner un disque dur, il est nécessaire de passer des commandes qui vont non pas se contenter d’effacer les fichiers du disque ou d’altérer la partition, mais qui vont écrire des données sur l’intégralité du disque.

Solution 1 - dd

Utiliser la commande dd pour copier des blocs nuls sur tout le disque.

dd if=/dev/zero of=/dev/sdg1 bs=1024 count=732572001

of : le device de destination (un disque complet ou une partition) ;
bs : le nombre d’octets à écrire à chaque fois ;
count : le nombre de blocks à écrire.

Pour trouver le nombre de blocs il est possible de passer par fdisk :

ubuntu:/var/log> sudo fdisk /dev/sdg

Le nombre de cylindres pour ce disque est fixé à 91201.
Il n'y a rien d''incorrect avec cela, mais c'est plus grand que 1024,
et cela pourrait causer des problèmes pour certaines installations:
1) logiciels qui sont exécutés à l'amorçage (i.e., vieilles versions de LILO)
2) logiciels d'amorçage et de partitionnement pour d'autres OS
   (i.e., DOS FDISK, OS/2 FDISK)

Commande (m pour l'aide): p

Disque /dev/sdg: 750.1 Go, 750156374016 octets
255 têtes, 63 secteurs/piste, 91201 cylindres
Unités = cylindres de 16065 * 512 = 8225280 octets
Identifiant de disque : 0x000077ba

Périphérique Amorce  Début        Fin      Blocs     Id  Système
/dev/sdg1               1       91201   732572001   83  Linux

Le nombre de blocs est donné ici pour la partition sdg1 qui couvre tout le disque.

Solution 2 - shred

La solution avec dd se contente de remplir le disque avec des zéros. Les données ne sont plus accessibles directement mais une récupération brute sur le disque peut toujours ramener des fichiers. Pour aller plus loin il est possible de passer par un outil qui fera la même chose que dd, mais avec plusieurs passes, par exemple shred.

shred -vfz -n 64 /dev/sdg

Cette commande va écrite des zéros (option -z), en faisant 64 passes (-n 64), en mode verbose (-v) et en forçant au besoin les permissions (-f).

shred est par défaut installé sur la plupart des systèmes Linux (ex. Ubuntu), au besoin l’installer avec la commande d’installation habituelle, genre :

sudo apt-get install shred

A noter que cette opération est généralement très longue (environ 15h sur mon PC pour faire une seule passe sur un disque dur de 200GO Western Digital branché en SATA).

Remarques.

Il est théoriquement toujours possible de récupérer ensuite des données sur un disque effacé de la sorte, en passant par un laboratoire spécialisé. Ces manipulations, pour des données sensibles, peuvent donc ne pas être suffisantes.

Annexe - Retirer un flag GPT (GUID Partition Table).

Le nouveau format Intel de gestion des partitions est GPT (GUID Partition Table).

Ce format est par exemple utilisé pour les disques montés en RAID avec dmraid. Il fonctionne sans problèmes sous Linux. Toutefois, j’ai galéré cinq bonnes minutes pour trouver comment retirer proprement et facilement cette information d’un disque que l’on souhaite partitionner normalement.

Sans çà, un appel à cfdisk produit le warning suivant :

“Attention!! Identifiant GPT (GUID) de table de partitions non supporté détecté. Utilisez GNU Parted.”

La seule solution simple que j’ai trouvée est d’installer le petit outil gdisk (similaire à fdisk mais pour les partitions GPT) : http://sourceforge.net/projects/gptfdisk

Il suffit ensuite d’aller dans les options “Expert” puis “zap”.

ubuntu:/home/sergio/Bureau> sudo gdisk /dev/sdg
GPT fdisk (gdisk) version 0.6.0

Caution: invalid main GPT header, but valid backup; regenerating main header
from backup!
Warning! One or more CRCs don't match. You should repair the disk!
Partition table scan:
  MBR: not present
  BSD: not present
  APM: not present
  GPT: damaged

Found invalid MBR and corrupt GPT. What do you want to do? (Using the
GPT MAY permit recovery of GPT data.)
 1 - GPT
 2 - Create blank GPT

Your answer: 1

Command (? for help): ?
b	back up GPT data to a file
c	change a partition's name
d	delete a partition
i	show detailed information on a partition
l	list known partition types
n	add a new partition
o	create a new empty GUID partition table (GPT)
p	print the partition table
q	quit without saving changes
r	recovery and transformation options (experts only)
s	sort partitions
t	change a partition's type code
v	verify disk
w	write table to disk and exit
x	extra functionality (experts only)
?	print this menu

Command (? for help): i
No partitions

Command (? for help): x

Expert command (? for help): ?
a	set attributes
c	change partition GUID
d	display the sector alignment value
e	relocate backup data structures to the end of the disk
g	change disk GUID
i	show detailed information on a partition
l	set the sector alignment value
m	return to main menu
n	create a new protective MBR
o	print protective MBR data
p	print the partition table
q	quit without saving changes
r	recovery and transformation options (experts only)
s	resize partition table
v	verify disk
w	write table to disk and exit
z	zap (destroy) GPT data structures and exit
?	print this menu

Expert command (? for help): z
About to wipe out GPT on /dev/sdg. Proceed? (Y/N): Y
Blank out MBR? (Y/N): Y
GPT data structures destroyed! You may now partition the disk using fdisk or
other utilities. Program will now terminate.
ubuntu:/home/sergio/Bureau>

Découper des fichiers FLAC sous Linux à partir d'un .cue

SRG — Fri, 01 Jan 2010 15:49:00 +0100

Si vous avez un fichier .flac correspondant à un CD complet, et accompagné d’un fichier .cue (listant l’ensemble des pistes), il est facile de faire le découpage vers autant de fichiers FLAC que de pistes.

Pour celà il faut les outils :

cuetools : pour traiter le fichier .cue et récupérer la liste de chaque piste ;
shntool : pour faire le découpage depuis la sortie de cuetools ;

Installation :

sudo apt-get install cuetools shntool flac wavpack

Usage :

cuebreakpoints cd.cue | shnsplit -o flac cd.flac

cuebreakpoints CDImage.cue |  shnsplit -o flac  CDImage.flac 
Splitting [CDImage.flac] (62:45.15) --> [split-track01.flac] (3:28.00) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track02.flac] (3:55.33) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track03.flac] (2:10.25) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track04.flac] (1:47.22) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track05.flac] (1:49.40) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track06.flac] (2:40.58) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track07.flac] (1:42.47) : 100% OK
Splitting [CDImage.flac] (62:45.15) --> [split-track08.flac] (1:04.13) : 100% OK

Plus d’info (en anglais) (autres options) : Split lossless audio files by cue file

Bonus : pour convertir en ligne de commande des fichiers FLAC en MP3, j’utilise (une version légérement modifiée de ce) script

Comparatif des GPS pour iPhone

SRG — Sat, 03 Oct 2009 16:46:00 +0200

J’hésite toujours sur quel logiciel GPS installer sur mon iPhone, entre TomTom, Navigon, iGo My Way, Sygic Mobile Maps et Co-Pilot.

Je cherche un GPS : précis niveau localisation (donc à priori pas TomTom, d’après les tests), rapide à démarrer (donc pas iGo, qui a l’air de mettre près de 40 secondes pour démarrer), permettant de récupérer une adresse saisie sur la fiche d’un contact, et permettant de saisir une destination à partir de coordonnées GPS. Le tout pas trop cher et en version Europe.

Choix toujours en cours … j’ai pour le moment seulement trouvé un très bon comparatif des fonctionnalités de ces différentes solutions (comparatif dynamique et régulièrement mis à jour ; en anglais) sur PocketGPSWorld : clickez ici pour accéder à ce comparatif.

Ci-dessous une capture (statique) de l’analyse au 03 octobre 2009.

Sinon les autres liens intéressants sont à ma connaissance :

Le comparatif Clubic sur les logiciels de navigation sur iPhone entre Tom-Tom, Navigon et Co-Pilot (vainqueur : Navigon) ;
Les articles GPS sur iPhon.fr ;
Tous les articles GPS sur Presse-Citron ;

Bonus - support voiture pour iPhone.

J’ai acheté ce support iPhone pour voiture qui me convient très bien et qui ne coûte vraiment pas cher (un vrai bon plan !) (payement sans problèmes par Paypal sur ce site chinois, DealExtreme - site dont je parlerai dans un prochain billet).

Le support est compatible iPhone 3G / 3GS.

Il n’abîme pas l’iPhone (clips pas trop durs), qui est cependant bien fixé (mais il n’est possible de mettre qu’un iPhone nu, pas avec une coque) ;
Bras flexible et plateau de support pivotable dans toutes les directions (permet de placer l’iPhone horizontalement ou verticalement, etc.), avec une molette pour figer la position ;
La ventouse tient très bien sur le pare-brise, bien mieux que celle de mon précédent GPS autonome ;

Tout çà pour seulement 4.77$, soit moins de 4 euros (frais de port compris - comptez 3,4 semaines pour la réception).

Sinon il y a bien sûr le futur support officiel Tom-Tom, dont la puce GPS additionnelle pourra être utilisée par d’autres logiciels de navigation, mais qui en comparaison est hors de prix …

Libérer de la place sur des disques durs de données sous Linux avec tune2fs

SRG — Sat, 03 Oct 2009 15:03:00 +0200

Astuce découverte récemment pour libérer de la place sur les disques durs (ext2/ext3/ext4) sous Linux.

En effet, lors du formatage, un paramètre peut être précisé pour indiquer à Linux qu’un pourcentage du disque doit être réservé à l’utilisateur root, afin que ce dernier puisse toujours écrire sur la partition même si elle est indiquée pleine. Ce comportement est important notamment pour les disques systèmes.

Celle valeur est par défaut (si non spécifiée lors du formatage) de 5%. Ce qui peut être énorme sur un disque de grande capacité, ou inutile sur des disques de données qui ne contiennet par ex. que des médias.

Utilisation.

Sur Ubuntu 9.04 il est possible de préciser cette valeur dès la phase d’installation (sous réserve ce reformater les partitions concernées avec l’installeur).

Lors d’un formatage manuel, c’est l’option -m (“-m reserved-blocks-percentage”) qui permet de préciser cette valeur (commandes mkfs.ext2 ou mkfs.ext3 par ex.). Voir le man de mkfs.ext3 de Karmic Koala :

-m reserved-blocks-percentage
Specify the percentage of the filesystem blocks reserved for the
super-user. This avoids fragmentation, and allows root-owned
daemons, such as syslogd(8), to continue to function correctly
after non-privileged processes are prevented from writing to the
filesystem. The default percentage is 5%.

Enfin, il est parfaitement possible de modifier cette valeur à chaud sur une partition (même déjà montée), avec la commande tune2fs.

Exemples.

Passer un disque à 0% de blocs réservés (rappel : c’est fortement déconseillé sur un disque système).

sudo tune2fs -m 0 /dev/sda9

Idem mais à 3%.

sudo tune2fs -m 3 /dev/sda1

Visualiser toutes les infos sur la partition (le pourcentage n’apparaît pas, seulement le nombre de blocs réservés).

sudo dumpe2fs -h /dev/sda9

Ainsi par ex. avec la valeur par défaut de 5% sur un disque de 1500GO, j’avais :

ubuntu:/> df /dev/sda1
Sys. de fich. Type    Tail. Occ. Disp. %Occ. Monté sur
/dev/sda1     ext3    1,4T  1,3T   12G 100% /mnt/internal/sata_1500go-media

Après réduction à 0% :

ubuntu:/> sudo tune2fs -m 0 /dev/sda1
tune2fs 1.41.4 (27-Jan-2009)
Initialisation du pourcentage de blocs réservés à 0% (0 blocs)

ubuntu:/> df /dev/sda1               
Sys. de fich. Type    Tail. Occ. Disp. %Occ. Monté sur
/dev/sda1     ext3    1,4T  1,3T   82G  95% /mnt/internal/sata_1500go-media

Soit 70GO de récupérés.

Pour les infos données par tune2fs :

ubuntu:/> sudo dumpe2fs -h /dev/sda1
dumpe2fs 1.41.4 (27-Jan-2009)
Filesystem volume name:   <none>
Last mounted on:          <not available>
Filesystem UUID:          f372549f-6945-43a5-9194-a04cd34e17b3
Filesystem magic number:  0xEF53
Filesystem revision #:    1 (dynamic)
Filesystem features:      has_journal ext_attr resize_inode dir_index filetype needs_recovery sparse_super large_file
Filesystem flags:         signed_directory_hash 
Default mount options:    (none)
Filesystem state:         clean
Errors behavior:          Continue
Filesystem OS type:       Linux
Inode count:              91578368
Block count:              366284000
Reserved block count:     0
Free blocks:              21345077
Free inodes:              91531060
First block:              0
Block size:               4096
Fragment size:            4096
Reserved GDT blocks:      936
Blocks per group:         32768
Fragments per group:      32768
Inodes per group:         8192
Inode blocks per group:   512
Filesystem created:       Sat May 16 10:55:59 2009
Last mount time:          Sat Sep 26 02:29:18 2009
Last write time:          Mon Sep 28 23:35:43 2009
Mount count:              28
Maximum mount count:      26
Last checked:             Sat May 16 10:55:59 2009
Check interval:           15552000 (6 months)
Next check after:         Thu Nov 12 09:55:59 2009
Reserved blocks uid:      0 (user root)
Reserved blocks gid:      0 (group root)
First inode:              11
Inode size:	          256
Required extra isize:     28
Desired extra isize:      28
Journal inode:            8
Default directory hash:   half_md4
Directory Hash Seed:      3c04a963-383a-4b2a-aed5-4322c7bb70b0
Journal backup:           inode blocks
Taille du journal:        128M

Connexions SSH lentes sous Linux

SRG — Sun, 27 Sep 2009 23:43:00 +0200

Si ssh (Secure Shell) est particulièrement lent lors de la connexion (chez moi lent correspond à environ 5 secondes entre le moment où je lance une commande ssh user@hostname et le moment où j’ai accès au prompt, sur un réseau local (connexion par WiFi 54mbits), ce que je trouve affreusement lent), il est possible de facilement améliorer les choses et de réduire cette lenteur à la connexion.

Côté serveur.

Je tourne ici sur Ubuntu 9.04 et sous OpenSSH 5.1. L’optimisation la plus importante consiste à désactiver l’interrogation DNS, dans la configuration du serveur ssh, afin d’éviter qu’OpenSSH réalise un reverse de l’adresse IP du PC qui cherche à s’authentifier.

Pour ce faire modifier, sous Ubuntu, le fichier /etc/ssh/sshd_config (fichier de configuration du démon ssh) et ajouter ou modifier la ligne :

UseDNS no

Relancer le serveur avec :

sudo /etc/init.d/sshd restart

Et voilà, les connexions passent chez moi de 5 secondes à … connexion instantannée.

Les autres paramétries, dans le même fichier /etc/ssh/sshd_config, pour améliorer la vitesse de connexion sont (avec toutefois une amélioration moindre que la paramétrie DNS) :

UsePAM no # Désactiver l’interface PAM (authentification par modules)
Cipher blowfish # Utiliser pour le cryptage l’algorithme blowfish, + rapide

Remarque : ces optimisations côté serveur profiteront aussi bien aux sessions ssh lancées en ligne de commandes qu’à l’usage du protocole SFTP, par ex. sous Filezilla.

Côté client.

Si la paramétrie n’est pas réalisable côté serveur, il est possible de ruser côté client en réutilisant la même connexion SSH pour les connexions SSH ultérieures (à condition que la connexion initiale soit toujours active, cependant).

Attention donc, si la première connexion ssh est fermée, toutes les connexions qui ont été réalisées par la suite seront automatiquement déconnectées.

Deux solutions pour utiliser ce mode : au lancement de la commande ssh, ou par paramétrie globale.

Au lancement de la commande ssh.

Démarrer chaque connexion ssh via :

ssh -o ControlPath=~/.ssh-control-sock user@hostname

Chaque connexion ssh après la première sera instantannée (par réutilisation de la connexion mappée sur le fichier .ssh-control-sock dans le répertoire home - N.B. : ce fichier a une taille de zéro, c’est normal).

Par paramétrie.

Afin que ce comportement soit en place de manière automatique pour tous les appels à la commande ssh (gains toujours sur les connexions après la première).

Dans le fichier ~/.ssh/config (configuration du poste client, donc), ajouter :

Host *
ControlMaster auto
ControlPath /tmp/%r@%h:%p

Cette paramétrie va s’appliquer automatiquement pour toutes les destinations (Host *), sans confirmation utilisateur (ControlMaster auto), en stockant ici le fichier temporaire dans /tmp/ (directive ControlPath).

Autre paramétrie possible dans le même fichier, pour changer l’algo. de cryptage et pour activer ou non la compression des données transitant par ssh (à voir selon les cas de figures, réseau local ou non, etc.) :

Cipher blowfish
Compression yes

Annexes.

Pour créer un alias ssh facilitant le lancement de sessions ssh en ligne de commande, mettre toujours dans le fichier ~/.ssh/config :

Host alias
User user
HostName adresse_ip

Ensuite au lieu de taper :

ssh user@adresse_ip

Il suffira ensuite d’utiliser :

ssh alias

Skin design "masque hurlant" pour PS3 (FAT)

SRG — Fri, 25 Sep 2009 02:47:00 +0200

Bien que la PS3 slim soit sortie tout récemment, je ne compte pas revendre l’ancienne que j’ai pour passer sur le nouveau modèle, les différences ne justifiant pas la manipulation de revente / ré-achat (mêmes capacités entre l’ancien et le nouveau modèle, mais le nouveau modèle a un disque dur de 120GO contre 80GO précédemment, est plus petit, chauffe moins (gravure du processeur CELL en 45nm au lieu de 65nm précédemment).

Du coup je me suis commandé en Chine un gadget ridicule totalement indispensable : un skin à plaquer sur la console, sous la forme d’un masque hurlant. Inutile, mais çà a quand même de la gueule.

Commandé chez GameYeeeah pour au final quelque chose comme 8 euros (frais de port compris) (11.54$ pour être précis). Reçu en 15 jours / 3 semaines (délai très correct poru une expédition de Chine). J’ai dû avoir le dernier, il n’est plus référencé désormais sur ce site.

La qualité du produit est assez moyenne : plastique fin, mais une fois posée çà rend assez bien. L’ajustement est correct mais sans plus.

Le masque est supposé servir de “protection”, mais c’est clairement plus un skin de customisation pour faire joli (pour ceux qui trouveraient çà joli).

Par contre mon exemplaire a un peu souffert dans le voyage, le colis A4 contenant le skin entouré d’une enveloppe à bulles ayant été pas mal maltraité pendant le trajet … Du coup toute une partie de la tranche avant est en partie plié, dommage.

A noter dans un registre un peu différent la possibilité de faire réaliser sur commande une peinture spécifique d’une PS3 : çà a de la gueule aussi, mais c’est franchement pas donné.

GraphicsMagick : manipulation d'images en ligne de commande sous Linux

SRG — Fri, 25 Sep 2009 01:52:00 +0200

GraphicsMagick (gm) est un ensemble d’outils en ligne de commande pour manipuler des images, particulièrement en batch.Il est le successeur d’ImageMagick dont il est un fork (bien qu’ImageMagick ait continué son développement de son côté).

Introduction.

GraphicsMagick est composé de plusieurs outils lançable en ligne de commande permettant toute une floppée d’opération : resize, crop, ajustement des niveaux de couleurs, rotations, bien évidemment conversions de fichiers, etc. Il y a 10 outils au total (dont deux importantes, convert et mogrify), plus une API de programmation pour réutiliser les fonctions de GraphicsMagick dans d’autres applications (API pour C, C++, PERL).

De nombreux formats de fichiers sont couverts (environ 90 au total), des plus usuels (bmp, jpeg, jpeg-2000, tiff, gif, png, …) à d’autres un peu moins courants ou un peu différents (svg, ps, pdf, …).

Les raisons d’être de GraphicsMagick par rapport à ImageMagick sont données dans la FAQ, le fork ayant eu lieu en 2002, avec notamment la volonté de garder des interfaces compatibles de manière ascendantes, ce que n’a pas toujours garanti ImageMagick.

Curieusement je n’ai découvert ce package qu’il y a peu, mais il a clairement remplacé ImageMagick chez moi.

A l’usage je trouve effectivement ce fork plus sympa à utiliser qu’ImageMagick, moins consommateur et avec moins de problème de mémoire (nativement il est possible de créer de gros .pdf à partir de nombreux fichiers *.bmp, sous ImageMagick sans l’option “—cache 1” pour désactiver le cache la même manipulation tombait en erreur, par ex.).

L’usage typique sera par ex. l’automatisation de création de vignettes pour un site web, l’ajout d’un watermark, etc. - toutes sortes d’opérations qu’il est possible de faire sous The GIMP mais qui peut ici peuvent être entièrement ou semi-automatisées.

Ci-dessous une image avec quelques exemples d’opérations réalisables via GraphicsMagick.

Installation.

L’installation sous Ubuntu est évidemment royalement simple :

sudo apt-get install graphicsmagick

Sinon la page de download (pour installation manuelle des sources par ex.) est là.

Documentation.

La documentation générale (pour la branche 1.3) : http://www.graphicsmagick.org/1.3/GraphicsMagick.html

Pour l’outil convert : http://www.graphicsmagick.org/convert.html

Pour l’outil mogrify : http://www.graphicsmagick.org/mogrify.html

Exemples.

Un seul binaire est nécessaire : gm. Toutes les commandes commencent donc par appeler cet outil, le premier paramètre étant le type d’opérations à réaliser (les “outils” évoqués plus haut, convert pour les conversions, mogrify pour les modifications au sein d’une image pour les plus utilisées) ; ensuite viennent les paramètres de l’outil en lui-même.

Convertir toutes les images d’un format vers un autre.

Pour une seule image (ici c’est l’extension du nom du fichier cible qui détermine le fomat à adopter) :

gm convert titi.bmp titi.jpg

Pour plusieurs images :

gm convert -format jpeg *.bmp

Remarque : les fichiers sources ne sont pas modifiés ni effacés.

Retailler toutes les images.

Ici ce sont les images courantes qui sont directement modifiées.

gm mogrify -resize 66% *.bmp

Pour ne pas altérer les images de départ et créer par ex. des vignettes dans un sous-répertoire :

gm mogrify -output-directory thumbnails -resize 320x200 “*.jpg”

Remarque : les guillemets autour de “*.jpg” permettent d’éviter un éventuel débordement du shell s’il y a trop de fichiers à étendre sur ce joker (c’est alors GraphicsMagick qui gère le développement du joker).

Remarque : on voit ici que l’option -resize est versatile, elle permet d’être spécifiée de différentes manières, voir les infos sur l’option —geometry pour plus de détails.

Faire pivoter à 180° toutes les pages ayant un numéro pair.

On liste tous les fichiers à traiter, et on ne travaille que sur ceux qui finissent par un chiffre pair.

ls -1 *.bmp | egrep “[0|2|4|6|8].bmp” | while read F
do
echo “Working on ‘${F}’”
gm mogrify -rotate 180 “${F}”
done

Ajuster les niveaux de clarté et d’assombrissement.

Pour avoir une page plus contrastée, avec accroissement de 10% des parties claires et assombrissement à 95% du haut du spectre.

ls -1 *.bmp | while read F
do
echo “Working on ‘${F}’”
gm mogrify -level 10%,1.0,95% “${F}”
done

Enlever les bordures d’une page.

Pour retirer un certain nombre de pixels sur tout un ensemble de pages, il est soit possible d’utiliser -crop (en indiquant la zone finale que l’on veut conserver et le point en haut à gauche à partir de laquelle extraire l’image finale de l’image source), soit l’option -shave qui retire un même nombre de pixels sur les bords droit et gauche (axe x) / haut et bas (axe y). Exemple pour retirer sur toutes les pages 10 pixels sur chaque côté (soit -20 pixels) et 20 pixels sur chaque bordure haut et bas (soit -40 pixels en vertical) :

ls -1 *.bmp|while read F
do
gm mogrify -shave 10x20 “${F}”
done

Créer un .pdf à partir d’images.

Autre exemple, créer un fichier.pdf avec toutes les images *.bmp du répertoire courant, en utilisant la compression jpeg avec un taux de compression (qualité) de 85%.

gm convert -compress jpeg -quality 85 *.bmp fichier.pdf

Divers.

Changer le répertoire temporaire.

Certaines opérations (ex. création de .pdf) nécessitent des fichiers temporaires, par défaut stockés dans /tmp/. Si la place y est insuffisante, il suffit avant de lancer la commande gm de positionner la variable MAGICK_TMPDIR (ou juste TMPDIR).

export MAGICK_TMPDIR=~/tmp/

Utiliser GraphicsMagick sous PHP.

Comme il est possible d’utiliser la librairie GD sous PHP avec l’extension correspondante, il est tout à fait possible de manipuler des images en PHP avec GraphicsMagick, simplement en installant l’extension correspondante avec PECL. Voir cet article sur Zend Developer Zone qui montre sur un exemple d’image certaines opérations possibles et le code PHP correspondant.

Débloquer sous Linux un iPhone bloqué en mode recovery

SRG — Sun, 13 Sep 2009 12:13:00 +0200

J’ai un iPhone depuis peu (grâce à la très bonne offre idéo de chez Bouygues dont je parlerai dans un autre billet).
Il est nécessaire pour un certain nombre d’opérations d’avoir iTunes, sous Windows ou OSX sur Mac (par ex. pour l’activation initiale ou pour les montées de version du firmware).

Je n’ai aucune machine sous Windows ou OSX, seulement sous Linux. Par contre comme j’ai tout de même besoin d’un Windows pour certaines tâches (par ex. utiliser mon scanner qui n’est pas reconnu sous Linux), j’ai installé un Windows XP sous VirtualBox, et çà marche très bien. J’ai notamment pu installer dessus iTunes et ainsi procéder à l’activation initiale de mon iPhone, ou bien envoyer des MP3 depuis iTunes toujours.

Avec l’apparition d’iTunes 9 et du firmware 3.1, j’ai voulu tenter l’upgrade de l’iPhone depuis VirtualBox. Mal m’en a pris, çà ne fonctionne évidemment pas !

Au démarrage, l’iPhone démarre ainsi et se retrouve bloqué sur ce mode :

-

Pour rappel VirtualBox est un outil de virtualisation qui permet de faire tourner sur un système d’opération donné d’autres OS, de manière virtuelle. La reconnaissance des périphériques physiques (par ex. USB) branchés sur la machine hôte fonctionne très bien : ils sont propagés vers le système invité (sélection pour chaque périphérique USB de la propagation manuelle ou automatique vers le système invité).

Toutefois dans le cas d’une mise-à-jour de l’iPhone :

iTunes (sous Windows XP) télécharge le nouveau firmware ;
l’iPhone reboot pour passer en mode recovery, et est donc déconnecté tant du Windows XP virtualisé que du système Linux ;
au redémarrage de l’iPhone, il est reconnu par la machine hôte (ici un Linux Ubuntu 8.10) … ;
… mais n’est toutefois pas propagé immédiatement / à temps à la machine invité (le Windows XP sur lequel tourne iTunes) ;
la mise-à-jour iTunes (sous Windows XP) tombe en erreur car l’iPhone a disparu ;
l’iPhone reste alors bloqué en mode recovery (un rebranchement sous iTunes ne suffit pas à le remettre d’aplomb) ;

Le problème se pose donc sur la phase de reboot : au moment où l’iPhone redémarre en mode recovery, il s’attend à recevoir une information d’iTunes. Mais, ayant redémarré, il a été éjecté de la machine invité, et au reboot n’est reconnu que par la machine hôte (Linux / Ubuntu), qui n’est pas capable de lui donner les infos pour continuer (bravo Apple au passage pour ne pas mettre en place des mécanismes simples et éprouvés …).

Pour réactiver l’iPhone il faut le sortir du mode recovery, à l’aide du logiciel iRecovery .

Remarque 1 : cette manipulation peut également servir sur certains problèmes pouvant survenir lors d’un jailbreak.
Remarque 2 : la même opération peut également se faire sous Windows (voir par exemple ce lien).

Pour ce faire :

Télécharger les sources d’iRecovery depuis ce lien ou depuis celui-ci pour avoir les sources les plus récentes (SVN) (ou voir en fin de billet) ;
Procéder à la compilation d’iRecovery (voir ci-dessous pour les dépendances) ;
Exécuter la commande “iRecovery -s” pour démarrer iRecovery, qui va se connecter à l’iPhone en mode bas-niveau ;
Taper sous iRecovery la commande “printenv“ ;
Vérifier la variable “auto-boot”, qui va vraisemblablement être à “false” ;
Taper : “setenv auto-boot true” pour modifier cette valeur ;
Taper : “saveenv“ ;
Taper : “reboot“ ;

L’iPhone redémarre et n’est plus en mode recovery. Reste à faire la mise-à-jour du firmware depuis un PC nativement sous Windows.

Logs

Compilation d’iRecovery.

Personnellement j’ai eu besoin d’installer libusb et libreadline au préalable en dépendances.

ubuntu:/tmp/iRecovery> sudo apt-get install libusb-dev
(...)
ubuntu:/tmp/iRecovery> sudo apt-get install libreadline5-dev
make linux
gcc irecovery.c -o irecovery -lusb -lreadline
(...)
ubuntu:/tmp/iRecovery> ll
total 72
-rw-r--r-- 1 sergio sergio   913 2009-07-25 00:53 constants.h
-rwxr-xr-x 1 sergio sergio 14612 2009-09-10 10:33 irecovery
-rw-r--r-- 1 sergio sergio  7168 2009-07-25 00:53 irecovery.c
-rw-r--r-- 1 sergio sergio 35146 2009-07-25 00:53 LICENSE
-rw-r--r-- 1 sergio sergio   341 2009-07-25 00:53 Makefile
-rw-r--r-- 1 sergio sergio   770 2009-07-25 00:53 README

Trace de la manipulation sous iRecovery.

Les manipulations effectuées.

ubuntu:/tmp/iRecovery> irecovery -s
iRecovery - Recovery Utility
by westbaer
Thanks to pod2g, tom3q, planetbeing and geohot.

=======================================
::
:: iBoot for n88ap, Copyright 2009, Apple Inc.
::
::	BUILD_TAG: iBoot-596.24
::
::	BUILD_STYLE: RELEASE
::
::	USB_SERIAL_NUMBER: CPID:8920 CPRV:14 CPFM:03 SCEP:02 BDID:00 ECID:000001xxxxxxxxxx IBFL:01 SRNM:[8xxxxxxxxx]
::
=======================================

[FTL:MSG] Apple NAND Driver (AND) RO
[NAND] Found Chip ID 0x3294D79876 on FMI0:CE0
[NAND] Found Chip ID 0x3294D79876 on FMI0:CE1
[NAND] Found Chip ID 0x3294D79876 on FMI1:C8
[NAND] Found Chip ID 0x3294D79876 on FMI1:CE9
[FTL:MSG] FIL_Init            [OK]
[FTL:MSG] BUF_Init            [OK]
[FTL:MSG] FPart Init          [OK]
read new style signature 0x43313132 (line:305)
[FTL:MSG] VSVFL Register  [OK]
[FTL:MSG] VFL Init            [OK]
[FTL:MSG] VFL_Open            [OK]
[FTL:MSG] YAFTL Register  [OK]
[FTL:MSG] FTL_Open            [OK]
Boot Failure Count: 0	Panic Fail Count: 0
Entering recovery mode, starting command prompt
] printenv
  build-style = "RELEASE"
  build-version = "iBoot-596.24"
  config_board = "n88ap"
  loadaddr = "0x41000000"
  boot-command = "fsboot"
  idle-off = "true"
  boot-device = "nand0"
  boot-partition = "0"
  boot-path = "/System/Library/Caches/com.apple.kernelcaches/kernelcache.s5l8920x"
  display-color-space = "RGB888"
  display-timing = "n88"
P bootdelay = "0"
P platform-uuid = <DATA>
P backlight-level = "168"
P auto-boot = "false"
  image-version = "0x3"
  framebuffer = "0x4f00000"
  secure-boot = "0x1"
] setenv auto-boot true
] saveenv
] reboot
] exit

A tout hasard, mon répertoire (sources au 2009-08-22 + binaire compilé sur Ubuntu 8.10 en 32 bits et Ubuntu 9.10 en 64 bits) :

Configuration FireFox pour gérer les liens ed2k avec Sancho

SRG — Fri, 11 Sep 2009 21:45:00 +0200

Ayant passé bien 5 minutes sous Firefox 3.5.3 sur Linux / Open Suse pour réparamétrer les liens ed2k://, afin qu’un simple click sur ces liens déclenche le téléchargement distant MLDonkey, voici la marche à suivre.

1. Configuration FireFox.

Dans FireFox, taper about:config. Créer les nouvelles valeurs suivantes :

network.protocol-handler.app.ed2k : (chaîne de caractères), valeur “/usr/bin/ed2k”

network.protocol-handler.expose.ed2k : (booléan), valeur “true”

network.protocol-handler.external.e2dk : (booléan), valeur “true”

network.protocol-handler.warn-external.ed2k : (booléan), valeur “false”

Méthode alternative, ajouter ces lignes directement dans le fichier prefs.js (dans le répertoire du profile Firefox, ~/.mozilla/firefox/…) - attention dans ce cas à faire cette modification FireFox éteint :

user_pref(“network.protocol-handler.app.ed2k”, “/usr/bin/ed2k”);

user_pref(“network.protocol-handler.expose.ed2k”, true);

user_pref(“network.protocol-handler.external.e2dk”, true);

user_pref(“network.protocol-handler.warn-external.ed2k”, false);

2. Script de lancement de sancho.

Créer dans /usr/bin/ le fichier ed2k avec le contenu ci-dessous, et rendez ce fichier exécutable (chmod a+x /usr/bin/ed2k) :

#!/bin/sh

nohup /usr/bin/sancho -l $* > /dev/null 2>&1 &

N.B. : le chemin vers sancho est éventuellement à adapter.

Remarque 1 : lancement en nohup pour rendre la main immédiatement.

Remarque 2 : le paramètre -l est pour indiquer à sancho de prendre le lien fourni et de l’envoyer vers MLDonkey.

3. Forcer la prise en compte

C’est là où j’ai un peu galéré, les étapes ci-dessus ne suffisaient pas, il fallait réactiver la demande de sélection pour avoir le choix du protocole. Pour ce faire :

Arrêter FireFox

Dans le répertoire du profile FireFox (~/.mozilla/firefox/…), éditer le fichier mimeTypes.rdf et chercher les 2 lignes correspodant à :

  <RDF:Description RDF:about="urn:scheme:handler:ed2k" NC:alwaysAsk="false">

Remplacer le alwaysAsk=”false” par alwaysAsk=”true”

Relancer FireFox, clicker sur un lien ed2k://, FireFox demande quel protocole choisir, le choisir dans la liste, et ensuite tout marche.

Les autres blocs de configuration dans ce fichier mimeTypes.rdf sont donc au final :

<RDF:Description RDF:about=”urn:handler:local:/usr/bin/ed2k”
NC:prettyName=”ed2k”
NC:path=”/usr/bin/ed2k” />

Puis :

<RDF:Description RDF:about=”urn:scheme:handler:ed2k”
                   NC:alwaysAsk=”false”>
    <NC:externalApplication RDF:resource=”urn:scheme:externalApplication:ed2k”/>
    <NC:possibleApplication RDF:resource=”urn:handler:local:/usr/bin/ed2k”/>
</RDF:Description>

Et :

   <RDF:Description RDF:about=”urn:scheme:externalApplication:ed2k”
                    NC:prettyName=”ed2k”
                    NC:path=”/usr/bin/ed2k” />

C’est pas fini … :

<RDF:Description RDF:about=”urn:scheme:ed2k”
NC:value=”ed2k”>
<NC:handlerProp RDF:resource=”urn:scheme:handler:ed2k”/>
</RDF:Description>

Et enfin en complément de la balise root :

   <RDF:Seq RDF:about=”urn:schemes:root”>
     <RDF:li RDF:resource=”urn:scheme:mailto”/>
     <RDF:li RDF:resource=”urn:scheme:webcal”/>
     <RDF:li RDF:resource=”urn:scheme:ed2k”/>
     <RDF:li RDF:resource=”urn:scheme:irc”/>
     <RDF:li RDF:resource=”urn:scheme:ircs”/>
   </RDF:Seq>

Au final mon fichier a donc le contenu suivant : mimeTypes.rdf

Liens.

Liens : MLDonkey, Sancho.

Jeux PlayStation 3 à moindre coût

SRG — Sun, 22 Mar 2009 14:24:00 +0100

Quoi ?

Ayant acheté récemment une console de jeu PlayStation 3, j’entends souvent dire ou je lis souvent sur le web que les jeux pour cette console “NextGen” sont horriblement chers, aux alentours de 70 euros pour une nouveauté. C’est vrai : en France. Il est toutefois possible de facilement trouver les mêmes jeux pour un prix bien moins élevé, en les commandant en Angleterre. Les jeux sont du point de vue du contenu rigoureusement identiques et totalement compatible avec une console achetée en France et branchée en ligne chez un provider français, simplement les boîtiers et manuels sont en anglais. La plupart du temps le jeu comprend la version française sur le disque (à qqs exceptions près, ex. Dead Space qui comprend 5 langues mais pas le français - voir ci-dessous).

Les sites permettant d’acheter des jeux en angleterre sont nombreux, des plus connus à d’autres plus obscurs. J’en détaille ci-dessous quelques uns.

A noter que les jeux UK sont tous compatibles avec les serveur Playstation Store européens, donc les mises-à-jour ou contenus additionnels seront à télécharger avec le même compte Playstation Network qu’un jeu français, et les parties en ligne seront compatibles avec des jeux FR. Il est également possible de commander sur des sites américains (US) ou japonais (JAP), mais :

les délais de réception sont plus longs ;
contrairement aux jeux UK, dans la majorité des cas les contenus additionnels ou patchs seront à télécharger sur le serveur Playstation Store correspondant (donc avec un autre compte Playstation Network que votre compte habituel - voir ces tutoriaux pour se créer des comptes sur les autres serveurs) ;
il n’est normalement pas possible de faire des parties en ligne avec des joueurs ayant le jeu FR ou UK ;
le colis lors de son passage à la douane en France peut être soumis à l’application de la TVA (c’est rare, mais çà arrive) ;

L’achat de jeu au Royaume-Uni reste donc la meilleure solution.

Voici un convertisseur Livres Sterling (GBP) / Euro : XE

Quelques exemples.

Quelques exemples de prix relevés le dimanche 22 mars, frais de port pour la france non-compris et sans tenir compte d’éventuels codes de réduction, pour des jeux neufs, sur trois sites français et trois sites UK.

Remarque : à l’heure de ce billet, Resident Evil 5 est un jeu qui vient de sortir, et Killzone 2 est un jeu récent.

Jeux	Micromania	Fnac.com	Amazon.fr	Play.com	sendit.com	shopto.net

Little Big Planet	69.99€	69.90€	56.77€	23.49€	20.99€	21.99€
Soul Calibur IV	69.99€	69.99€	67.19€	23.49€	41.49€	19.99€
Guitar Hero III (avec guitare)	99.99€	69.99€	54.90€	75.00€	64.49€	48.99€
Resident Evil 5	69.99€	59.99€ (*)	52.00€	45.49€	40.49€	42.99€
Killzone 2	69.99€	69.90€	55.00€	45.49€	41.49€	42.99€
(* : vente Flash)

Prix ci-dessus hors frais de port, mais à noter qu’avec les frais de port le site le moins cher reste globalement toujours le même: pour Amazon.fr et Play.com, les frais de port sont compris dans les prix indiqués ; pour les autres boutiques, voir le détail des frais de port ci-dessous, 1€95 pour un jeu commandé par ex. sur sendit.com).

Les conclusions que l’on peut en tirer :

Les jeux vendus en France sont très chers, et toutes les boutiques sont plutôt alignées niveau tarif, avec tout de même de meilleurs prix pour Amazon.fr ;
L’écart entre les prix de vente en France et sur ces sites UK peut être conséquent (parfois -50%) ;
Il n’y a pas un seul site UK qui a systématiquement les prix les moins chers, chaque site va être très compétitif sur quelques jeux mais pas sur tous ;
Il y a ponctuellement de vraies bonnes affaires (exemple ici, Guitar Hero III Legends of Rock avec la guirate WiFi Les Paul pour moins de 50 euros !) ;
il est bien sûr possible de trouver le jeu sur des sites français à d’autres prix, par exemple, le comparateur général Twenga me trouve Little Big Planet (hors occasions et hors eBay) à 53.50€ chez GrosBill (+ 8€90 de frais de port, on est toujours loin des 23€49 tout compris de Play) ;

Où ?

Play.com

http://www.play.com/ : site très sérieux, tarifs frais de port compris (même pour la France) ; les nouveautés ultra récentes sont à 55 euros, un peu moins récentes (MotorStorm Pacific Rift aujourd’hui par ex.) à ~40 euros ou à 35 euros (ex. Dead Space) ; les prix fluctuent beaucoup au fil des semaines (ex. il y a qqs temps Assassin’s Creed à 13 euros (fdp compris toujours), remonté à 30 euros ensuite), donc il faut y passer souvent. A noter un très bon service : en cas de non-réception d’un jeu, il est remboursé sans sourciller et Play.com s’occupe ensuite de règler le litige avec la poste (çà m’est arrivé une fois).

Sendit.com

http://www.sendit.com/ : site - sérieux de mon point de vue en matière de gestion de stocks … mais prix souvent très bas ! (Mirror’s Edge à 25 euros je crois) ; frais de port pour un jeu = 1€95 vers la France ;

Shopto.net

http://www.shopto.net/ : jamais commandé, prix super bas en général (Mirror’s Edge à 21 euros !) ; frais de port d’environ 5 euros pour un jeu pour la france ;

Amazon.co.uk

http://www.amazon.co.uk/ : la version anglaise d’Amazon ; vous pouvez commander avec votre compte Amazon.fr sans pbs (il retrouve même votre CB si vous l’y aviez enregistré) ; j’y ai commandé il y a quelques semaines Little Big Planet à 21 euros + 5 euros de frais de port ! Site super efficace niveau expédition / gestion du stock. A noter que la plupart du temps les produits sont tout de même posté depuis un entrepot en France (donc délai réduit, livraison en collissimo).

Game.co.uk

http://www.game.co.uk/ : pas encore commandé chez eux, à voir.

Encore d’autres site …

D’autres sites anglo-saxons, que je n’ai par contre jamais essayés :

dvd.co.uk ;
gameplay.co.uk (GamePlay semble avoir plutôt bonne presse) ;
hmv.com
(visiblement ils ont parfois des promotions très ponctuelles intéressantes, j’avais vu le pack Guitar Hero World Tour à un prix défiant toute concurrence) ;
gamestation.co.uk ;
thehut.co.uk ;
simplygames.com ;

Comment ?

Sur tous ces sites localisés en angleterre, il suffit de payer par carte bleue type VISA. Il n’y a pas de frais particulier (en dehors des frais de port) ou de difficultés pour payer.

La plupart de ces sites permettent d’ailleurs de règler directement en euros (autrement dit vous êtes avisés du montant final en euro à avec le cours du jour immédiatement lors de l’achat, alors que pour un site qui ne permet que le payement en Livres Sterling, c’est au moment du débit sur votre compte bancaire que la conversion sera faite (à un cours potentiellement différent de celui du jour de la commande)).

A noter qu’il n’y a jamais de frais de douane à payer pour un envoi depuis le Royaume-Uni (les taxes sont appliquées directement par le site lui-même).

Encore moins cher ?

Un moteur de comparaison de plusieurs sites UK : http://www.find-games.co.uk/

Un site recensant les coupons de réduction pour les sites anglais : http://www.myvouchercodes.co.uk/

D’autres pistes.

Il y a bien sûr la piste de l’occasion (vente par particuliers ou par boutiques spécialisées en ligne), par ex. sur PriceMinister ou, bien sûr, sur eBay. On peut tout à fait trouver des jeux neufs (encore emballé sous cellophane) pour pas très cher ainsi.

Il est d’ailleurs parfois amusant de voir que sur eBay les jeux récents vendus à des prix compétitifs … sont justement des jeux UK

Tableau des langues.

Retrouvez dans ce billet séparé la liste des langues présentes sur les jeux PS3 en import UK : clickez-ici.

F.A.Q.

Tous les sites UK proposent-ils l’envoi en France ? Non ! Plusieurs sites (non recensés ici) ne proposent que l’envoi exclusif en Angleterre.

Un jeu acheté au Royaume-Uni et importé en France peut-il taxé lorsqu’il passe la douane ? Non !

Combien de temps pour recevoir par la poste un jeu envoyé depuis le Royaume-Uni ? Variable selon la poste anglaise et française, il faut en général compter entre 5 et 7 jours.

Est-ce qu’il y a des frais bancaires pour payer sur un site UK avec une carte bleue type VISA liée à une banque française ? Ca dépend uniquement de la banque française et de sa politique de payement sur des sites étrangers (à ma connaissance aucun des sites évoqué ici ne permet de payer par Paypal à l’heure où j’écris ces lignes). Ma banque (AXA Banque) me prend une commission minimine.

Conclusion !

Au final, en jonglant avec ces différents sites, vous pouvez donc trouver la plupart des jeux, même récents, à 45€ maximum, pour un jeu en français avec un boîtier et une notice en anglais.

Enfin, toutes ces adresses internet sont bien évidemment valables pour des jeux PC et/ou XBox360 également !

Tableau des langues des jeux PS3 en import

SRG — Sun, 22 Mar 2009 13:11:00 +0100

En complément du billet sur l’achat à moindre coût de jeux Playstation 3, voici le détail pour chaque jeu PS3 en version UK des langues présentes sur le bluray.

Titre du jeu	(1)	(2)	(3)	(4)	(5)

0
007 Quantum Of Solace
5
50 Cent : Blood on the Sand	?	?
A
A la Croisée des Mondes : La Boussole d’Or	?	?
Alone In The Dark “Inferno”
Armored Core 4	?	?
Armored Core for Answer	?	?
Army Of Two
Assassin’s Creed
Astro Tripper	-	-
B
Baja : Edge of Control	?	?
Battle Fantasia
Battlefield : Bad Company
Beijing 2008 : Le Jeu Vidéo Officiel des Jeux Olympiques	?	?
Bionic Commando Rearmed	?	?
Bioshock
Blacksite	?	?
Bladestorm : La Guerre de Cent Ans	?	?
Blazing Angels 2 : Secret Missions of WW II	?	?
Blazing Angels : Squadrons of WWII	?	?
Brothers in Arms : Hell’s Highway
Burnout Paradise : The Ultimate Box
Burnout Paradise
Buzz ! Junior “Singes en délire”	-	-
Buzz ! Quizz TV
C
Call Of Duty 3
Call Of Duty 4 “Modern Warfare”
Call Of Duty 5 “World At War”
Calling all Cars!	?	?
Cars : La Coupe Internationale de Martin	?	?
Clive Barker’s Jericho	?	?
Colin McRae : DIRT	?	?
Conan	?	?
Condemned 2 : Bloodshot	?	?
Conflict : Denied Ops	?	?
Crash Commando	-	-
Cuboid	-	-
D
Dark Mist	?	?
Dark Sector
Dead Space
Def Jam Icon	?	?
Destroy All Humans ! En Route Vers Paname !	?	?
Devil May Cry 4
Disgaea 3 “Absence Of Justice”
Disney Sing it	?	?
Dragon Ball Z “Burst Limit”
Dynasty Warriors 6	?	?
Dynasty Warriors : Gundam	?	?
E
Eat Lead
Echochrome	-	-
Elder Scrolls IV “Les Portes d’Oblivion”
Enchanted Arms	?	?
Enemy Territory : Quake Wars	?	?
Eternal Sonata
Everybody Golf “World Tour”
Eye of Judgement
F
F.E.A.R. 2
F.E.A.R.
FIFA 08
FIFA 09
FIFA Street 3	?	?
FLOw	-	-
Facebreaker
Fallout 3
Far Cry 2
Ferrari Challenge “Trofeo Pirelli”
Fight Night : Round 3
Flower	-	-
Folklore	?	?
Formula One : Championship Edition	?	?
Fracture	?	?
Full Auto 2 : Battlelines	?	?
G
G1 Jockey 4 2008	?	?
GTI Club+	-	-
Genji : Days of the Blade	?	?
Geon	-	-
Ghost Recon Advanced Warfighter 2
Golden Axe : Beast Rider	?	?
Gran Turismo 5 Prologue
Grand Theft Auto 4
Guitar Hero 3 “Legends Of Rock”
Guitar Hero : Aerosmith	?	?
Guitar Hero : World Tour	?	?
H
Half-Life 2 : Episode One	?	?
Half-Life 2 : Episode Two	?	?
Half-Life 2	?	?
Harry Potter et l’Ordre du Phénix	?	?
Haze
Heavenly Sword
Hellboy : The Science of Evil	?	?
History Channel : Battle For The Pacific	?	?
I
Iron Man	?	?
InFAMOUS
J
Juiced 2 : Hot Import Nights	?	?
K
Kane And Lynch “Dead Man”
Killzone 2
Kung Fu Panda	?	?
L
La Legende de Beowulf : Le Jeu	?	?
Lair
Le Monde de Narnia : Chapitre 2 : Le Prince Caspian	?	?
Le Parrain : Edition du Don	?	?
Le Seigneur des Anneaux : L’Age des Conquêtes	?	?
Legendary	?	?
Lego Batman
Lego Indiana Jones
Lego Star Wars “Complete Saga”
Les 4 Fantastiques et le Surfer d’Argent	?	?
Les Rois de la Glisse	?	?
Les Simpson : Le Jeu	?	?
Little Big Planet
LocoRoco Cocoreccho!	?	?
Lost “The Game”
Lost Planet “Extreme Condition”
Lumines Supernova	-	-
M
MX vs ATV : Extreme Limite	?	?
Madagascar 2	?	?
Madden NFL 08	?	?
Madden NFL 09
Magic Ball	-	-
Mahjong Tales : Ancient Wisdom	-	-
Marvel Ultimate Alliance	?	?
Medal of Honor : Airborne	?	?
Mega Man 9 : The Ambition’s Revival	-	-
Mercenaries 2 : L’Enfer des Favelas	?	?
Metal Gear Solid 4 : Guns of the Patriots	?	?
Midnight club “Los Angeles”
Millennium Championship Paintball 2009	?	?
Mirror’s Edge
Mobile Suit Gundam : Target in Sight	?	?
Monopoly : Editions Classique et Monde	?	?
Mortal Kombat Vs. DC Universe
MotoGP 08	?	?
MotorStorm “Complete”	?	?
Motorstorm “Pacific Rift”
Motorstorm
N
NBA 08	?	?
NBA 2K7	?	?
NBA 2K8
NBA 2K9
NBA Live 08	?	?
NBA Live 09	?	?
NBA Street Homecourt	?	?
NHL 08	?	?
NHL 09	?	?
NHL 2K7	?	?
NHL 2K8	?	?
NHL 2K9	?	?
Naruto “Ultimate Ninja Storm”
Need For Speed “Undercover”
Need for Speed “Carbon”	?	?
Need for Speed “ProStreet”	?	?
Ninja Gaïden Sigma
Noby Noby Boy	?	?
Novastrike	-	-
O
Overlord : Raising Hell
P
PAIN	?	?
PES 2008	?	?
PES 2009
Pirates des Caraïbes : Jusqu’au Bout du Monde	?	?
PixelJunk Eden	-	-
PixelJunk Monsters	?	?
Portal	?	?
Prince of Persia : Epilogue	?	?
Prince of Persia
Pure
R
Race Driver : GRID
Rainbow Six Vegas 2
Rainbow Six Vegas	?	?
Ratatouille	?	?
Ratchet And Clank “Opération Destruction”
Ratchet And Clank “Quest for Booty”	-	-
Resident Evil 5	?	?
Resistance “Fall Of Man”
Resistance 2
Ridge Racer 7	?	?
Rise of the Argonauts	?	?
Rock Band
S
SBK 08 : Superbike World Championship	?	?
SCORE International Baja 1000 World Championship Off Road Racing	?	?
SOCOM Confrontation	?	?
Saint Row 2
Savage Moon	-	-
Sega Mega Drive Ultimate Collection	?	?
Sega Rally	?	?
Sega Superstars Tennis	?	?
Sega Ultimate Collection
Shaun White Snowboarding
ShellShock 2 : Blood Trails	?	?
Sid Meier’s Civilization Revolution
Silent Hill : Homecoming	?	?
Singstar ABBA	?	?
Singstar Hits	?	?
Singstar	?	?
Siren : Blood Curse
Skate 2
Skate	?	?
Soldier Of Fortune : Payback	?	?
Sonic Unleashed
Sonic the Hedgehog	?	?
SoulCalibur 4
SpiderMan 3	?	?
Spiderman “Web Of Shadows”
Splinter Cell Double Agent	?	?
Spyro “Dawn Of The Dragon”
Star wars “The Force Unleashed”
Stranglehold
Street Fighter 4
Stuntman Ignition
Super Stardust	-	-
Supersonic Acrobatic Rocket-Powered Battle-Cars	-	-
Söldner-X : Himmelsstürmer	-	-
T
TNA iMPACT!	?	?
Team Fortress 2	?	?
Tekken 5 : Dark Resurrection Online	?	?
The Bourne conspiracy
The Club
The Darkness	?	?
The Incredible Hulk	?	?
The Last Guy	-	-
The Orange Box	?	?
Tiger Woods PGA Tour 07	?	?
Tiger Woods PGA Tour 08	?	?
Tiger Woods PGA Tour 09	?	?
Time Crisis 4	?	?
TimeShift	?	?
Tom Clancy’s EndWar
Tom Clancy’s HAWX
Tomb Raider Underworld
Tony Hawk’s Project 8	?	?
Tony Hawk’s Proving Ground	?	?
Top Spin 3
Toy Home	?	?
Transformers : Le Jeu	?	?
Trivial Pursuit	?	?
Turning Point : Fall Of Liberty	?	?
Turok	?	?
U
UEFA Euro 2008	?	?
Uncharted Drake’s Fortune
Unreal Tournament III	?	?
Untold Legends : Le Royaume des Tenebres	?	?
V
Valkyria Chronicles
Vampire Rain : Altered Species	?	?
Viking : Battle for Asgard	?	?
Virtua Fighter 5	?	?
Virtua Tennis 3	?	?
Volt : Star Malgré Lui	?	?
W
WALL-E	?	?
WWE Smackdown Vs. Raw 2008	?	?
WWE Smackdown Vs. Raw 2009
WarHawk	?	?
Watchmen : The End is Nigh	-	-
WipEout HD	-	-
World Series of Poker 2008 : Battle for the Bracelets	?	?
World Snooker Championship 2007	?	?
X
X-Blades

(1) : Langue anglaise (2) : Langue française (3) : Jeu Playstation Store (4) : Test du jeu sur JeuVideo.com (5) : Acheter le jeu en ligne

Tableau compilé à partir de différentes sources (notamment Metagames.eu et Play3-live.com). Egalement sur le forum de ce dernier, des tableaux similaires pour les jeux en import US ou JAP : Tableau des langues des jeux PS3 en import sur Metagames (bien que les achats en Angleterre semblent clairement les plus intéressants).