Neolyse

Utiliser ccache pour compiler Qt plus vite

2011-06-20T00:00:00Z

Pour ceux qui recompilent souvent Qt, et qui détestent passer 3 heures à le faire à chaque fois qu'ils font une modification assez lourde pour justifier une recompilation complète, voici une petite astuce: utilisez ccache.

Je l'utilise dans la plupart de mes projets, car il est extrémement simple à utiliser. Il suffit de l'installer (sous n'importe quelle distribution Linux, Windows ne semble pas bien supporté), et d'ajouter devant l'invocation du compilateur le petit keyword ccache. Ccache est assez intelligent pour détecter qu'il cross-compile, donc cette astuce marche très bien même pour des compilateurs d'archis exotiques.

Pour Qt, c'est plus compliqué: en effet, le processus de compilation se sert de ce qu'on appelle les mkspecs pour déterminer quel compilateur utiliser. Ça lui permet de compiler pour n'importe-quelle architecture très simplement (changer d'archi = spécifier un autre mkspec). Du coup, pour utiliser ccache lors de la compilation de Qt, il faut aller modifier le fichier qmake.conf qui se trouve dans le dossier mkspec associé à votre architecture.

Ne vous inquiétez pas, c'est plus simple qu'il ne le paraît. Tout ce que vous avez à faire, c'est:
1- de lancer le script ./configure avec vos options habituelles, en ajoutant l'option -no-pch, qui désactive l'utilisation des headers précompilés (ccache ne les prend pas en charge)
2- d'ajouter ccache devant les noms des compilateurs, dans le fichier mkspecs/default/qmake.conf, de cette façon:

 QMAKE_CC                = ccache gcc # ajouter ccache devant le nom du compilo
 QMAKE_CXX               = ccache g++

Le répertoire mkspecs/default est un lien symbolique qui se trouve à la racine des sources de Qt, et qui est mis à jour lors du ./configure pour pointer vers l'architecture correcte. Pas besoin de le faire pour les étapes de link et de génération de librairies, dans ce cas ccache ne sert à rien.

Vous allez me dire que de désactiver les headers précompilés fait perdre en vitesse de compilation, ce qui est le cas la première fois; mais lors d'une recompilation, ccache va prendre en charge les 99% de fichiers non changés en piochant dans son cache, ce qui coûte bien moins cher.

Pour petit exemple, la recompilation complète de Qt en mode debug:

$ time gmake -j3
real    5m19.755s
user    7m13.655s
sys     1m54.516s

Les statistiques de ccache, qu'on obtient en tapant ccache -s:

cache directory                     /home/user/.ccache
cache hit                           3180
cache miss                             0
called for link                        4
files in cache                     19581
cache size                           1.8 Gbytes
max cache size                       3.0 Gbytes

J'avais bien sûr compilé Qt juste avant, la ligne "cache hit" indique que la compilation a utilisé le cache 3180 fois, et "cache miss" montre qu'aucun fichier n'a été réellement recompilé. Si vous changez un seul fichier dans Qt, la recompilation réelle ne se passera que pour ce fichier, le reste sortira du cache.

Constructeur automatique

2011-05-22T00:00:00Z

Je viens de tomber sur un truc assez sympathique en C++, et que j'ai mis un peu de temps à comprendre: l'utilisation automatique du constructeur.

Conversion de type/classe implicite en C++

2011-05-22T00:00:00Z

Je viens de tomber sur un truc assez sympathique. Je ne sais pas si c'est documenté quelque part, mais il existe probablement une astuce sur l'insertion d'objets dans une liste C++ (le fameux std::list).

Merger deux PDF en alternant les pages

2011-05-09T00:00:00Z

J'ai récemment commencé à m'intéresser à ce qu'il faut pour numériser mes vieux cours. Ils prennent une place qui me semble bien trop grande par rapport à ce que j'en fait (c'est à dire... rien), et puis je me dis que c'est peut-être un coup d'essai pour plus tard faire de même avec ma comptabilité et les factures.

On dispose de tout un tas d'imprimantes au boulot, une d'elle disposant d'un scanner avec un tiroir, pratique pour les photocopies. Du coup ce midi j'ai commencé à scanner un lot de cours sur les réseaux de neurones qui date de 2007. La photocopieuse sort les numérisations dans un format PDF, mais le problème c'est qu'elle ne scanne pas en recto-verso; je me suis donc retrouvé avec deux gros PDFs, l'un contenant les pages recto et l'autre les pages verso.

Je me suis donc tourné vers pdftk, qui permet de faire tout un tas d'opérations sur les PDF.

Il ne dispose pas nativement d'un mode de merge "mixé", du coup il faut le feinter.

Donc en gros il faut:

Extraire de chaque PDF toutes les pages (à l'aide de pdftk), en les nommant correctement; j'ai choisi "Recto_XXX.pdf" et "Verso_XXX.pdf".
La commande est assez simple: pdftk fichier_recto.pdf output "Recto_%04d.pdf", pareil pour les versos.
Préparer la ligne de commande à passer à pdftk en usant, pour ma part, d'un script en python3.

J'ai encore une fois été bluffé par la facilité avec laquelle on peut obtenir un truc extrêmement potable avec Python.

Le script en question:

#!/bin/env python3
import os
import blob

recto = sorted(glog.glob("Recto_*.pdf"))
verso = sorted(glog.glob("Verso_*.pdf"))

command = "pdftk "

for i in range( len(recto) ):
    command.append(recto[i] + " ")
    command.append(verso[i] + " ")

command += " cat output Merged.pdf"
print( command )
os.system( command )

PHP et unlink(): plus de sécurité

2011-03-27T00:00:00Z

J'ai récemment joué avec PHP pour réaliser un petit script d'upload et de partage de fichiers pour ma copine.

À un moment donné, j'ai dû fournir la possibilité de supprimer des fichiers, et c'est alors que j'ai touché plus en profondeur à la fonction unlink() de PHP.

L'un des problèmes, avec cette fonction, c'est qu'on lui passe un nom de fichier à supprimer, et ça pose de gros problèmes de sécurité. Si jamais quelqu'un a connaissance du fichier PHP qui permet de supprimer quelque chose, il peut envoyer n'importe quel nom à supprimer et vider mon/votre site très facilement (imaginez un unlink("../index.html") dans un répertoire quelconque et il vous supprime votre page d'accueil).

Bref, l'astuce que j'ai utilisée: prendre le basename du fichier passé en paramètre pour être sûr que la suppression se réalise dans le dossier voulu.

Au final, ça ressemble à ça:

if (isset($_GET['unlink'])) {
   $fullPath = basename($_GET['unlink']);
   if (is_file($fullPath))
   {
       $success = unlink($fullPath);
   }
   // refresh page
   header( 'Location: .' ) ;
   exit(0);
   break;
}

Bon après, il faut s'assurer que tous les fichiers que vous avez dans ce répertoire sont "supprimable"; si vous laissez traîner un fichier que vous souhaitez garder, faites un filtre avant d'executer unlink().

Mon nouveau jouet

2011-03-20T00:00:00Z

Oh bordel, oh bordel, voilà ce que j'ai trouvé dans le grenier des beaux parents:

Rien que d'y penser, ça fait rêver. Les jeux fournis avec sont les suivants:
- Super Mario World, avec Yoshi, celui que j'avais préféré
- Super Mario All Stars, qui regroupe les vieux Marios en version remasterisée
- et Eric Cantona: Football Challenge, que je me tâte à tester, ça a l'air bien pourri...

En tout cas, sur la nouvelle télé, ça arrache!

Évolution du travail sur The Island

2011-02-06T00:00:00Z

Je pense reprendre un peu le travail sur la traduction de The Island, que j'avais déjà réécrit en LaTeX, mais qui s'exportait assez mal.
La sortie de LyX 2 en béta 3 m'a motivé à me lancer dans l'adaptation de la nouvelle à l'outil.

Cela permettra plusieurs choses:
- l'export simple en format eBook
- la modification simple de la traduction
- probablement une maintenance plus simple

À suivre, donc...

Amazon et la galère de la carte Musique

2010-12-18T00:00:00Z

La carte musique du gouvernement. Elle aura fait parler d'elle, en bien et en mal (surtout en mal...).

J'ai pris cette carte chez Amazon, n'étant pas fan d'iTunes, et j'ai peut être fait une erreur: se servir de la carte Musique 12-25 (ça sonne SNCF) est extrémement compliqué. Pourtant l'idée est simple et intéressante: pour contrer le piratage, le gouvernement propose de participer dans la limite de 25 euros aux achats de musique électronique des jeunes de 12 à 25 ans. Mais les difficultés à utiliser cette carte m'ont vraiment découragé.

Pour dire, la méthode d'enregistrement sur Amazon passe par l'utilisation détournée de leur champ "code de réduction", une double commande de cette carte (sur le site du gouvernement, puis sur Amazon, mais on ne paye que sur Amazon), puis un clic sur un lien de confirmation dans un mail pour obtenir un code, et enfin la validation de ce code sur Amazon.

Tout ceci pour piteusement voir ma CB débitée lors du premier achat de MP3 sur la plateforme Amazon. La faute à leur système de panier absolument désastreux, où l'on passe à la caisse en un clic, où le numéro de CB est enregistré et où tout est fait pour vous faire acheter le plus vite possible. 32€ d'albums + les 25€ euros de la carte le mois dernier.

Je viens de passer 45 minutes au téléphone avec l'assistance Amazon, qui ne peut rien faire. On m'a "transféré" vers une "cellule" qui est censé me rappeler. Un peu tard, j'ai tilté qu'ils n'ont pas mon numéro de téléphone: je suis bon pour rapeller.

Quelqu'un a déjà réussi à faire fonctionner cette carte musique?

Les Widgets Twitter et Facebook ralentissent le web

2010-12-05T00:00:00Z

Un exemple parmi tant d’autres, le chargement de la page clubic:

18 secondes.

Les requêtes sur l’API de twitter pour afficher leur widget prennent… 12 secondes!

C’est n’importe quoi, en utilisant l’extension « Widget Block » et « Facebook Disconnect », la page se charge en.. 7 secondes:

The Island - Finished

2010-10-24T00:00:00Z

Et voilà, terminé.

Vous la trouverez ici: Traduction de The Island.

Traduction de la nouvelle « The Island »

2010-10-13T00:00:00Z

J'ai traduit la nouvelle « The Island », de Peter Watts, en Français. La relecture me prendra encore un certain moment, je pense que je publierais la chose ici quand je serais certain que je n'ai pas fait de trop grosses choses.

Je vais déjà raconter un peu la méthode que j'ai employée, si ça peut intéresser quelqun.

L'auteur publie depuis longtemps des romans en licence Creative Commons, et cette nouvelle m'a beaucoup plu. Comme je n'imaginais pas qu'elle sortirais en Français avant un bon moment, je m'y suis pris de mon propre chef.

Traduire un texte aussi long, avec un vocabulaire aussi technique, a requis une petite organisation.

J'ai d'abord été chercher s'il existait des logiciels qui soient utiles pour ce boulot, et on trouve dans le paysage Mac quelques petits logiciels orientés vers les « auteurs ». Mais Scrivener ou StoryMill sont trop précisément faits pour l'écriture proprement dite, pas pour une traduction. La taille du manuscrit étant faible, je me suis finalement dit que je pourrais le faire en mode « texte simple ».

Tout d'abord, je me suis appuyé sur le texte que Peter diffuse sur son site internet, au format texte. Il existe une version PDF, mais une version texte est largement préférable. En effet, le texte peut alors être découpé en plusieurs sous-ensembles (que j'ai appelés ici chapitres), ce qui permet de répartir l'effort. Comme la nouvelle en elle-même présentait des « chapitres », j'ai procédé au découpage ainsi:

Cela permet de mesurer assez facilement l'effort qui reste à faire.

Dans le même temps, j'ai mis en place un dépôt Git pour garder trace des évolutions, voici l'état du dépôt à la fin du projet:

Enfin, pour le travail traduction en lui-même, j'ai utilisé un simple éditeur de texte gratuit, en mettant l'un à côté de l'autre les textes, ce qui permet de travailler relativement confortablement:

J'ai aussi maintenu un petit fichier de « notes », où j'ai gardé des références sur les traductions ardues que j'ai dû un peu improviser.

Il m'aura fallu donc un petit mois pour arriver à une traduction que je considère comme « béta ». Il reste encore du boulot pour repasser sur le texte et reformuler certaines phrases qui « colleraient » trop à l'expression anglaise.

Quelques statistiques intéressantes:

On voit que j'ai utilisé en moyenne 12% de mots en plus pour le Français.

A bientôt!

Chaleur

2010-07-11T00:00:00Z

Il faisait bien chaud à la campagne, imaginez à Grenoble...