Cette dépêche traite de l’exploration de données sur des données issues de LinuxFr.org.

Ayant découvert récemment scikit-learn, une bibliothèque Python d’apprentissage statistique (machine learning). Je voulais partager ici un début d’analyse sur des contenus issus de LinuxFr.org.

Avertissement : je ne suis pas programmeur, ni statisticien. Je ne maîtrise pas encore tous les arcanes de scikit-learn et de nombreux éléments théoriques m’échappent encore. Je pense néanmoins que les éléments présentés ici pourront en intéresser plus d’un(e).

Tous les scripts sont codés en Python et l’analyse à proprement parler a été réalisée à l’aide d’un notebook Jupyter. Un dépôt contenant les données et les scripts est disponible sur GitLab.

Ce 28 juin 2022, le site LinuxFr.org fête ses vingt‑quatre ans. Depuis 1998, une équipe de bénévoles code et gère ce site, permettant à ses visiteurs de publier contenus et commentaires sur le logiciel libre, sur les nombreux autres domaines du Libre comme la culture, la cartographie, le matériel ou les manuels scolaires ; mais aussi bien d’autres thématiques comme la robotique, la cuisine, la typographie, TapTempo (du Web ou non).

Ce 28 juin 2023, le site LinuxFr.org fête ses vingt‑cinq ans, un quart de siècle. Depuis 1998, une équipe de bénévoles code et gère ce site, permettant à son lectorat de publier contenus et commentaires sur le logiciel libre, sur les nombreux autres domaines du Libre comme la culture, la cartographie, le matériel ou les manuels scolaires ; mais aussi bien d’autres thématiques comme la robotique, la cuisine, la typographie, TapTempo, la vie et la mort, ou la sérendipité.

LinuxFr.org fête aujourd'hui 28 juin 2016 ses 18 ans : bon anniversaire LinuxFr.org ! Merci à tous ceux qui ont contribué et contribuent au succès du site : administration système, animation de l'espace de rédaction, développement, modération, dons, écriture de contenus, etc. Le meilleur moyen de nous dire merci est de proposer une dépêche ou d'en rédiger collaborativement dans l'espace de rédaction pour faire vivre le site.

Alors, ça fait quoi d'avoir 18 ans ?

Côté chiffres, le site comporte plus de 96 500 contenus publiés (environ 36 000 journaux, 34 000 entrées de forum, 24 000 dépêches, 360 sondages, 70 pages de wiki), et plus de 1,65 million de commentaires. Mais aussi plus de 200 entrées ouvertes dans le système de suivi des suggestions et des bogues, ce qui représente un gros boulot à réaliser. Bref, nous sommes preneurs de toutes les bonnes volontés pour contribuer sur les nouveaux contenus et améliorer le code du site.

LinuxFr.org fête aujourd'hui 28 juin ses 17 ans : bon anniversaire LinuxFr.org ! Merci à tous ceux qui ont contribué et contribuent au succès du site : administration système, animation de l'espace de rédaction, développement, modération, dons, écriture de contenus, etc. Le meilleur moyen de nous dire merci est de proposer une dépêche ou d'en rédiger collaborativement dans l'espace de rédaction pour faire vivre le site.

Et en 17 ans, ça donne quoi ?

Côté chiffres, le site comporte plus de 93 500 contenus publiés (environ 35 000 journaux, 32 000 entrées de forum, 23 000 dépêches, 340 sondages, 70 pages de wiki), et plus de 1,59 million de commentaires.

Le site LinuxFr.org existe depuis juin 1998. Il est passé par différentes versions, fonctionnant avec différents moteurs : DaCode, Templeet et maintenant Ruby on Rails. Le site a donc utilisé le tout intégré DaCode, puis des modèles de page en Templeet développés par l'équipe du site, puis une version intégrée en Ruby.

Templeet avait été lancé principalement pour LinuxFr.org, il a été et est utilisé par d'autres sites comme moteur de « templates ». Il continuera sa vie de son côté, une version 4 étant attendue d'ici quelques mois.

La nouvelle version propose une charte graphique refaite pour l'occasion. Un concours a été organisé dans ce but et la feuille de style (CSS) gagnante, RonRonnement, est devenue la nouvelle CSS par défaut. Si celle-ci ne vous plaît pas, vous pouvez toujours profiter des autres CSS (l'ancienne feuille de style est là sous le nom kaiska-new).

Il est difficile de lister tous les changements liés à cette migration, mais voici les plus notables :

• Les contenus et commentaires utilisent maintenant une syntaxe wiki, du Markdown en l'occurrence ;
• L'espace de rédaction collaboratif a été refait (d'ailleurs, cette dépêche a été écrite simultanément par les 3 admins du site : lukhas, oumph et NoNo) ;
• Le site intègre maintenant un wiki ;
• Chaque utilisateur a maintenant un avatar : par défaut, il vient de gravatar mais il peut être changé dans les préférences ;
• Les utilisateurs authentifiés peuvent étiqueter les contenus ;
• Le script d'envoi de la lettre quotidienne d'annonce des dépêches est à refaire.

Mais certaines fonctionnalités n'ont pas encore été portées : la messagerie interne, les statistiques et le choix des contenus sur la première page.

Après les remous de la migration vers le nouveau site, l'équipe du site est à votre écoute pour recenser tous les problèmes que vous pourriez rencontrer.

LinuxFr.org fête aujourd’hui 28 juin 2018 ses vingt ans : bon anniversaire LinuxFr.org ! Vingt ans que le site vit par et pour les communautés du Libre, géré par des bénévoles et soutenu par ses visiteurs contributeurs. Merci à tous ceux qui ont contribué et contribuent au succès du site : administration système, animation de l’espace de rédaction, développement, dons, écriture de contenus, modération, réalisation de logos ou de feuilles de style, etc. Le meilleur moyen de nous dire merci est de proposer une dépêche ou d’en rédiger collaborativement dans l’espace de rédaction pour faire vivre le site.

Mise à jour : une série d’entretiens avec nos visiteurs contributeurs a été publiée : 1, 2, 3, 4, 5 et 6.

Alors, ça fait quoi d’avoir 20 ans ?

Côté chiffres, le site comporte plus de 101 000 contenus publiés (environ 37 300 journaux, 36 300 entrées de forum, 25 100 dépêches, 400 sondages, 170 liens (nouveauté 2018), 110 pages de wiki), et plus de 1,72 million de commentaires. Mais aussi plus de 140 entrées ouvertes dans le système de suivi des suggestions et des bogues (et presque un millier déjà traités), ce qui représente un gros boulot à réaliser (sans parler du travail énorme en cours sur le design). Bref, nous sommes preneurs de toutes les bonnes volontés pour contribuer sur les nouveaux contenus et améliorer le code du site.

La nouvelle version de LinuxFr.org est en ligne depuis quelques jours. Vous nous remontez régulièrement des bugs et des propositions d'améliorations dans le suivi. Je vous encourage à continuer et à commenter / voter sur les entrées qui vous intéressent.

Voici quelques entrées sur lesquelles j'aimerais particulièrement avoir vos retours :

• Pour ou contre le respect de la syntaxe Markdown pour les retours à la ligne ?
• Quels services devrait-on prendre en charge pour les avatars ? Certains d'entre vous utilisent-ils pavatar ?
• Que pensez-vous des polices utilisées ?

Je pense que vous êtes également intéressés par l'architecture logicielle de cette nouvelle version. Vous pourrez donc trouver quelques explications à son sujet en seconde partie et n'hésitez pas à poser des questions dans les commentaires.

La migration du site LinuxFr.org vers le nouveau serveur est terminée (aux mises à jour DNS près). L'ancien serveur trogood (mis en place en 2003, et non zobe mis en place en 2007 comme précédemment annoncé) consommait trop et la fondation Free nous a proposé de le remplacer par un nouveau serveur récent moins énergivore. Le nouveau serveur est en place, reste à le baptiser (après zobe, trogood, prout, blob).

Merci à la Fondation Free pour le nouveau serveur et à son NOC pour sa réactivité. Et merci à Lucas qui a réalisé l'essentiel de la migration.

Pour l'historique des anciens serveurs, voir la présentation RMLL 2008 sur les 10 premières années du site.

Les caractéristiques du nouveau serveur :

(caractéristiques rééditées le 18/07 pour correction)

• Dell PowerEdge R210 (comme les Dédibox, en version 1)
• rackable 1U
• 16 GiB de mémoire vive (DIMM 1333 MHz, 4*4)
• 2 TiB de disque dur (ext4, RAID, Seagate Constellation ES 2To SATA II 32Mo modèle ST32000644NS)
• 45 GiB d'espace d'échange
• Intel Xeon L3426 1,87 GHz (4 cores * 2 via hyperthreading)
• 2 cartes réseau Broadcom NetXtreme II BCM5716 Gigabit ethernet
• module d'administration à distance DRAC interne
• jantes alu et néons bleu

L'ancien serveur avait un hôte sous Debian en 32 bits et des vservers sous Debian aussi (vserver étant peu à peu déprécié). Le nouveau serveur a un hôte sous Ubuntu Server (pour la prise en charge de LXC) en 64 bits et des conteneurs sous Debian.

N.b.: le serveur a changé d'adresse IPv4, donc si vous avez mis l'IP en dur dans un /etc/hosts, vous devriez avoir des problèmes à un moment. Et par ailleurs, l'IPv6 pourrait arriver à terme.

Il y a quelque temps, nous vous avions sollicité afin de comprendre quelles étaient les forces et les faiblesses de LinuxFr.org. Nous avons étudié chacune de vos 235 participations, qui étaient à l’image de ce que l’on retrouve d’ordinaire sur le site : critiques, chaleureuses, joviales ou teintées de nostalgie. Nous allons tâcher de synthétiser tout ça, vous allez voir, on a du pain sur la planche !

Quand je ne suis pas occupé à faire des poissons d'avril, il m'arrive de coder de nouvelles fonctionnalités pour LinuxFr.org. Voici quelques-unes des dernières nouveautés :

• Les utilisateurs anonymes peuvent maintenant remonter des bugs dans le suivi, ce qui peut être pratique pour les personnes qui rencontrent justement des problèmes pour se connecter ;
• Une nouvelle CSS a été ajoutée à la liste des CSS alternatives : cascade-alternative ;
• Un correcteur orthographique détecte maintenant les erreurs d'orthographe et les souligne en rouge lors de la prévisualisation des contenus et commentaires ;
• La toolbar permet maintenant de naviguer entre les contenus lus avec de nouveaux commentaires avec les touches [ et ], ou h et l ;
• La gestion des tags a été revue et il est maintenant possible de supprimer un de vos tags en cliquant sur l'icône  à sa gauche ou voter pour un tag en l'ajoutant aux vôtres par l'icône  qui permettra ultérieurement de juger de sa popularité ;
• L'anti-spam sur les dépêches a été renforcé suite à une vague de spams ;
• Des statistiques sur le suivi sont maintenant disponibles et celles pour les autres types de contenus devraient suivre ;
• Les dépêches écrites dans l'espace de rédaction sont automatiquement placées sous licence CC by-sa ;
• Les GIF animés sont désormais bloqués pour les avatars ;
• Et bien sûr de nombreuses corrections de bugs :p

J'espère que vous appréciez ces évolutions et que vous allez continuer à voter et/ou commenter les entrées du suivi qui vous intéressent, votre ressenti ou utilisation particulière de LinuxFr - lorsque précisé dans les commentaires - permettant d'orienter les développements.