Evaluer la valeur d’un forum Sommaire
13.3 Hypothèses pour notre expérimentation
L’objectif de l’expérimentation que nous allons mener est de valider notre hypothèseH2(9.5.3 page 119) : Nous pouvons déterminer des mesures numériques permettant de mesurer la valeur d’une communauté.
Les lois présentées se fondent sur un rapport entre nombre de membre et nombre d’échanges pour déterminer l’utilité d’un réseau. De telles lois sont acceptées pour le monde des réseaux de communication et peinent à sortir du monde de l’ingénierie. Les auteurs cherchent à établir des potentiels de valeur et ne proposent pas de mise en application des lois exprimées.
Nous nous proposons de procéder à une expérimentation mettant en œvre une communauté électronique composées d’humains échangeant des informations. Notre objectif est de vérifier l’application des lois présentées supra afin de voir dans quelle mesure cela permet de déterminer d’exprimer la valeur de la communauté. Nous posons les hypothèses suivantes :
- Peut-on évaluer la valeur d’une communauté en se fondant sur une mesure numérique ? - Y a-t-il une corrélation entre le nombre de membres d’une communauté et le nombre de messages échangés par cette communauté ? - Quelle modélisation peut-on en faire ?
13.4 Expérimentation
13.4.1 Les activités d’une communauté
Plusieurs outils sont disponibles sur internet pour permettre la formation d’une communauté : historiquement l’outil communautaire de l’internet ce sont lesNNTPnews, mais ce service anté-rieur à l’apparition du web est aujourd’hui assez peu utilisé. De plus, son utilisation nécéssite un client spécifique et sa rusticité le réserve à des spécialistes. Pour les mêmes raisons, on a écarté les listes de diffusions, un outil qui s’appuie sur le mail. De plus la gestion d’une liste de diffusion réclame un fort niveau de maîtrise des outils, tant de la part de l’administrateur que de celle des utilisateurs. On aurait pu choisir de mettre en place un blog (technologie que nous avons étudiés
en détails dans [Druel et Samier, 2005]) mais ils ne permettent pas un fort niveau d’interactivité entre les participants.
Pour mener notre expérimentation nous avons choisi de mettre en place un forum sur le web. Cet outil présente de nombreux avantages : facile à mettre en œuvre, accessible par tout un chacun et d’une richesse fonctionnelle permettant l’archivage de données, la recherches de messages, la gestion des membres et un contrôle des contenus (ce que le jargon du domaine appelle la modération.) ❳ ❳ ❳ ❳ ❳ ❳ ❳ ❳ ❳❳ Outil Activité
Facilité d’utilisation Archivage Recherche Gestion Modération
News x x x xx xx
Liste de diffusion xx x x xx xxx
Blog xxx xxx xxx x x
Forum xxx xxx xxx xx xxx
Wiki x xxx xx x xx
TAB. 13.1 – Comparaison de différents outils permettant la gestion d’une communauté
13.4.2 objectifs
L’objectif de cette expérimentation est de savoir si l’on peut procéder à des mesures quantita-tives de l’activité d’une communauté électronique. Nous avons choisi de mesurer l’activité d’un forum, en cherchant à mettre en rapport le nombre de membres d’un forum et le nombre de mes-sages échanges par ces membres sur ce forum. À la lumière des méthodes ci-dessus, nous allons chercher à appliquer le principe d’une mesure quantitative non pas à un réseau mais à une com-munauté électronique. Dans la présente expérimentation, nous chercherons à démonter qu’on peut procéder à une mesure quantitative permettant d’évaluer la valeur d’une communauté.
13.4.3 Protocole mis en œuvre
Ce qu’il s’agit de vérifier c’est donc comment le savoir s’échange dans une communauté. Afin de ne pas biaiser l’excercice, on a volontairement choisi un thème très éloigné des NTIC : la cuisine. Nous nous sommes donc intéressés au forum de discussion du site « Chef Simon »4. Ce forum met en œuvre un moteur de forum open source très courant sur internet :PHPBB5.
Lors du lancement de l’expérimentation, le site avait 240 membres et comptait 4202 mes-sages. Pour devenir membre, il faut ouvrir un compte. L’ouverture de compte demande une adresse email valide mais ne procède à aucune vérification d’identité. Certains membres se pré-sentent et indiquent leur âge, leur sexe et parfois une partie de leurs activités.
Sur le forum Chef Simon, on trouve des hommes et des femmes, des jeunes (le plus jeune membre déclaré a 16 ans) et des vieux (la plus vieille a 67 ans). On trouve des professionnels des métiers de bouche (cuisiniers, maîtres d’hotels6, professionnels de la restauration collective
4http://www.chefsimon.com. De plus, étant administrateur du forum, nous avons pu avoir le plein contrôle des fonctionnalités techniques de l’outil.
5Voirhttp://www.phpbb.com. Le logiciel est Open Source et placé sous licenceGPL1.0.
et des cuisiniers amateurs (constituant la majorité des membres), des urbains et des provinciaux. Le site étant francophone, on trouve aussi des membres résident soit dans les DOM-TOMsoit à l’étranger (Argentine, Australie). Il s’agit de français expatriés ou de francophones amateurs de cuisine. Afin de ne pas fausser les résultats, les membres du forum n’ont pas été mis au courant de l’expérimentation.
Nous avons procédé à des relevés quotidiens du nombre de membres et du nombre de mes-sages. Le nombre de pages vues n’a pas été mesuré. En effet, il s’agit de mesurer uniquement le rapport entre les messages et les membres7.
13.4.4 Application expérimentale
Nos observations se sont déroulées sur la période du 6 février 2006 au 7 octobre 2006. Nous avons arrêté nos observations dès que le 481e membre a été inscrit (le lendemain même du 7 octobre). Cette période de 8 mois fut nécessaire au doublement du nombre de membres présent dans la communauté. La figure 13.4 page 160 donne une approche globale des évolutions sur la période. On peut distinguer clairement trois phases, correspondant chacune à un pallier de nombre de membres.
Il faut noter que, durant toute cette expérimentation, nous avons éliminé systématiquement les comptes manifestement faux (créés par des robots) et les messages inappropriés de type
spam. Nous n’avons pas procédé à leur quantification mais leur nombre était non négligeable, de l’ordre de plusieurs par jour (pour les membres et les messages), la création de membres fictifs étant d’ailleurs supérieure à la création de spams.
13.4.5 Résultats obtenus et analyse
Le graphique 13.4 page 160 illustre la progression du nombre de membres et de messages sur le forum, durant la période d’observation.
Sur la période d’observation, l’augmentation du nombre de membres a été régulière et non tributaire d’événements extérieurs ayant pu avoir lieu.
Sur la période d’observation, nécessaire au doublement du nombre de membres, nous avons observé que le nombre de messages est passé de de 4 202 à 17 256. Nous notons que la pro-gression du nombre de messages est régulière et qu’elle n’est pas affectée par des évennements extérieurs (présence du Chef Simon sur des salons, événements particuliers comme la sortie du
Guide Michelin, ou autre).
En avril 2007, une fois notre expérimentation terminée, nous avons procédé à une nouvelle mesure : le forum comptait 674 membres pour un total de 25 667 messages. Nous avons observé que la tendance observée pendant notre période d’observation ne se maintenait pas. De plus, la répartition du nombre de messages par membre n’est pas régulière (voire tableau 13.2 page 161). Les disparités sont très fortes puisque le membre le plus actif totalise 14 % des messages alors que plus de 33,14 % des membres avaient posté de 1 à 5 messages et 40,73 % des membres n’en avait posé aucun.
7Ceci dit, on notera que, surla durée de l’expérimentation, l’audience du site abaissé, ce paradoxe est intéressant car il confirme la spécificité des sites collaboratifs