Afin d’assurer les mêmes conditions de travail pour les deux expériences, il est nécessaire de contrôler les facteurs extérieurs au déroulement des expériences pour ne pas influencer les résultats. Il s’agit des facteurs lieu et temps du déroulement. Pour nous prémunir de ces deux facteurs, nous avons veillé à fournir exactement les mêmes conditions pour les deux groupes. Ainsi, une même salle de classe est assurée pour les deux groupes, située loin de la cour de rassemblement des étudiants et donnant sur le jardin arrière de l’école (Salle D005). Les bruits provenant de l’extérieur sont alors minimisés pour favoriser la concentration des participants.
Méthode d’analyse Comparaison des moyennes
Étant contrôlés, les bruits à l’intérieur de la salle sont considérés comme insignifiants pour pouvoir perturber la concentration des participants.
Concernant le facteur temps, nous avons veillé au respect exact de la durée de chaque séance. Le contrôle du facteur temps est assuré à travers le logiciel de capture vidéo d’écran. Chaque participant est appelé à rendre en fin de séance une séquence de 1h50. Les éventuels retardataires reçoivent des durées supplémentaires de travail pour profiter pleinement de la séance. La perte de temps liée à l’échange entre participants est contrôlée durant le suivi. À la fin de l’expérience, les participants ayant terminé leurs rendus avant la fin de la séance sont appelés à envoyer leurs derniers enregistrements accompagnés du fichier Revit correspondant avant de quitter la salle pour ne pas perturber la concentration de leurs camarades. Le temps d’adaptation des participants à l’utilisation du prototype a été limité d’abord par la séance préliminaire de présentation et de démonstration des fonctionnalités du prototype et ensuite à travers l’accompagnement des participants pour les assister dans l’utilisation du prototype au fur et à mesure de l’avancement de la conception.
Après avoir déterminé toutes les bases du protocole expérimental, des tests d’utilisation de la démarche de conception et du prototype développé sont effectués avant le lancement des expériences. Ces tests nous ont aidés dans l’identification des étapes de la démarche qui nécessitent une intervention spécifique ou des mesures de précaution particulières pour veiller au bon déroulement de l’expérimentation. Les mesures de précaution identifiées sont à appliquer en temps utile durant le suivi des expériences. En cours des expériences, l’élément essentiel est la surveillance constante de la conduite des expériences et du comportement des participants, au fur et à mesure que la situation évolue.
En ce qui concerne le contrôle de la conduite des expériences, il s’agit entre autres de :
- s’assurer de la présence d’une connexion internet avant chaque séance. Cette mesure est indispensable au bon déroulement de l’expérimentation, puisque les scripts développés utilisent des Packages Dynamo non exécutables hors connexion,
- intervenir instantanément quand l’un des participants utilisant le prototype trouve du mal à utiliser l’une de ses fonctionnalités pour maitriser le facteur temps et limiter la perte de temps liée à l’utilisation d’une nouvelle démarche,
- vérifier la durée de chaque séquence avant envoi pour assurer une même durée de travail pour tous les participants.
Concernant le comportement des participants durant l’expérimentation, il s’agit de :
- s’assurer du lancement du logiciel de capture vidéo d’écran au début de chaque séance,
- veiller à l’exécution des scripts Dynamo dans l’ordre indiqué pour le groupe qui travaille avec le prototype (script d’ajout des noms des pièces en premier, puis celui des noms des paramètres d’exigences, ensuite celui des valeurs des paramètres). L’exécution de ces scripts dans l’ordre est indispensable pour avoir ensuite les exigences spatiales dans l’interface de Revit,
- rappeler aux participants de la création d’un fichier de paramètres partagés, avant l’exécution du script d’ajout des noms des paramètres,
- veiller à ce que les participants prennent le temps de conception nécessaire pour produire des modèles cohérents, avant de passer au volet de vérification,
- rappeler aux étudiants qu’ils sont libres de prendre en compte ou de négliger les résultats des vérifications. Leur expliquer que la démarche proposée est conçue pour leur rappeler quelles sont les exigences non respectées, mais, qu’ils ne sont pas obligés de tout revoir à chaque vérification,
- minimiser les échanges entre participants, surtout quand il s’agit du programme architectural pour maitriser les variables de nombre et de durée de consultation du programme. Dans ce cas, l’étudiant doit être appelé à chercher l’information tout seul dans le programme,
- noter toute observation liée au déroulement des expériences portant sur le comportement des participants dans l’utilisation du prototype développé, de sa démarche fonctionnelle, ou encore sur l’approche de conception proposée. Une fiche de suivi est préparée à cet effet (annexe 10). Cette fiche permet de noter des observations générales concernant le groupe en question ou encore des observations individuelles par étudiant (tout en indiquant la date, le numéro de la séance et le groupe expérimental en question (avec ou sans prototype).
La collecte des séquences est assurée à la fin de chaque séance. Chaque étudiant est appelé à envoyer la séquence vidéo enregistrée, à travers WeTransfer92, accompagnée du fichier Revit correspondant. Ce choix de la manière de collecte des données est lié principalement à la taille des séquences, très volumineuses pour être envoyées par courrier électronique. Afin de garantir des rendus valables pour le travail d’analyse, il a fallu être très méticuleux lors du contrôle de chaque rendu avant envoi. Les participants sont appelés à renommer leurs fichiers par nom et par numéro de séance. Ceux-ci sont téléchargés et classés par groupe pour être observés. Un exemple de rendu final de chaque groupe expérimental est montré dans l’annexe 11.