Scheduler

A realização de pré-teste envolvendo a aplicação de questionários é uma importante medida para a obtenção de resultados de qualidade e pela melhor maturação do seu conteúdo (MARCONI; LAKATOS, 2010). A aplicação de instrumento de coleta para uma amostra de tamanho reduzido antes da sua divulgação entre os potenciais respondentes permite a sua validação quanto à semântica empregada e a identificação de itens candidatos a alteração de redação ou formato, ou ainda a inclusão ou exclusão. Adicionalmente podem ser obtidas informações a respeito do tempo de preenchimento e sobre o nível de cansaço vivenciado pelos respondentes durante o teste, além de informações gerais sobre as impressões dos respondentes sobre o instrumento, e podem ser vivenciadas situações não previstas durante a sua elaboração antes da realização da pesquisa propriamente dita (MARCONI; LAKATOS, 2010).

Visando ao aprimoramento do instrumento de pesquisa elaborado com base na revisão de bibliografia realizada, foi realizado um pré-teste com 8 respondentes potenciais, dentro das instalações do SERPRO. A amostra selecionada continha gerentes de projeto e desenvolvedores, analistas e técnicos, homens e mulheres, graduados e pós-graduados, compreendendo os principais grupos de respondentes que participariam da coleta principal.

O pré-teste foi realizado em apenas um dia, utilizando uma versão em papel do instrumento, dividida em 5 seções: 1 - “Identificação e Dados do Respondente”; 2 - “Aprendizagem individual em software livre”; 3 - “Suporte Organizacional”; 4 - “Compartilhamento de Conhecimento” e uma seção final com questões sobre dúvidas, dificuldades e observações sobre o questionário. Os respondentes registraram a hora de início e de término de preenchimento do instrumento. Aos participantes do pré-teste foi oferecido o envio das análises dos resultados da pesquisa assim que estivessem disponíveis.

Os respondentes foram instruídos a identificar perguntas pouco claras e inquiridos a respeito do tempo de preenchimento e do grau de cansaço sentido com o preenchimento do questionário, por meio das questões da última seção: “Você teve dificuldade em entender alguma(s) das questões formuladas? Marque com um X as questões que apresentaram alguma dificuldade. ”; “Você achou que o tempo tomado foi muito grande?” e “Você achou que o questionário cansativo?”. Foram dadas instruções para que os respondentes manifestassem observações a respeito das impressões sobre o instrumento (item “Há alguma observação que você gostaria de fazer?”) e enfatizado verbalmente que os mesmos fossem bastante críticos em suas colocações.

As observações fornecidas foram de grande importância para o aprimoramento do instrumento de coleta. Um dos respondentes utilizou softwares de comunicação para enviar novas considerações após preencher o questionário (via correio eletrônico e bate-papo online corporativo), enquanto que os demais utilizaram exclusivamente o material impresso. O apêndice E sumariza as impressões dos respondentes do primeiro pré-teste.

Apenas um dos respondentes apontou dificuldade de entendimento do questionário, mas algumas considerações foram feitas em relação à redação das questões por parte de outros respondentes. A expressão “Interação via software de comunicação”, utilizada em mais de uma questão, foi apontada como pouco clara, podendo ser escrita mais de acordo com o contexto. A sua redação foi alterada para “Interação via software de comunicação (correio eletrônico, chat, videoconferência, etc.)” em um dos itens, facilitando a interpretação do termo nas questões posteriores em que a expressão se repetisse.

Um dos respondentes sugeriu a troca da expressão "colegas" por "colegas de trabalho", para evitar confusão com colegas de cursos externos à empresa, sugestão acatada. A questão em que é selecionada uma ferramenta de software livre por parte do respondente foi alterada para deixar mais claro que o respondente devia escolher ferramentas em que é usuário no trabalho, e não as que apresenta maior conhecimento ou nas quais seja um desenvolvedor/ colaborador.

Itens das seções 2, 3 e 4, segundo os respondentes, demandariam uma opção “Não se aplica”, por que não se aplicariam a todos os respondentes. Esta sugestão foi acatada pela adição de “Não se aplica” aos itens do instrumento e pela desativação de itens relativos a subordinados para respondentes que não liderassem equipes no sítio de coleta.

Nenhum dos participantes do pré-teste apontou tempo excessivo para o preenchimento do instrumento, no entanto o tempo médio registrado foi de 15min 40s valor acima da expectativa, embora compatível com o número de questões da enquete. O menor tempo foi 11 minutos e o maior 20 minutos. Dois dos respondentes apontaram que preencher o questionário foi cansativo. O acréscimo de opções “não se aplica”, a mudança na redação de algumas questões e a implementação do questionário sobre a plataforma web são medidas que visaram minorar este problema, reduzindo o tempo e o cansaço no preenchimento das respostas.

Um dos respondentes sugeriu o acréscimo de questões abertas subjetivas, sem especificar o teor destas questões. A ideia foi acatada para permitir a expressão dos respondentes que desejassem falar sobre a sua experiência com a ferramenta, resultando no acréscimo das questões abertas “Como a ferramenta de software livre selecionada é utilizada no seu ambiente de trabalho?” e “Deseja acrescentar alguma observação a respeito da sua experiência com a ferramenta de software livre selecionada no ambiente de trabalho?”, dispostas ao fim das seções 2 e 4 do questionário respectivamente.

O pré-teste se revelou uma ferramenta eficaz para avaliação da redação das questões, para uma estimativa do tempo aproximado de preenchimento e para a identificação e solução de problemas no instrumento antes da realização da coleta de dados propriamente dita. A partir dos resultados desta validação, iniciou-se a prospecção de ferramenta para a implementação da versão web do questionário. As próximas seções apresentam o segundo pré-teste, ajustes sugeridos pela universidade corporativa da empresa, os itens do instrumento de coleta e o relato da aplicação do questionário em si.