Analisando, de forma individual, os dados inseridos pelos residentes no GitLab tabulados para esse estudo, procura-se observar associação entre a motivação do aluno e sua organização no ambiente de trabalho.
A reflexão é importante uma vez que os dados coletados em questionário validam o método de trabalho, mas não garantem respostas da relação entre o uso de uma ferramenta de suporte ao trabalho com a melhoria na aprendizagem do aluno.
Primeiramente, cabe uma análise mais aberta das interações dos residentes por cada ciclo de desenvolvimento dos projetos para então procurar entender e aferir comportamentos.
Na sequência, a partir dos dados coletados, pode-se realizar uma análise de participação dos residentes por projeto e o número de interações para aquele projeto específico por residente.
Segmentando a quantidade de interações por residentes em suas respectivas áreas de conhecimento (desenvolvimento de sistemas, infraestrutura e BI), agrupados por desde a Sprint 4 até a Sprint 22, temos os comportamentos detalhados nas Figura 32, Figura 33 e Figura 34.
Importante destacar que o número de interações de desenvolvimento com a ferramenta dar-se-á pela quantidade de ações associadas ao desenvolvimento de código fonte, como criação de branch e solicitação de merge. Todas essas tarefas não estão diretamente associadas às ênfases de BI e infraestrutura, sendo para estes a ferramenta apenas um grande quadro de registro e acompanhamento de atividades (issues), o que justifica a quantidade reduzida de interações.
Figura 33 - Número de interações por residente de infraestrutura em cada Sprint (fonte: própria)
Figura 34 - Número de interações por residente de business intelligence em cada Sprint (fonte: própria)
Em um primeiro momento observa-se comportamento comum na curva de interações dos residentes na ferramenta de fluxo de trabalho. Os residentes ao serem estimulados no uso da ferramenta logo promovem interações a fim de testá-la e organizar suas ideias e tarefas. A curva de internações diminui à medida que se passam os ciclos e não se fomenta a obrigatoriedade do uso da ferramenta.
Essa curva elevada nas Sprints 6, 7 e 8 para desenvolvimento, pode-se justificar também, por terem sido estes ciclos os de maior duração até o momento no programa de Residência em TI. Com 35, 53 e 45 dias, respectivamente, as Sprints apresentam naturalmente uma elevação no amplamente percebida no gráfico. Um dos residentes, por já possuir familiaridade e ter trabalho com o GitLab em outra ocasião, apresenta distância relevante no número de interações comparado aos demais.
Os residentes de infraestrutura assumiram curva similar ao desenvolvimento. Aplicados no uso da ferramenta no início e pelo tempo estendido na duração, apresentaram elevada interação
ciclos. Outro ponto relevante a destacar é que para este grupo, observa-se uma dinâmica de trabalho em alguns ciclos, onde apenas um deles fica responsável por alimentar a ferramenta com as atividades e atualizá-las no quadro, conforme evidenciado nas Sprints 9, 10, 12 e 14.
BI apresenta uma curva mais uniforme na quantidade de interações e iniciou o uso da ferramenta apenas quando uma segunda residente foi incorporada à ênfase, depois da desistência de um residente na área de desenvolvimento de sistemas. Na Sprint 11, outro residente em BI é incorporado ao time, após desistência de outro residente na área de desenvolvimento, configurando a turma com 6 (seis) residentes em desenvolvimento, 3 (três) em infraestrutura e 3 (três) em BI.
O quantitativo de interações pode não estar apenas ligado com a familiaridade do residente como também ao projeto ao qual este está associado. Observa-se que projetos de desenvolvimento de software possuem maior número de interações por usarem funcionalidades do GitLab intrínsecas ao desenvolvimento e controle de versão. Este exemplo pode ser observado no recorte das Sprints 4, 5, 6, 7, 8 e 9 do projeto de desenvolvimento do framework conforme Figura 35.
Figura 35 - Número de interações por residente no projeto de desenvolvimento do framework (fonte: própria)
Um projeto de alta complexidade contando com a participação de 7 (sete) residentes precisa ser norteado por um número maior de interações. Por estarem lidando com programação e diversas implementações, os residentes, sempre que possível, foram estimulados a manter as issues atualizadas e o código em sua última versão de desenvolvimento no servidor. Na Sprint 5 todos os residentes interagiram com o quadro, procurando atualizar sua rotina de trabalho.
Próximo ao final da primeira versão do sistema, alguns residentes foram destacados para outro projeto e apenas poucos restaram para atualizar o código e as atividades, diminuindo consideravelmente a interação com a ferramenta.
Figura 36- Número de interações por residente no projeto Botão do Pânico (fonte: própria)
Analisando um projeto menos complexo e com a participação de um número menor de residentes (Figura 36), percebe-se similaridade no comportamento das interações. Observa-se que na fase inicial do projeto a tendência é um maior número de interações, sendo nos demais momentos realizados ajustes e novas implementações de forma mais perene.
Embora sempre tenhamos destaque em um ou outro residente que assume o pico do gráfico em interações, fica evidente a participação de todos, mesmo daqueles que em menor escala dominam a ferramenta. Não há como chegar a conclusões assertivas quanto ao uso da ferramenta tecnológica que gerencia o fluxo de trabalho no incentivo ao trabalho colaborativo e organizado. O que se pode relatar é que mesmo aquelas áreas de conhecimento que não estão acostumadas a utilizar ferramentas desse tipo para organização do trabalho puderam estabelecer rotinas focadas no registro das atividades e mantiveram um rastro de ações realizadas, em sua maioria, colaborativamente na execução dos projetos aplicados na JFRN.
6. CONCLUSÃO
O Programa de Residência em Tecnologia da Informação aplicada à Área Jurídica é uma proposta inovadora na construção de um profissional com práticas de negócio e amplo conhecimento teórico aplicado em problemas de casos reais.
Ao procurar responder às questões de pesquisa deste trabalho, afirma-se que a imersão dos alunos em um ambiente com problemas reais promoveu entregas relevantes para o escopo estratégico da JFRN. Um exemplo é o sistema do Centro de Inteligência (https://centrodeinteligencia.jfrn.jus.br/), visando contribuir com a execução de demandas de ampla discussão jurídica, funciona como uma base de conhecimento dos principais temas e das decisões discutidas. A solução atende a uma necessidade do Conselho da Justiça Federal e, recentemente, escolhida como ferramenta nacional para suporte aos Centros de Inteligência em todo o país (questão de pesquisa I - Como a disciplina de Aprendizagem Baseada em Projetos pode entregar produtos/serviços associados ao Planejamento Estratégico do Órgão?).
Ao responder de que maneira os residentes puderam ter seus resultados e desempenhos acompanhados e alinhados aos objetivos da residência e da instituição (questão de pesquisa II), cabe destacar que o ciclo de reuniões contínuas promovendo ajustes na trajetória dos alunos e dos produtos esperados pelo Órgão. A pesquisa pôde demonstrar a importância de cada reunião preconizada pelo modelo. A reunião de planejamento apontando uma missão a ser alcançada, a reunião diária com acompanhamento contínuo das atividades dos residentes e retirando possíveis impedimentos do caminho, a reunião de entrega como avaliação dos produtos desenvolvidos e a reunião de retrospectiva que sinaliza pontos de melhoria no programa como um todo, dando voz ao aluno residente. Destaca-se também a presença semanal dos professores da disciplina de ABP documentando o processo de aprendizagem e dirimindo dúvidas para avanço das entregas dos residentes.
O uso de ferramentas trazendo dados contribuiu na análise da aprendizagem dos residentes (questão de pesquisa III) ao evidenciar por meio de questionário aplicado ao final de cada ciclo a percepção do aluno a necessidade de ajustes na abordagem das disciplinas e no acompanhamento dos alunos. Além disso, a coleta das interações com o GitLab evidenciou participação coletiva dos residentes e pôde contribuir na análise do engajamento dos alunos no desenvolvimento dos projetos do Órgão. Em paralelo, os dados do SIGAA trouxeram a participação dos alunos nas disciplinas e a desistência durante o percurso por alguns deles, seja por nota ou faltas. As informações cruzadas em camadas contribuíram para uma análise da aprendizagem dos residentes,
trazendo a participação em sala de aula, no projeto em desenvolvimento na JFRN e sua percepção em como a residência funcionou durante aquele ciclo de aprendizagem.
O uso de uma adaptação do Scrum promoveu ambiente de colaboração e trouxe contribuições significativas para o Órgão, o que procura responder à questão de pesquisa IV (Quais metodologias ágeis poderão ser aplicadas visando desenvolvimento colaborativo de projetos relevantes para o local de pesquisa e trabalho dentro da ABP?). A adaptação coube por associar os perfis aplicados na residência aos nomes preconizados pelo framework. Além disso, alguns conceitos do Scrum não foram inseridos no modelo de acompanhamento, visto que o objetivo do pesquisador foi de promover a absorção da metodologia ágil aplicada sem grandes esforços pelos participantes. Procurou-se então trazer um modelo enxuto e ir aplicando melhorias a cada rodada de ciclo.
Como resposta à última questão de pesquisa deste trabalho (quais as metodologias ativas poderão ser aplicadas no reforço das idéias e fundamentação da aprendizagem do residente?), além da Aprendizagem Baseada em Projetos, contribuir com o reforço da teoria e sua aplicação em casos reais, foram apresentados aos alunos o uso do Design Thinking para desenho de soluções no judiciário. O principal desafio apontado durante a pesquisa para este caso em específico, foi a dificuldade em associar a teoria abordada em sala de aula ao desenvolvimento dos produtos no Órgão. Destaca-se aqui o papel do preceptor como facilitador ao encontrar possíveis desafios no Órgão que estejam associados ao conteúdo abordado pelas disciplinas durante aquele ciclo de aprendizagem.
Agora revisitando os objetivos deste trabalho, pode-se dizer que foi concluída investigação dos conceitos de inovação no setor público, ABP e análise de aprendizagem em ambiente multiusuários, que fundamentou o referencial teórico da pesquisa em tela (objetivo específico I). Ocorreu a implementação da metodologia ágil no processo da residência em TI, com dinâmica de entregas contínuas em 23 (vinte e três) ciclos de desenvolvimento (objetivo específico II).
Além disso, destaca-se a criação do Portal da Residência como repositório e vitrine dos projetos desenvolvidos e o uso do GitLab como ferramenta de controle de fluxo de trabalho e atividades, permitindo o acompanhamento do desempenho dos residentes através da coleta e mapeamento de informações (objetivo específico III). Observou-se o uso da ferramenta por todos os residentes, porém não há evidências de que o uso da ferramenta permitiu melhoria no trabalho colaborativo. O que se pode concluir é que a ferramenta proporcionou melhor organização das atividades e permitiu rastreamento das atividades dos alunos no Órgão.
Uma adaptação do Scrum, suas reuniões e definição de papéis e responsabilidades foram definidos como o modelo de acompanhamento e desenvolvimento da evolução dos residentes com a participação dos professores da ABP (objetivo específico IV). Este modelo foi aplicado na JFRN e mapeado através da linha do tempo (objetivo específico V), sendo avaliado por questionários aplicados aos residentes que pontuaram aspectos relevantes na melhoria do processo durante o curso do Programa (objetivo específico V). Durante o acompanhamento e a avaliação do programa aplicado na JFRN, ficou evidente a relação entre a participação efetiva do preceptor como articulador das atividades realizadas no Órgão e suporte aos residentes, e o sucesso do programa e do modelo aplicado. Outro fator positivo destacado foi o ambiente e equipamentos fornecidos pela JFRN para desenvolvimento dos projetos e a proposta de trabalho colaborativo contínuo. Viu-se que um dos grandes desafios desse modelo de pós-graduação é a integração das atividades teóricas e os trabalhos desenvolvidos no Órgão. Como pontos de melhoria, a avaliação tornou pública a necessidade de um acompanhamento através da disciplina ABP por professores especializados em cada área e uma maior participação dos donos do produto (área de negócio da JFRN) na elaboração dos projetos.
O número de desistências da primeira turma da JFRN foi de 5 (cinco) residentes, o que representa uma taxa de aproximadamente 42% (quarenta e dois por cento), sendo repostas 4 (quatro) dessas peças, totalizando a formação 11 (onze) residentes. O valor da bolsa em R$ 1.500,00 (valor inferior aos demais programas em outros Órgãos que pagam R$ 2.000,00), proposta de emprego e incompatibilidade de horários foram agentes motivadores na tomada de decisão. Notas e faltas dos alunos não aparecem como fator motivador para essa tomada de decisão.
Mesmo diante desses desafios, a coleta da percepção dos alunos e o modelo aplicado na disciplina de ABP na Justiça Federal garantiu resultados satisfatórios para os residentes, para os professores e para o Órgão. As premiações associadas ao programa de Residência em TI e ao método de trabalho desenvolvido no III Prêmio AJUFE de Boas Práticas do Judiciário19 evidenciam que o trabalho tem assumido um caminho inovador e de êxito no judiciário do Brasil.
Em se tratando do valor acadêmico a abordagem deste trabalho foi publicada como artigo resumido nos Anais do XXIX Simpósio Brasileiro de Informática na Educação20 (XXIX SBIE -
19 Prêmio AJUFE de boas Práticas no Judiciário - https://www.ajufe.org.br/imprensa/noticias/10568-conheca-os-
projetos-vencedores-do-iii-premio-ajufe-boas-praticas-de-gestao
2018) na trilha de Sistemas Computacionais para Apoio à Cooperação/Colaboração em processos de ensino/aprendizagem (CSCL).
Este cenário de aprendizagem e reflexão contínua tem agregado valor não apenas aos residentes, mas também aos professores e coordenadores do curso. Isso porque os resultados parciais deste trabalho e as necessidades mapeadas garantiram melhorias na execução da segunda turma promoveu uma discussão sobre a remodelagem das disciplinas do curso e criação de uma terceira área de conhecimento para as próximas turmas, a de Business Intelligence e Analytics, desassociando a área de Business Intelligence do Desenvolvimento de Software, além da escolha de três professores para ABP, cada um com experiência em uma das áreas de conhecimento (desenvolvimento, infraestrutura e BI). Outro ponto de melhoria foi o processo seletivo contando com uma etapa de prova teórica e outra de entrevista e análise de perfil comportamental, deixando evidente a necessidade de dedicação ao programa. Em se tratando da JFRN, foram destacados coordenadores da área de negócio para assumir o papel de PO de forma mais contínua e acompanhar as entregas dos residentes de forma mais próxima. Em resumo, destaca-se como contribuição do trabalho em tela:
I. Desenho de um modelo de acompanhamento dos residentes através de entregas contínuas; II. Definição de ferramentas tecnológicas (Gitlab, SIGAA, Formulário Google) para
acompanhamento dos residentes;
III. Revisão do Programa de residência em TI, promovendo a criação de uma terceira área de conhecimento focada em Business Intelligence e Analytics e a adaptação da grade de disciplinas, com a criação de disciplinas específicas para cada área de conhecimento. Destaca-se que essa revisão foi pensada a partir da coleta da percepção dos alunos através das reuniões de retrospectiva;
IV. Proposta de processo seletivo com etapa de análise comportamental e perfil profissional; V. Destaque na importância do papel do preceptor como essencial para o sucesso no programa
da residência e no desenvolvimento de produtos alinhados à estratégia do Órgão;
VI. Proposta de acompanhamento dos residentes por professores de ABP especialistas em cada área de conhecimento (Infraestrutura e redes, Business intelligence e Desenvolvimento de Software).
Além disso, anota-se como um dos principais desafios deste trabalho a execução do programa de pós-graduação em paralelo com a elaboração da pesquisa. Um ponto alto a ser destacado como lições aprendidas é a de poder compreender o papel do preceptor além de executor
engajamento da equipe de residentes, promovendo a sinergia entre eles e os demais agentes do programa. Em se tratando da Justiça Federal, documenta-se a dificuldade enfrentada em definir formatação de desenvolvimento dos trabalhos de conclusão de curso, sendo por um momento definido que a execução ficaria apenas fora das dependências das JFRN, fato que limitou o nível de aproximação das entregas com o escopo desejado. Por fim, merece destaque a resposta ao risco de apresentar um número elevado de sistemas produzidos sem o devido suporte após o encerramento do programa, através da execução de contratação de empresa de suporte em sistemas legados em paralelo com a execução da residência em TI, proporcionando continuidade nos projetos de grande escala desenvolvidos pelos residentes da primeira turma.
Como para este trabalho foram coletadas as informações de forma manual, uma proposta para coleta dos dados através de API do SIGAA e do GitLab e um painel que evidencie o acompanhamento dos residentes por diversos atores (professores, coordenadores, preceptores e gestores do Órgão) é uma proposta de trabalho vindouro que pode agregar valor ao acompanhamento em tempo real do que é relevante por cada perfil envolvido no programa.
7. REFERÊNCIAS
ACEVEDO, S.; DASSEN, N. Innovando para una mejor gestión: la contribución de los
laboratorios de innovación pública. Biblioteca Felipe Herrera del Banco Interamericano de
Desarrollo, 2016.
ALMEIDA, M. E. B. de; VALENTE, J. A. Tecnologias e currículo: trajetórias convergentes
ou divergentes? São Paulo: Paulus, 2011 – (Coleção Questões Fundamentais da Educação – 10),
pg. 5 a 37.
BENDER, W. N. Aprendizagem baseada em projetos: educação diferenciada para o século