Explorando chatbots baseados em LLM para criação automática de questões práticas de programação de computadores.

Abstract

Com o avanço acelerado da tecnologia alcançando cada vez mais áreas fora da computação e influenciando diversos campos acadêmicos e profissionais, a proficiência em programação de computadores emerge como uma habilidade essencial, mesmo para aqueles não diretamente ligados à área de computação, tornando a disciplina de programação de computadores de extrema importância, trazendo consigo o desafio de tornar a disciplina cada vez mais atraente para os alunos. Sendo assim, torna-se imprescindível uma variedade das atividades práticas ao decorrer da disciplina e, lidar com a criação de um banco de questões diversificadas, bem elaboradas, abordando os tópicos de programação e temas da graduação dos alunos manualmente, pode ser um grande obstáculo. Obstáculo esse que poderia ser mitigado pelo uso de ferramentas que utilizem técnicas de Processamento de Linguagem Natural, como o modelo GPT empregado nas ferramentas ChatGPT, ChatPDF, PopAi e Sider, para automatizar a geração, escalabilidade e diversidade das questões que servirão de base para as diversas atividades aplicadas aos alunos. Portanto, o presente trabalho teve em vista realizar experimentos por meio de estratégias de interação com essas ferramentas, visando a viabilidade de seu uso para criação automática de questões por meio de informações e modelos padrões informados via prompt.