Avaliação do Aluno de Ensino, ou SET, é comumente usado no ensino superior como feedback para o desempenho dos instrutores do curso. Os alunos avaliam seus professores quantitativamente, pontuando seu desempenho em uma escala numérica em questões como "O professor está preparado para a aula" e "Aprendi muito com esse professor".

Embora as classificações numéricas forneçam uma medida tangível do desempenho de um instrutor em sala de aula, eles apenas medem o que as perguntas fazem. Os questionários abertos refletem o quadro geral muito melhor, mas são relativamente subutilizados no que diz respeito à extração de feedback dos alunos para identificar maneiras de melhorar a forma como um curso é ministrado.

Por que é que?

"Suponha que eu esteja ensinando cerca de 300 alunos, 400 alunos e esses alunos estão me dando feedback - é um grande conjunto de dados e obter insights manualmente que são importantes para mudar meu processo de ensino ou melhorar meu processo de ensino é tedioso e trabalhoso, "explica Swapna Gottipati, Professor Assistente de Sistemas de Informação (Educação) na SMU. "Portanto, Tenho que depender de algum tipo de ferramenta ou máquina, e esta é uma tentativa de gerar percepções de dados muito rapidamente para que o corpo docente obtenha as percepções do feedback qualitativo. "

Aspectos do feedback

A professora Gottipati está se referindo ao seu projeto recentemente concluído "Análise de aprendizagem no feedback qualitativo do aluno para melhorar o ensino e a aprendizagem no ensino superior, "que foi apoiado pelo Fundo de Pesquisa da Educação Terciária do Ministério da Educação (MOE). Utilizando o sistema de feedback interno da SMU que coleta as avaliações de final de curso dos alunos, O professor Gottipati propõe um sistema de análise de aprendizagem denominado "Course Feedback Analytics System (CFAS)" para "ajudar os membros do corpo docente a obter percepções mais profundas sobre suas práticas de ensino, currículo, bem como desenvolvimento de avaliação. "

Utilizando Processamento de Linguagem Natural (NLP), O professor Gottipati examinou cinco aspectos principais do feedback dos alunos entre feedback quantitativo e qualitativo, que incluem tópicos, Sentimentos, Sugestões, Tempo, e correlação.

"Em primeiro lugar, é o assunto, quais são as questões sobre as quais os alunos estão falando, "ela disse ao Escritório de Pesquisa e Transferência de Tecnologia." Em segundo lugar, trata-se de ordenar os temas e questões mais importantes porque queremos priorizá-los.

"O terceiro é entender as percepções, como sentimentos ou opiniões dos alunos. Tomando o estilo de ensino de um corpo docente como exemplo - talvez ele ou ela não seja muito envolvente ou fale muito devagar, ou em voz muito baixa. Tudo isso é feedback negativo. É chamado de sentimento.

"E o último são os resumos rápidos dos comentários. Isso significa uma visualização ou algum tipo de visual ou relatórios amigáveis ​​que podem nos ajudar a identificar o que precisa ser abordado."

O professor Gottipati explica que os modelos de PNL são baseados em regras e gramática, e as regras construídas em um modelo podem extrair adjetivos e a que esses adjetivos se referem. Também pode identificar os tópicos sobre os quais os alunos estão escrevendo em seus comentários.

Usando a informação

Todos os dados extraídos de respostas abertas valeriam pouco se não pudessem ser usados. Para esse fim, CFAS will feature what Professor Gottipati calls interactive 'doughnut' graphics that are not just basic bar graphs and pie charts but those that "expand and pop out the respective negative or positive feedback for the given topics and so on."

Em última análise, these will help not only the course instructor in fine-tuning their teaching, but will also help course managers and university administrators with macro-level management of the curriculum.

"During our performance evaluations, our reporting officers might give suggestions on how to improve the courses we teach, " says Professor Gottipati, who is also the Interim Associate Dean of Undergraduate Education at the School of Information Systems (SIS). "They should be able to know what happened both within the course, as well as about the course at a macro level. If they are aware of the positive comments provided for other courses, these can also be shared with other faculty for improvement in their teaching."