Avaliando conhecimento em DST de graduandos em medicina segundo a taxonomia de bloom

Evaluating medical students' knowledge on STI according to bloom's taxonomy

PESQUISA

Avaliando conhecimento em DST de graduandos em medicina segundo a taxonomia de bloom

Evaluating medical students' knowledge on STI according to bloom's taxonomy

Eloá Rondi Bórnea^I; Aguinaldo Gonçalves^I; Carlos Roberto Padovani^II

^IPontifícia Universidade Católica de Campinas, Campinas, SP, Brasil

^IIUniversidade Estadual de São Paulo, Botucatu, SP, Brasil

^{Endereço para correspondência}

RESUMO

Durante a graduação e o ingresso na especialidade, as avaliações cognitivas são amplamente aplicadas e utilizadas para analisar o aprendizado. Entretanto, nem sempre o instrumento empregado é compatível e suficiente para avaliar os tópicos aprendidos. O objetivo da presente investigação, além de apreender o grau de conhecimento que graduandos de Medicina detêm sobre DST, é investigar a existência de distribuições preferenciais a respeito segundo o gênero. Trata-se de um estudo observacional transversal descritivo de retroanálise. Foi adotada uma bateria de 25 testes de múltipla escolha formulados segundo a tipologia de Bloom, grau de dificuldade, núcleo temático das DST e aplicados a 68 internos do sexto ano. Os resultados registraram distribuição preferencial (p < 0,001) com homogeneidade do alunado em direção à alternativa mais frequente e polarização dos acertos nas categorias Conhecimento e Análise. Esses dados ilustram o modelo de educação médica atual, em que predomina a transmissão de informações ao invés da elaboração e reconstrução do conhecimento, o que tem levado à busca de novas estratégias de ensino e avaliação.

Palavras-chave: Educação Médica; Doenças Sexualmente Transmissíveis; Estudantes de Medicina; Avaliação Educacional.

ABSTRACT

Throughout a medical degree and its students' gradual entry into an area of specialization, cognitive assessments are widely applied and used in order to analyze learning procedures. The instrument used is not however always compatible or effective in evaluating the topics studied. Apart from gauging the extent of medical students' knowledge of STIs, the aim of this study is to investigate the existence of preferential distributions with regard to gender. In this descriptive observational cross-sectional study, 25 multiple-choice tests were, formulated according to Bloom's typology, the degree of difficulty and STIs' thematic core. They were then applied to 68 sixth-year interns. Results registered preferential distribution (p < 0.001) with homogeneity of students in the direction of the most frequent alternative and a polarization of correct answers in the categories of Knowledge and Analysis. The findings are representative of the current medical education model, in which the transmission of information dominates a development and reconstruction of knowledge, leading to the search for new strategies in teaching and assessment.

Keywords: Medical Education; Sexually Transmitted Infections; Medical Students; Educational Assessment.

INTRODUÇÃO

Segundo as Diretrizes Curriculares Nacionais, os cursos de Ciências Médicas identificam-se pelo objetivo de formar profissionais com conhecimento cognitivo e habilidades para atuação na saúde individual e coletiva¹. No entanto, com estruturas curriculares rígidas, constroem certa dicotomia entre a teoria e a prática, tornando a residência médica uma extensão para o desenvolvimento da atividade clínica². Durante a graduação e o ingresso na especialidade, as avaliações cognitivas são amplamente aplicadas e utilizadas para analisar o aprendizado. Entretanto, nem sempre o instrumento empregado é compatível e suficiente para avaliar os tópicos aprendidos.

Estudando as formas e aplicações de questionários, Case e Swason³ expressaram orientações para a criação de testes capazes de analisar o conhecimento médico. Destacaram que a estratégia de "verdadeiro ou falso" seria o mecanismo menos eficiente para esse objetivo porque as sentenças, por não estarem contextualizadas, não se mostram claras, podendo ser parcialmente corretas ou incorretas, sem mencionar os cinquenta por cento de chance de acerto apenas com um palpite. Dessa maneira, ganham força os testes de múltipla escolha, já que é possível construir casos clínicos sobre o tema selecionado e solicitar que entre cinco opções o estudante escolha a que melhor se aplique.

Além desses modelos, outra técnica é a de associação, em que se toma um tema, criam-se diversas opções pertinentes e apresentam-se diferentes casos clínicos, diante do que o candidato deve selecionar a opção que melhor se relacione às situações-problema ilustradas. Essa forma, quando comparada à de alternativas, demonstrou maior poder discriminativo. A justificativa é que, em questões de associação, o candidato é exposto a diferentes circunstâncias e variadas respostas, sendo necessário correlacionar às informações a identificação do paciente, sinais e sintomas, exame físico e exames complementares para conseguir encontrar uma ou mais respostas que se adaptem à realidade exposta, o que exige raciocínio complexo e verifica a possibilidade de detecção de erros quando o assunto não está bem sedimentado⁴.

No Brasil, o Instituto Nacional de Educação e Pesquisa Júlio de Mesquita (Inep) é o órgão público responsável por criar os mecanismos para validar e classificar os cursos de ensino superior, dentre os quais o de Medicina, por meio do Exame Nacional de Desempenho do Estudante (Enade). Apesar da existência de novos meios de verificações, os testes de múltipla escolha continuam sendo utilizados, por permitirem, com as vantagens de rapidez e objetividade na correção e menor vulnerabilidade a erros de julgamentos do corretor, verificar tanto tarefas simples de memorização e reconhecimento, quanto complexas, de compreensão, aplicação, síntese e avaliação a partir de situações-problemas⁵.

Esta sistematização dos domínios cognitivos se deve a Benjamin Bloom, que criou uma classificação hierárquica dos níveis de aprendizagem, que busca meios de estimular, nos estudantes, raciocínio e abstrações de alto padrão. Isto se deve à existência de uma relação de dependência entre as categorias, que são organizadas em termos da complexidade dos processos mentais, sendo a primeira o pensamento mais básico, e a última, o mais elaborado⁶.

Além disso, para um teste de qualidade deve-se considerar o nível de dificuldade da pergunta aplicada — fácil, média e difícil —, de acordo com a complexidade da informação escolhida. No caso de provas médicas, procura-se evitar conhecimentos estritamente especializados, pretendendo-se abordar conceitos fundamentais para uma atuação profissional coerente⁷.

O presente projeto relata diferentes aspectos decorrentes da experiência de aplicação de uma bateria de questões de múltipla escolha a estudantes do sexto ano de Medicina sobre doenças sexualmente transmissíveis. Além de apreender o grau de conhecimento que detêm sobre esse grupo de agravos no interior da mencionada escala de Bloom, interessa-nos investigar a existência de distribuições preferenciais a respeito segundo o gênero.

METODOLOGIA

Trata-se de um estudo observacional transversal descritivo de retroanálise, realizado durante o internato em Medicina da Pontifícia Universidade Católica de Campinas (PUC-Campinas), no ingresso à disciplina MED01622 — "Especialidades Clínicas Ambulatoriais: Dermatologia", trigésima oitava turma, décimo segundo período⁸.

Os dados foram obtidos em grupos de cinco a seis internos, semanas e meses antes da formatura, totalizando 68 unidades observacionais. Logo ao término, foi realizada a correção com a discussão dos erros e dúvidas.

Como instrumento de coleta foi utilizada uma folha de questões contendo uma bateria de 25 testes de múltipla escolha, acompanhada da respectiva folha de resposta. A formulação das questões pretendeu envolver a distribuição segundo as capacidades cognitivas da tipologia de Bloom, grau de dificuldade e núcleo temático das DST, conforme indicação do Quadro 1.

O processamento informatizado dos dados foi realizado pela aplicação do Software SPSS (Statistical Package for the Social Sciences). Os resultados descritivos, relativos à distribuição de gêneros entre os alunos e proporção de acertos e erros de cada candidato, são apresentados sob forma tabular^9,10.

Além disso, o estudo também comporta abordagem analítica, para a avaliação das proporções de acertos/erros de cada questão. Nos estudos das associações entre os atributos e as categorias de respostas foi utilizado o teste de homogeneidade de Goodman, complementado com contrastes entre populações multinomiais¹¹. Todas as inferências estatísticas foram realizadas ao nível de 5% de significância¹².

RESULTADOS

A Tabela 1 apresenta a distribuição dos estudantes segundo o sexo. É possível observar um discreto predomínio do sexo feminino, assemelhando-se à proporção de gêneros observada na população em geral.

Na Tabela 2 tem-se a distribuição das respostas a cada uma das questões formuladas, registrando-se distribuição preferencial (p < 0,001) em todas as questões, com exceção da número 17, o que indica homogeneidade do alunado em direção à alternativa mais frequente, entretanto ainda sem indicar se essa resposta é a julgada correta.

A Tabela 3 informa a distribuição das respostas segundo o sexo dos participantes, não sendo observada diferença estatisticamente significativa (p < 0,05) nas escolhas entre sexo feminino e masculino, exceto na questão 17.

As Tabelas 4 e 5 indicam a distribuição das respostas em termos de acertos e erros; esta, no plano mais geral, aponta auspiciosamente que os primeiros ocorreram três vezes mais que os segundos. Sob a ótica das categorias da tipologia de Bloom, no entanto, a polarização de frequência dos acertos se deu em duas categorias — conhecimento e análise — em 13 de 19 questões (68,42%), enquanto os 31,57% restantes se dispersaram nas três outras, não se registrando nenhum acerto na categoria de síntese.

DISCUSSÃO

Os dados apresentados mostram que, na matéria considerada, nossos alunos operam majoritariamente com conhecimento e análise, nada restando em termos de síntese. Como entender tais informações? Seriam especificidades diante dos aspectos das Doenças Sexualmente Transmissíveis ou característica mais geral do comportamento cognitivo desses jovens? Ou, num nível de maior generalização ainda, não seria sequer especificidade do grupo estudado, mas reflexo da sociedade e da educação do mundo em que vivemos?

Compatível com a exploração de aspectos da natureza dos mencionados acima, outro projeto de mesma orientação, realizado há poucos anos, aponta que, de modo geral, a educação no Brasil avança pouco, mantendo-se apenas como ferramenta instrucional, por meio de treinamentos, capacitações e transmissão de conhecimento. Ocorre a inoculação de informações de fora para dentro, não havendo espaço para processos elaborativos de reconstrução¹³.

Na área da educação médica, observa-se a necessidade de mudança, já que o curso de Medicina não consegue desenvolver o potencial intelectual, capacidade de análise, julgamento e avaliação crítica, habilidade para resolver problemas, raciocínio crítico com abordagem criativa do alunado. Diante das deficiências na graduação, fóruns nacionais e internacionais buscam a integralidade do ensino, com foco mais na saúde do que na doença, estimulando o papel ativo do aluno, além de capacitar os docentes tanto técnico-cientifica quanto pedagogicamente. Diante dessa realidade, a Comissão Interinstitucional de Avaliação de Ensino Médico (Cinaem), formada por 11 entidades representativas dos professores universitários, da profissão médica e de estudantes de Medicina do País, tem, durante a década de 1990, tentado introduzir novos métodos — entre eles o Problem Based Learning (PBL) e o Task Based Learning (TBL) — que melhorem o ensino e a formação desses profissionais¹⁴.

Em 1997, o PBL foi introduzido no Brasil com a intenção de interromper a lógica de acúmulo mecânico de informações, visando à construção do conhecimento por meio da resolução de problemas reais do futuro. Além da habilidade técnica e cognitiva, esse método pretende desenvolver atitudes mais aplicáveis tanto no cuidado do doente como na manutenção da postura de estudar para autoformação, incentivando a busca ativa do conhecimento¹⁵. Em termos aplicados, espera-se que seja mais eficaz que o método tradicional, visto que os acadêmicos lidam com relacionamentos interpessoais com melhor comunicação e atuação em equipes, com diferentes culturas e questões éticas, contribuindo para uma formação menos incompleta não apenas em nível intelectual, mas também nas dimensões sociais e pessoais.

CONCLUSÃO

Os procedimentos executados na presente investigação permitiram conhecer as seguintes evidências:

— Em nosso meio, é exequível a avaliação de conhecimento profissional com base na taxonomia de Bloom;

— Em relação à bateria de 25 testes de múltipla escolha sobre Doenças Sexualmente Transmissíveis aplicada a graduandos de Medicina, observou-se, em termos de frequência, convergência de respostas, sem diferença expressiva entre os grupos de respondentes segundo o sexo;

— Ocorreram três vezes mais acertos do que erros, o que indica a prontidão desses jovens no manejo das situações apresentadas;

— Quando, porém, as respostas foram consideradas a partir da tipologia de Bloom, constatou-se predomínio de acertos em questões voltadas a aferir predominantemente Conhecimento e Análise (68,42%), não se obtendo nenhum acerto na categoria Síntese;

— Tais resultados, indicativos de que os estudantes permanecem em níveis mais básicos da cognição, são interpretados no sentido de que na educação médica ainda predomina a transmissão de informações e conceitos com poucos estímulos à elaboração e construção da aprendizagem. Além da organização rígida do ensino, existe dificuldade dos docentes em exercer a busca ativa da reflexão.

REFERÊNCIAS

1. Goldwasser RS. A prova prática no processo de seleção do concurso de residência médica. Rev Bras Educ Med. 2006;30(3):115-124.

2. Grosseman S, Stoll C. O ensino-Aprendizagem da Relação Médico-Paciente:Estudo de Caso com estudantes do último semestre do Curso de Medicina. Rev Bras Educ Med.2008; 32(3):301-308.

3. Case SM, Swason DB. Constructing written test questions for the basic and clinical sciences. National Board of Medical Examiners. 2001; 9-180.

4. Case SM, Swason DB, Ripkey DR. Comparison of items in five-option and extended-matching formats for assessment of diagnostic skills. Acad. Med.1994;1-3.

5. Brasil. Ministério da Saúde. Guia de elaboração e revisão de itens: Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira. Brasília; 2010.

6. Ferraz APCM, Belhot RV. Taxonomia de Bloom: revisão teórica e apresentação das adequações do instrumento para definição de objetivos instrucionais. 2010;17(2):421-431.

7. Pinto AC. Factores relevantes na avaliação escolar por perguntas de escolha múltipla. Psicologia, Educação e Cultura. 2001;5(1):23-44.

8. Almeida FN, Rouquayrol MZ. Introdução à Epidemiologia Moderna. Rio de Janeiro: APCE; 1990.

9. Padovani CR. Introdução à bioestatística. In: Campana AO. Introdução à investigação clínica. São Paulo: Trianon; 1995.

10. Instituto Brasileiro de Geografia e Estatística (IBGE). Normas de apresentação tabular. 3. ed. Rio de Janeiro: IBGE; 1993. 60 p.

11. Goodman LA. Simultaneous confidence intervals for constrasts among multinominal populations. Annals of Mathematical Statistics.1964;35(2):716-725.

12. Gonçalves A. Os testes de hipóteses como instrumental de validação da interpretação (estatística inferencial). In: Marcondes MA, Lakatos EM. Técnicas em Pesquisas. São Paulo: Atlas; 1982.

13. Moura ACS. FEF/UNICAMP, onde Saúde Coletiva e Performace Humana se encontram: uma pesquisa-ação. Campinas; 2006. Dissertação (Mestrado) — UNICAMP.

14. Costa NMSC. Docência no Ensino Médico: por que é tão difícil mudar? Rev Bras Educ Med.2007; 31(1):21-30.

15. Gomes R, Brino RF, Aquilante AG, Avó LRS. Aprendizagem baseada em problemas na formação médica e o currículo tradicional de Medicina: uma revisão bibliográfica. Rev Bras Educ Med.2009;33(3):444-451.

Recebido em: 18/06/2013

Aprovado em: 04/07/2013

CONFLITO DE INTERESSES: Declarou não haver

CONTRIBUIÇÃO DOS AUTORES

Aguinaldo Gonçalves concebeu, orientou e reviu o projeto em todas suas fases, além de formular e aplicar as questões. Eloá Rondi Bórnea procedeu à redação do texto e à fundamentação bibliográfica. Carlos Roberto Padovani executou o processamento e análises estatísticas.

Datas de Publicação

• Publicação nesta coleção
  04 Ago 2014
• Data do Fascículo
  Mar 2014

Histórico

• Recebido
  18 Jun 2013
• Aceito
  04 Jul 2013