Uma proposta de instrumento para avaliação da educação a distância

A proposal of evaluation tool for distance learning education

Propuesta de instrumento para evaluación de la educación a distancia

Uma proposta de instrumento para avaliação da educação a distância

A proposal of evaluation tool for distance learning education

Propuesta de instrumento para evaluación de la educación a distancia

Cláudia M. Cruz Rodrigues^I; José Luis Duarte Ribeiro^II; Marcelo Cortimiglia^III; Cristiane Bündchen^IV

^IDoutora em Engenharia de Produção, Vice-Secretária de Avaliação Institucional da Universidade Federal do Rio Grande do Sul (UFRGS) e Professora do Departamento de Engenharia de Produção e Transportes. E-mail: [e-mail]

^IIDoutor em Engenharia Civil, Professor e Chefe do Departamento de Engenharia de Produção e Transportes da Universidade Federal do Rio Grande do Sul (UFRGS). E-mail: [e-mail]

^IIIBolsista de Pós-doutorado CNPq junto ao Programa de Pós-Graduação em Engenharia de Produção (UFRGS). E-mail: [e-mail]

^IVBacharel em Estatística pela Universidade Federal do Rio Grande do Sul (UFRGS). E-mail: [e-mail]

RESUMO

Este artigo propõe um instrumento de avaliação para a educação a distância, e relata a sua aplicação na Universidade Federal do Rio Grande do Sul. No desenvolvimento da proposta, foi realizada uma pesquisa bibliográfica e, posteriormente, uma pesquisa de campo a fim de testar o pré-instrumento de avaliação proposto junto aos alunos do Curso de Pedagogia a distância e a sua validação junto à amostra considerada. O instrumento proposto possui 67 itens que permitem avaliar as dimensões: (i) corpo docente, corpo de tutores e coordenação; (ii) organização didático-pedagógica e; (iii) instalações físicas. O alfa de Cronbach do instrumento foi de 0,982, o que indica alta consistência interna, oportunizando a validação do instrumento. No total, 165 alunos participaram da pesquisa. Dada a generalidade do instrumento proposto, conclui-se que o mesmo pode ser aplicado para a avaliação da educação a distância ofertada por qualquer tipo de Instituição, seja de natureza pública ou privada.

Palavras-chave: Educação Superior. Educação a Distância. Instrumento de Avaliação.

ABSTRACT

This paper proposes an evaluation tool for distance learning education and reports its application at the Federal University of Rio Grande do Sul, Brazil. The proposal is based on bibliographic research. Later, a field study in a Pedagogy distance learning education course was conducted in order to test and validate the tool. The evaluation tool consists of 67 items and includes the following dimensions: (i) faculty, tutors and managing staff; (ii) didactic and pedagogic organization; and (iii) physical facilities. Overall Cronbach's alpha for the questionnaire was 0.982, indicating high internal consistency. A total of 165 students took part in the study. Given the instrument generality, it can be used to evaluate distance learning education initiatives offered by any Higher Education Institution, either public or private.

Keywords: Higher Education. Distance Education. Evaluation Tool.

RESUMEN

Este artículo propone un instrumento de evaluación para la educación a distancia y relata su aplicación en la Universidad Federal de Rio Grande do Sul, Brasil. Para el desarrollo de la propuesta, se realizó una revisión bibliográfica y una investigación de campo que tratan de verificar el pre-instrumento de evaluación. Esto involucró la participación de los alumnos del Curso de Pedagogía a distancia y la validación se hizo con esta muestra. El instrumento propuesto se compone de 67 ítems que permiten evaluar las siguientes dimensiones: Iº) cuerpo docente, cuerpo de tutores y coordinación, 2º) organización didáctico-pedagógica y 3º) instalaciones físicas. El alfa de Cronbach del instrumento fue de 0,982, lo que indica alta consistencia interna y permite la validación del instrumento. En total, 165 estudiantes participaron de la investigación. Debido a la generalidad del instrumento propuesto, se concluye que puede aplicarse para evaluación a distancia ofrecida por cualquier tipo de institución, sea de naturaleza pública o privada.

Palabras clave: Educación superior. Educación a Distancia. Instrumento de Evaluación.

1. Introdução

A Educação a Distância (EaD) vem crescendo em ritmo acelerado em todas as áreas de conhecimento. Tal crescimento deve-se, em grande parte, à política adotada pelo Governo Federal em termos de estimular a oferta e proporcionar condições para que todos possuam acesso ao ensino superior. Desta forma, medidas como a reestruturação e revitalização do ensino foram adotadas e, com elas, estratégias para garantir que princípios como o da qualidade, respeito à identidade e à diversidade institucional, globalidade, legitimidade e permanência sejam adotados.

Neste sentido, os Referenciais de Qualidade para Educação a Distância, propostos pela Secretaria de Educação a Distância do Ministério da Educação (SEED/MEC), fornecem orientações que subsidiam a discussão dos Projetos Pedagógicos dos Cursos, orientando e fixando bases para que a busca da qualidade aconteça de forma contínua e permanente. Para tanto, os Referenciais propõem a observância dos seguintes critérios: (i) concepção de educação e currículo no processo de ensino e aprendizagem; (ii) sistemas de comunicação; (iii) material didático; (iv) avaliação; (v) equipe multidisciplinar; (vi) infraestrutura de apoio; (vii) gestão acadêmico-administrativa e, (viii) sustentabilidade financeira.

Este trabalho propõe explorar as temáticas da avaliação, abordando a avaliação da aprendizagem e a avaliação institucional. Enquanto tratando-se da avaliação da aprendizagem, segundo os Referenciais de Qualidade, o modelo a ser adotado pelas instituições deve ajudar o estudante a desenvolver graus mais complexos de competências cognitivas, habilidades e atitudes. Tal avaliação deve ocorrer de forma contínua, para verificar constantemente o progresso dos estudantes, e estimulá-los a serem ativos na construção do conhecimento, articulando mecanismos que promovam o permanente acompanhamento dos estudantes, no intuito de identificar eventuais dificuldades na aprendizagem, e saná-las ainda durante o processo de ensino-aprendizagem.

Quanto à avaliação institucional, os Referenciais orientam as instituições no sentido de planejamento e implementação de sistemas de avaliação institucional a fim de produzirem melhorias efetivas de qualidade nas condições de oferta dos cursos e no processo pedagógico. Para tanto, deve-se configurar em um processo permanente e consequente, de modo a subsidiar o aperfeiçoamento dos sistemas de gestão e pedagógico, produzindo, de maneira efetiva, correções na direção da melhoria da qualidade do processo pedagógico coerentemente com o Sistema Nacional de Avaliação da Educação Superior (SINAES). Para ter sucesso neste processo, as instituições devem planejar sistemas que contemplem a avaliação das dimensões: (1) corpo docente, corpo de tutores, corpo técnico-administrativo, e discentes; (2) organização didático-pedagógica; (3) instalações. A avaliação destas dimensões deve ser coerente com o proposto pelo SINAES.

A Universidade Federal do Rio Grande do Sul (UFRGS) atualmente possui um instrumento para avaliação do processo ensino-aprendizagem. Tal instrumento é disponibilizado no portal do aluno ao final de cada semestre letivo tanto para o ensino presencial, quanto para o ensino a distância. Através de 25 questões, o instrumento avalia os seguintes critérios: (i) avaliação do professor; (ii) avaliação da disciplina; (iii) avaliação da infraestrutura e, (iv) autoavaliação do aluno. Verifica-se que esse instrumento não está adequado para avaliar a dinâmica dos cursos a distância da Universidade, tendo em vista a proposição de outros elementos, bem como: atuação de tutores presenciais e a distância, uso das ferramentas da tecnologia de informação e comunicação, e presença dos polos como local de funcionamento dos cursos oferecidos.

Neste contexto, é importante salientar as orientações gerais do Roteiro de Auto-Avaliação Institucional do SINAES, em relação ao cumprimento por parte das instituições dos procedimentos de avaliação e acompanhamento do planejamento institucional, especialmente das atividades educativas mencionadas na dimensão 8, que trata do planejamento e da avaliação.

Dadas as particularidades dos cursos presenciais e a distância, verifica-se que, na realidade, os cursos EaD não utilizam o instrumento proposto pela Universidade citado anteriormente, e cada curso acaba desenvolvendo seus próprios instrumentos e/ou meios de avaliação para ter um mapeamento geral da sua situação. Tal situação traz algumas dificuldades, pois os instrumentos utilizados são incompletos, e é moroso comparar resultados dos diferentes cursos. Além disso, outro agravante é o fato de que a avaliação discente é exigida para fins de progressão docente de acordo com a legislação vigente da Universidade.

Este estudo objetiva propor um instrumento de avaliação da educação a distância para Instituições de Educação Superior, sejam Universidades, Centros Universitários, Faculdades e Institutos Especializados, de natureza pública ou privada.

Para tanto, a seção 2 trata do referencial teórico sobre o tema em questão, a seção 3 apresenta os procedimentos metodológicos adotados, a seção 4, os resultados e, por fim, a seção 5 apresenta as considerações finais do presente estudo.

2. Referencial Teórico

2.1 Panorama do Ensino Superior

O Censo da Educação Superior de 2009 registrou a participação de 2.314 Instituições de Ensino Superior (IES) no País; 28.966 Cursos, sendo 28.771 de graduação e 295 sequenciais de formação específica; 5.954.021 matrículas, e dessas, 838.125 no ensino a distância, destacando-se a predominância do setor privado com 665.429 matrículas (79,4% na EaD). Em 2001, havia 5.359 matrículas na educação à distância, um aumento de 64% em relação ao ano de 2009.

Ao comparar a distribuição do número de matrículas por grau acadêmico, segundo a modalidade de ensino, verifica-se que, enquanto 71% dos cursos presenciais são de bacharelado, metade dos cursos EaD é de licenciatura (CENSO, 2009). A Figura 1 apresenta os dez maiores cursos de graduação, de uma forma geral, assim como os dez maiores cursos no ensino presencial e no ensino a distância, demonstrando que os cursos de Pedagogia e Administração detêm 61,5% das matrículas na educação a distância.

Importante informação no que tange a EaD refere-se ao perfil do aluno. De acordo com o Censo 2009, o aluno EaD ingressa mais tardiamente do que o aluno da graduação presencial e, por consequência, a conclusão do curso ocorre em média aos 36 anos, enquanto no ensino presencial, os alunos concluem aos 28 anos. Em relação ao sexo, na graduação presencial, as mulheres correspondem a 55,1% do número de matrículas e a 58,8% do número de concluintes. Já na modalidade de EaD, 69,2% das matrículas e 76,2% dos concluintes são do sexo feminino.

2.2 A Educação a Distância

No entender de Aretio (1991), docente da Universidade Nacional de Educação a Distância da Espanha (UNED), a educação a distância é uma expressão imprecisa a qual se pode atribuir diversos sentidos. O Quadro 1 apresenta, na opinião de Aretio (1991), as diversas concepções de autores reconhecidos que tem participado ativamente no desenvolvimento da educação a distância.

No entender de Faller (2009), o ambiente da educação a distância integra elementos/dimensões que interagem entre si no processo de ensino-aprendizagem utilizando-se: (1) das tecnologias, como chats, fóruns, e-mails, CDs, DVDs, etc.; (2) da estrutura dos polos (espaço físico, bibliotecas, laboratórios, etc.), assim como do Projeto Pedagógico do Curso (PPC); (3) das pessoas que oportunizam que o PPC seja colocado em prática, ou seja, professores, coordenadores de polos e do curso, tutores, orientadores e funcionários, conforme explicita a Figura 2.

Tratando-se da avaliação na educação a distância, a mesma acontece em dois momentos distintos: (1) vinculando-se à estrutura de apoio fornecida pelo polo, sendo processual ou formativa, e/ou final ou somativa; (2) envolvendo as três dimensões do desenho de pesquisa, tratando-se de uma avaliação de maior abrangência (FALLER, 2009).

No entender de Leite (2005), o processo avaliativo não pode ser uma fôrma, um modelo que oferece um padrão único e técnico para analisar situações que são humanas e complexas. Assim, é importante conhecer as formas como as avaliações se apresentam, o que permite compreender e escolher os alcances confiáveis, técnicos e políticos, para desvendar as possíveis verdades sobre uma situação. É importante entender as racionalidades presentes nos diferentes formatos de avaliação, sejam educacionais ou institucionais, distinguindo seus efeitos e implicações.

Nas aulas, presenciais e não presenciais, os procedimentos costumam ser ritualizados e reprodutivistas, produzidos por um dispositivo pedagógico e um discurso pedagógico que regula a ordem. Desta forma, as práticas educativas podem reproduzir modos de subjetivação individualista e possessivo através da avaliação. (...) Por outro lado, em situações de ensino com as TICs a avaliação tem mostrado ser um processo de aprendizado colaborativo (Seria também participativo?) quando em situação de intercâmbio do saber–fluxo (LÉVY, 1998), não necessariamente do saber -institucionalizado e formal. Nesse aspecto, a aprendizagem pode atingir um grau de autonomia do sujeito frente ao saber auto-gerido que comporta o seu contrário, ou seja, o fechamento de sentidos para o coletivo. Nessas oposições, características do momento vivido em educação, situam-se as justificativas para aumentar a compreensão sobre avaliações que envolvam participação (LEITE et al., 2007, p. 447).

Leite et al. (2007) comenta sobre a necessidade do entendimento da dinâmica da sala de aula, tendo em vista a sociedade da informação e da comunicação, na qual o papel do professor e do aluno na aprendizagem com o auxílio das máquinas está em constante mudança: "[...] O docente aprende junto com os alunos, ambos como profissionais aprenderão de forma continuada, por toda vida, online e off-line"; [...] O que muda são os paradigmas das práticas pedagógicas, as identidades e mentalidades, os modos de subjetivação dos aprendizes, a forma de transação com o conhecimento"; [...] (LEITE et al., 2007, p. 447).

Neste contexto, é importante salientar o papel do Ministério da Educação na avaliação de instituições, cursos e estudantes. O sentido da avaliação nos moldes 'ora impostos' traz consigo uma gama de indicadores de qualidade que devem ser observados e cumpridos pelas instituições. A avaliação, no contexto do SINAES, está totalmente à mercê da regulação, sendo, inclusive, afetada pela natureza das informações prestadas nos sistemas computacionais por parte das instituições.

Ao compreender o cenário vivenciado pelas instituições que promovem a educação a distância, a literatura disponível em relação ao assunto, como a visão da participação mencionada anteriormente por Leite et al. (2007), e os sujeitos que fazem parte do processo mencionado por Faller (2009), percebe-se a necessidade de instrumentos capazes de auxiliar o mapeamento das potencialidades e fragilidades relacionadas ao estudante, ao curso e à instituição como um todo.

Os instrumentos, ora disponíveis pelo Ministério da Educação, para avaliar a educação a distância (autorização e reconhecimento de cursos, credenciamento de polos e credenciamento institucional) trazem consigo parcela desta informação, deixando a critério de cada instituição de ensino, a proposição de ferramentas que venham, de fato, a avaliar os diversos elementos que constituem o ambiente da educação a distância.

Neste sentido, os estudos de Faller (2009), Rodrigues, Oliveira e Rodrigues et al. (2009), Faller e Rodrigues (2010), sinalizam importantes contribuições no que tange a proposição de indicadores para avaliação de cursos de graduação e pós-graduação na modalidade a distância, assim como algumas propostas já aplicadas em outros contextos.

3. Procedimentos Metodológicos

Este trabalho caracteriza-se como um estudo de caso que, na concepção de Yin (2007, p. 32), "é uma investigação empírica que investiga um fenômeno contemporâneo dentro de seu contexto da vida real, especialmente quando os limites entre o fenômeno e o contexto não estão claramente definidos". O estudo de caso foi realizado na UFRGS e teve como objeto de pesquisa a educação a distância.

A UFRGS oferece, atualmente, sete cursos de graduação a distância, todos dentro dos programas de fomento dessa modalidade do Ministério da Educação, disponibilizados como Programas Especiais de Graduação, de acordo com a Resolução CEPE nº 37/2006 (UNIVERSIDADE FEDERAL DO RIO GRANDE DO SUL, 2009). Foi selecionado para ser objeto de investigação, o curso de Licenciatura em Pedagogia por ser o primeiro curso a distância da Universidade em processo de diplomação e, de acordo com os dados apresentados no Censo 2009, o curso com o maior número de matrículas na educação a distância no país, conforme evidenciado na Figura 1.

A coleta de dados foi efetuada em três etapas. Na primeira etapa, foi realizada pesquisa bibliográfica a partir dos instrumentos e da legislação relacionada à educação a distância disponibilizada pelo Ministério da Educação, assim como da literatura disponível sobre o tema. Esta etapa permitiu a construção da versão preliminar do instrumento de avaliação. Na segunda etapa, foi realizada uma pesquisa de campo para aplicação de um pré-teste do instrumento de avaliação junto aos alunos do Curso de Licencitura em Pedagogia a distância, que é ofertado para funcionamento em cinco polos: Alvorada, Gravataí, São Leopoldo, Sapiranga e Três Cachoeiras. A última etapa consistiu-se na consolidação do instrumento, através de sua validação junto à amostra considerada (^{Apêndice A}).

Cabe salientar que a escala adotada no instrumento de coleta é de concordância, onde o 1 refere-se a Discordo Plenamente e 5 a Concordo Plenamente. O instrumento possui 67 itens que avaliam o grau de concordância geral do aluno em relação às seguintes dimensões e constructos:

(1). Corpo docente, corpo de tutores e coordenação: compreende Professores, Tutores Presenciais, Tutores a Distância e Coordenação de Curso e Polo;

(2). Organização didático-pedagógica: compreende Sistema de Ensino, Participação em Atividades Acadêmicas, Organização do Curso e Expectativas referentes a Conhecimento e Empregabilidade;

(3). Instalações físicas: compreende Condições do Polo, Suporte Acadêmico/Técnico e Tecnologias de Informação e Comunicação (TIC).

4. Resultados

A pesquisa foi realizada nos meses de outubro a dezembro de 2010 junto ao Curso de Licenciatura em Pedagogia, modalidade a distância. Ao total, 165 alunos responderam ao instrumento implantado e disponibilizado via plataforma de aprendizagem utilizada pelo Curso. A seguir apresentam-se os resultados.

4.1 Descrição da Amostra

A população do estudo é formada pelos alunos matriculados no Curso de Pedagogia, na modalidade a distância da UFRGS, distribuída entre os polos de Alvorada (1), Gravataí (2), São Leopoldo (3), Sapiranga (4) e Três Cachoeiras (5). Da população de 347 alunos que se formaram nos cinco polos do Curso, 47,55% responderam ao questionário, totalizando uma amostra de 165 respondentes. Dessa forma, o presente estudo tem sua amostra devidamente distribuída entre os cinco polos, conforme apresentado na Tabela 1.

4.2 Descrição do Perfil dos Entrevistados

A Tabela 2 apresenta a descrição do perfil dos entrevistados. Do total dos alunos respondentes, 98,8% são do sexo feminino; 35,8% têm dois filhos; 69,7% são casados; 62,4% trabalham como funcionário(a) do Governo Federal, Estadual Ou Municipal e 44,8% possuem uma renda familiar de R$1.020,00 a R$ 2.040,00 (entre 2 e 4 salários mínimos).

4.3 Análise da Consistência Interna

Foram realizados testes Alfa de Cronbach para a etapa de validação dos fatores, analisando o grau de consistência das variáveis e confiabilidade dos constructos, para os quais foi considerado o critério de Alfa superior a 0,7, obtendo-se valores superiores a 0,758 em todos os constructos, o que corroborou a confiabilidade dos mesmos. As variáveis correspondentes a cada constructo, bem como os respectivos valores de Alfa, encontram-se discriminados na Tabela 3. Na concepção de Hair et al. (2005), um valor de pelo menos 0,70 aponta uma fidedignidade aceitável, mesmo reconhecendo que esse valor não seja um padrão absoluto.

Observada a confiabilidade do constructo, este foi obtido a partir da média das variáveis que o compõem. Por exemplo, o constructo Professores refere-se à média das variáveis 01, 02, 03, 04, 05, 06, 07, 08 e 09, cujo Alfa resultou em 0,982, e assim sucessivamente com as demais dimensões.

4.4 Análise Descritiva e Comparativa das Dimensões

Conforme os dados apresentados na Tabela 4, é possível constatar que o Polo de Três Cachoeiras obteve a menor média para os constructos Professores (4,21), Tutores Presenciais (3,93), Participação em Atividades Acadêmicas (3,91), Expectativas referentes a Conhecimento e Empregabilidade (4,66) e Suporte Acadêmico/Técnico (4,07).

O Polo de Gravataí obteve as maiores médias para os constructos Professores (4,82), Tutores Presenciais (4,75), Tutores a Distância (4,87), Sistema de Ensino (4,85), Participação em Atividades Acadêmicas (4,68), Organização do Curso (4,93), Suporte Acadêmico/Técnico (4,41) e TIC's (4,89), e obteve a menor média para o constructo Condições do Polo (4,04).

Ainda, de acordo com a Tabela 4, quanto ao constructo Tutores a Distância, o Polo de São Leopoldo apresentou a menor média (4,32), assim como para Sistema de Ensino (4,32), Organização do Curso (4,31) e TIC's (4,37).

O Polo de Sapiranga apresenta maiores médias para Expectativas referentes a Conhecimento e Empregabilidade (4,92) e Condições do Polo (4,45), entretanto, apresenta menor média para a Coordenação do Curso e Polo (4,14).

Salienta-se que o Polo de Sapiranga possui convênio com a Universidade Aberta do Brasil (UAB), e os outros são polos PROLIC, ou seja, existe um convênio da UFRGS com a prefeitura da cidade onde o polo está inserido. Pelas informações prestadas pelo Curso, o Polo de Sapiranga apresenta uma infraestrutura melhor que os outros Polos, pois recebem da CAPES/MEC computadores e material para videoconferências, além de o coordenador do polo receber uma bolsa mensal de R$1.100,00 (hum mil e cem reais); ainda, a UAB faz visitas aos polos para avaliá-los anualmente. Nos polos PROLIC, os coordenadores de polos não recebem bolsa e a visita é feita pela SEAD/ UFRGS. Há incentivo da parte da SEAD aos polos PROLIC que solicitem à CAPES/ MEC a transformação para polos UAB, e cabe a cada município encaminhar a proposta. O ^{Apêndice B} apresenta, por polo, as médias gerais de cada constructo.

Foi aplicado o teste não-paramétrico Kruskal Wallis, a fim de testar a existência de diferenças entre os polos em cada constructo analisado. Este tipo de teste não exige que suposições, tais como normalidade dos dados e homogeneidade de variâncias, sejam satisfeitas para a validação dos resultados.

Somente dois constructos não apresentaram diferença significativa entre as médias dos polos pesquisados: Suporte Acadêmico/Técnico (p-valor = 0,077), e Condições do polo (p-valor = 0,671). Nos demais constructos que apresentaram diferença significativa, adotou-se o teste de Dunn para as comparações múltiplas.

Para os constructos Tutores Presenciais e Professores, é possível destacar que a maior média encontrada em cada constructo (4,746 e 4,816, respectivamente) é a do Polo de Gravataí, e a menor média (3,934 e 4,208, respectivamente), a do Polo de Três Cachoeiras. Para estes dois constructos, a média encontrada em Gravataí é significativamente maior que a de Três Cachoeiras, além de no constructo Professores, Gravataí também possui média significativamente maior que Sapiranga e São Leopoldo. Para os constructos Participação em Atividades Acadêmicas e Expectativas referentes a Conhecimento e Empregabilidade, é possível destacar que a maior média encontrada em ambos constructos (4,675 e 4,922, respectivamente) é a do Polo de Gravataí, sendo que esta difere, significativamente, das menores médias encontradas do Polo de São Leopoldo e Três Cachoeiras, nos dois constructos. O Polo de Sapiranga também apresenta média significativamente maior que o Polo de Três Cachoeiras referente ao constructo Expectativas referentes a Conhecimento e Empregabilidade, conforme a Tabela 5.

Para o constructo Coordenação de Curso e Polo, conforme evidenciado na Tabela 6, é possível destacar que a maior média encontrada (4,697) é a do Polo de Alvorada, e esta difere significativamente da menor média encontrada (4,139), do Polo de Sapiranga.

Para os constructos Tutores a Distância, Organização do Curso e Tecnologias de Informação e Comunicação, através da Tabela 7, é possível destacar que a maior média encontrada em cada constructo (4,872, 4,930 e 4,891, respectivamente) é a do Polo de Gravataí, e esta é significativamente maior, para os três constructos, que as médias dos Polos de Três Cachoeiras e São Leopoldo. O Polo de Sapiranga também apresenta média significativamente maior que a do Polo de São Leopoldo no constructo Organização do Curso. O constructo Sistema de Ensino também apresenta maior média no Polo de Gravataí (4,853), sendo que esta é significativamente diferente da menor média encontrada, do Polo de São Leopoldo (4,320).

4.5 Influência dos Construtos na Avaliação do Curso

A fim de verificar a existência de relação entre os constructos, calculou-se o Coeficiente de Correlação de Pearson, cujos resultados são apresentados na Tabela 12. De acordo com Pestana e Gageiro (2003, p. 189), o "coeficiente de correlação R de Pearson é uma medida de associação linear entre variáveis quantitativas e varia entre -1 e 1". A existência da correlação indica que a intensidade de um fenômeno é acompanhada tendencialmente por outro, embora eles não sejam indissoluvelmente ligados. Por convenção, os autores sugerem que R < 0,2 = associação muito baixa; R entre 0,2 e 0,39 = associação baixa; R entre 0,4 e 0,69 = associação moderada; R entre 0,7 e 0,89 = associação alta; e R entre 0,9 e 1 = associação muito alta (PESTANA; GAGEIRO, 2003).

De modo geral, os dados demonstram uma alta correlação do constructo Expectativas referentes ao Conhecimento e Empregabilidade com o constructo Organização do Curso (R = 0,846) e, da mesma forma, com o Sistema de Ensino (R = 0,808), indicando que quanto melhor a percepção de um, é também melhor a percepção do outro.

O constructo Organização do Curso obteve a terceira e quarta maior correlação positiva encontrada com a dimensão Sistema de Ensino (R = 0,807) e a dimensão Professores (R = 0,787).

A correlação mais baixa encontrada foi entre o constructo Coordenação de Curso e de Polo com as Condições do Polo (R = 0,377), indicando que, não necessariamente, quanto melhor a percepção das Condições do Polo, melhor será a percepção da Coordenação, e vice-versa.

5. Considerações Finais

Foi desenvolvido um instrumento para a avaliação de cursos a distância. Os resultados apurados através da aplicação junto a cinco polos do curso de Licenciatura em Pedagogia, modalidade a distância, na Universidade Federal do Rio Grande do Sul permitiram validar o instrumento proposto. As dimensões pessoas, organização didático-pedagógica e instalações físicas, e os constructos inerentes a cada dimensão permitiram apurar o grau de concordância e/ou discordância dos alunos em relação aos mesmos.

Quanto à dimensão pessoas, verificou-se que as médias atribuídas para todos os constructos foram superiores a 4 (considerando a escala 1 a 5), o que indica que os alunos estão satisfeitos com esta dimensão como um todo. Ressalta-se que o constructo referente aos tutores presenciais recebeu a pior avaliação dos alunos (4,32). Em particular, o item referente ao domínio prático sobre o conteúdo, relacionando-o com a realidade, foi aquele que recebeu pontuação menor (4,11).

Os constructos que compõem a dimensão Organização Didático-Pedagógica, também apresentaram médias superiores a 4. No entanto, destaca-se a participação em atividades acadêmicas (4,22), e nela, a ampla possibilidade de integração com os colegas em atividades sociais (4,05) como itens que merecem observação.

Por fim, a dimensão referente às Instalações Físicas, que também apresentou média superior a 4, foi aquela que recebeu pontuações menores. O constructo que apresentou menor média (4,26) foi as Condições do Polo, onde o item referente às necessidades atendidas pelo acervo disponível foi o único que apresentou média inferior a 4 (3,82).

Destaca-se, ainda, que os alunos pertencentes ao polo de Gravataí estão, significativamente, mais satisfeitos do que os alunos pertencentes ao polo de São Leopoldo, quanto aos constructos Professores, Tutores a Distância, Sistema de Ensino, Participação em Atividades Acadêmicas, Organização do Curso, Expectativas referentes a Conhecimento e Empregabilidade e TIC. O polo de Gravataí também obteve média significativamente maior que o polo de Três Cachoeiras nos constructos Tutores Presenciais, Professores, Tutores a Distância, Participação em Atividades Acadêmicas, Organização do Curso, Expectativas referentes a Conhecimento e Empregabilidade e TIC.

De modo geral, é possível concluir que, no entender dos alunos, a dimensão Instalações e, nela, a questão específica das condições dos polos é o item que merece atenção especial por parte da coordenação do curso, tendo em vista a realidade diferenciada de cada polo em que o curso é ministrado. Neste sentido, cabe verificar qual a estrutura de funcionamento recomendada pelo Ministério da Educação – INEP/ MEC e, também, pela CAPES, órgão que, atualmente, é responsável pela avaliação dos polos de ensino a distância. É necessário que os cursos estejam atentos aos padrões de qualidade, e que incorporem esses padrões nos seus projetos pedagógicos a fim de criar uma base sólida de funcionamento que garanta a excelência no processo ensino-aprendizagem.

Neste contexto, o instrumento, ora proposto, vem auxiliar as instituições no sentido de apresentar uma ferramenta útil que permite a avaliação das condições de oferta dos cursos ministrados a distância, apresentando coerência interna e adequação às recomendações do Ministério da Educação. O embasamento do referencial teórico e a aplicação prática permitiram concluir que o instrumento proposto é abrangente e possui potencial para ser amplamente utilizado para avaliação da educação a distância em Instituições de Ensino Superior, de natureza pública e/ou privada.

• ARETIO, L. G. Un concepto integrador de enseñanza a distancia. Radio y educación de adultos, n. 17, 3-6 p., boletín cuatrimestral (quadrimestral) maio/ago., 1991.
• FALLER, L. P. Estudo de parâmetros para a avaliação de cursos de ensino a distância (EAD). 2009. 165 f. Dissertação (Mestrado)Programa de Pós-Graduação em Administração, Universidade Federal de Santa Maria, Santa Maria, 2009.
• FALLER, L. P., RODRIGUES, C. M. C. Proposta de Instrumento para Avaliação de Cursos de Ensino a Distância (EAD). In: ENCONTRO NACIONAL DE ENGENHARIA DE PRODUÇÃO, 3., 2010, São Carlos. Anais... São Carlos, SP: ABREPO, 2010.
• HAIR JUNIOR, J. et al. Análise multivariada de dados. 5. ed. Porto Alegre: Bookman, 2005.
• LEITE, D. Reformas universitárias: avaliação institucional participativa. Petrópolis, RJ: Vozes, 2005.
• LEITE, D. et al. Avaliação participativa online e off-line. Avaliação: RAIES: UNISO, Sorocaba, SP, v. 12, n. 3, p. 445-460, set., 2007.
• MINISTÉRIO DA EDUCAÇÃO. Censo da educação superior 2009 Brasília, DF: MEC, 2009. Disponível em: <http://www.inep.mec.gov.br>. Acesso em: 23 maio 2014.
• PESTANA, M. H.; GAGEIRO, J. N. Análise de dados para ciências sociais: a complementaridade do SPSS. 3. ed. Lisboa: Sílabo, 2003.
• RODRIGUES, A. F. C., OLIVEIRA, J. H. R., RODRIGUES, C. M. C. Indicadores de desempenho para cursos de pós-graduação lato sensu modalidade a distância. In: ENCONTRO NACIONAL DE ENGENHARIA DE PRODUÇÃO, 29., 2009, Salvador. Anais... Salvador, BA: ABREPO, 2009.
• UNIVERSIDADE FEDERAL DO RIO GRANDE DO SUL. Relatório de Auto-avaliação Institucional 2009. Porto Alegre: UFRGS; Comissão Própria de Avaliação, 2009.
• YIN, R. K. Estudo de caso: planejamento e métodos. 3. ed. Porto Alegre: Bookman, 2005.

Apêndice A

Apêndice B

Datas de Publicação

• Publicação nesta coleção
  22 Jul 2014
• Data do Fascículo
  Jun 2014