POLÍTICA DE AUTOAVALIAÇÃO - ENGENHARIA DE PRODUÇÃO (UNIFEI)
Comentários Gerais sobre o Projeto Pedagógico do Curso
INTRODUÇÃO
Objetivo
Este documento foi organizado com o objetivo principal de estruturar algumas possibilidades de complementos a serem adicionadas à política de autoavaliação estruturada pelo Núcleo Docente Estruturante (NDE) de Engenharia de Produção em seu Projeto Pedagógico do Curso (PPC).
Obviamente, todas as sugestões aqui realizadas deverão ser apreciadas pelo presidente do NDE, Prof. Dr. Fabiano Leal e, se relevantes, levadas a aprovação do NDE e, posteriormente à assembléia do IEPG. Contudo, ressalto que entendo ser necessário um passo adicional antes de ser levado para aprovação da assembléia, julgo ser relevante apresentar a política de autoavaliação para a CPA para que não tenhamos nenhuma “surpresa operacional” após aprovação na assembléia. O ideal, seria que o Prof. André intermediasse a reunião.
Estrutura
Com base em seu objetivo, o documento foi organizado a partir da seguinte estrutura de seções:
SEÇÃO 2 - Políticas de Autoavaliação: Aqui são apresentados os principais aspectos a serem abordados em uma política de autoavaliação o que irá nortear as sugestões realizadas;
SEÇÃO 3 - Complementos de Análise: Aqui são realizadas sugestões de complementos a serem adicionados nas formulários de modo a contemplar a política de autoavaliação;
SEÇÃO 4 - Proposta de Plataforma de Análise de Dados: Aqui é realizada uma sugestão de procedimento para compilação, análise e divulgação periódica dos resultados da autoavaliação.
POLÍTICAS DE AUTOAVALIAÇÃO
Os conteúdos necessários de uma política de autoavaliação são resumidamente organizados no organograma apresentado na Figura 1:
FIGURA 1 - Estrutura da Política de Autoavaliação
Resumidamente, cada um dos itens pode ser assim explicado:
Políticas e Preparação
- Definição de uma equipe responsável pela coordenação, operação, divulgação e atuação dos resultados da autoavaliação (com respectivas responsabilidades);
- Definição de uma estratégia de sensibilização de todos os agentes envolvidos na autoavaliação;
- Definição da missão (razão de existir), planejamento estratégico (metas de médio e longo prazos), aspectos a serem avaliados, conceito de qualidade para o curso e vinculação com planejamento da instituição;
- Definição da abordagem da autoavaliação, isto é, do foco no aluno evadido, e/ou no egresso, e/ou no professor, e/ou na administração, e/ou na pesquisa e etc.;
- Definições dos critérios de avaliação, escalas e níveis de satisfação;
- Definições dos usos dos resultados (quais decisões dependem dos resultados da avaliação?, quem será o responsável pela tomada de decisão?, como a implementação da decisão será acompanhada?);
- Definição do cronograma (periodicidade da coleta de dados, frequência de compilação dos resultados, frequência de divulgação dos resultados).
Implementação e Procedimentos
- Definição do método de autoavaliação (técnicas, instrumentos, formas de análise);
- Definições dos recursos utilizados na autoavaliação;
- Monitoramento do uso dos resultados.
Divulgação de Resultados
- Definições de instrumentos de divulgação dos resultados.
Uso de Resultados
- Definições de monitoramento do uso dos resultados.
Meta-Avaliação
- Definição de avaliação do processo de autoavaliação após uma determinada quantidade de ciclos, de modo a realizar ajustes na política de autoavaliação.
Uma vez que os conteúdos necessários foram expostos, nos capítulos seguintes são discutidas sugestões de complementos a serem adicionados ao PPC de Engenharia de Produção da UNIFEI.
COMPLEMENTOS DE ANÁLISE
Alterações de Forma
Algumas definições de autoavaliação são apresentadas ao longo do PPC antes do capítulo 9 (capítulo orientado a estas definições). Isso pode nos prejudicar, visto que, é necessário definir a política e a preparação da autoavaliação do curso antes das definições de seus procedimentos práticos.
Mais especificamente, esse problema de definição de procedimento antes de definição de política está presente nos seguintes trechos:
PROJETO EPR/2 (Pág. 37): “Antes do início da concepção do projeto, deverá ocorrer nesta disciplina uma atividade com o objetivo de se verificar a percepção dos discentes quanto ao desenvolvimento de competências até o momento. Separados em equipes, os alunos desta disciplina deverão preencher um formulário de autoavaliação de competências desenvolvidas no curso (cada equipe deverá chegar ao consenso e apresentar apenas um formulário respondido). Este formulário será similar ao utilizado no TCC, como mostra a seção 6.6 deste documento.”
TCC (Pág. 70): “Ao final do processo do TCC, os discentes deverão receber um formulário on-line para uma autoavaliação de competências desenvolvidas no TCC. As respostas não serão utilizadas para composição de nota. O objetivo deste formulário é que o coordenador de TCC possa analisar como o desenvolvimento das competências é percebido pelo discente. Esta análise do coordenador de TCC deverá ser apresentada ao NDE do curso ao final de cada ano letivo, sendo esta análise uma fonte importante de informações para reformulações no processo de condução do TCC e nas atualizações futuras do PPC.”
ESTÁGIO (Pág. 74): “O primeiro formulário é enviado ao discente que concluiu o estágio. Neste formulário o discente faz uma autoavaliação referente às competências desenvolvidas no estágio e registra sugestões para o curso de graduação. A estrutura deste formulário segue o mesmo padrão do formulário utilizado na autoavaliação do discente no TCC, apresentado na seção 6 deste documento. Ou seja, para cada competência é solicitada a seleção de um valor inteiro dentro de uma escala de 1 a 4, sendo 1 referente à “Nenhum desenvolvimento desta competência foi percebido” e 4 referente à “Alto desenvolvimento desta competência foi percebido”."
Com base no descrito, minha primeira sugestão é que todos os tópicos relacionados à política de autoavaliação seja consolidada no Capítulo 9 do PPC “PROCESSO DE AUTOAVALIAÇÃO E GESTÃO DA APRENDIZAGEM”. Apenas para mantermos o “dicionário” da área, também sugiro alterar o nome para “POLÍTICA E GESTÃO DA AUTOAVALIAÇÃO”.
SUGESTÃO 1 (Nível de Importância: Importante):
Realocar todos os tópicos sobre autoavaliação para o capítulo 9.
SUGESTÃO 2 (Nível de Importância: Perfumaria):
Alterar o nome do capítulo 9 para “POLÍTICA E GESTÃO DE AUTOAVALIAÇÃO”.
Além disso, ao longo dos tópicos são apresentados alguns exemplos de formulários que serão aplicados. Isto pode trazer alguns problemas pois mesmo inserindo a expressão “exemplo de formulário” a simples alteração de layout (as vezes até por conta de alguma alteração do google forms) pode evidenciar um desajuste no corpo do texto do PPC.
Nesse sentido, entendo ser relevante colocar no corpo do texto apenas as diretrizes gerais de análise de cada uma das avaliações e realocar todos os exemplos de formulários para um anexo. Assim, caso haja alguma alteração nos formulários, basta alterar o anexo do PPC.
SUGESTÃO 3 (Nível de Importância: Médio):
Alterar o nome do capítulo 9 para “POLÍTICA E GESTÃO DE AUTOAVALIAÇÃO”.
Uma vez, discutidas as sugestões iniciais de forma, ressalta-se a importância de se realizar algumas adições de modo a complementar à nossa política de autoavaliação.
Adições Necessárias
Conforme explicitado, a política de autoavaliação segue uma estrutura relativamente consolidada e, portanto, sugiro que os conteúdos apresentados no capítulo 9 sigam esta estruturação. Como não identifiquei alguns itens, penso que seria relevante aproveitar a oportunidade para adicioná-los.
Assim, penso que poderíamos começar o capítulo atribuindo expressamente a responsabilidade pela autoavaliação no nosso curso, cumpre ressaltar, ao NDE.
SUGESTÃO 4 (Nível de Importância: Importante):
Inclusão de texto para atribuição de responsabilidades:
Toda a operação e gestão da política de autoavaliação do Curso de Engenharia de Produção da Universidade Federal de Itajubá é de exclusiva respondabilidade de seu Núcleo Docente Estruturante. Assim, todas as etapas de políticas e preparação, implementação e procedimentos, divulgação e uso dos resultados e meta-avaliação ficam a cargo de seus membros.
Em seguida, penso que poderíamos já adicionar as características específicas de autoavaliação do nosso curso para, só então, apresentar e contrapor às características definidas pela Comissão Permanente de Autoavaliação (CPA) que correpsonderia ao nosso alinhamento em relação a UNIFEI. Estou chamando aqui de “características específicas do nosso curso” os itens explicados na seção Seção 2.
Assim, segue o conjunto de sugestões de inclusões ao documento:
SUGESTÃO 5 (Nível de Importância: Importante):
Inclusão de breve texto sobre engajamento:
Também cumpre ao Núcleo Docente Estruturante do curso de Engenharia de Produção a realização de ações de modo a fomentar a participação e o engajamento de toda a comunidade do curso nas
atividades necessárias à execução da autoavaliação e em suas ações decorrentes. (aqui poderíamos materializar este engajamento expondo a organização de emails para os professores e estudantes, organização de um material de divulgação explicando a importância e as ações da autoavaliação, breves apresentações nas assembléias, colegiados e CA e, além disso, no meu entendimento acho que seria relevante adicionar as obrigatoriedades quando possível. Por exemplo, junto com o TCC o aluno tem que entregar a autoavaliação, junto com os documentos de estágio, os alunos tem que entregar as respectivas autoavaliações. Se todos concordarem, adicionaríamos este texto também).
Após definição das responsabilidades (incluindo como responsabilidade, o engajamento da comunidade), penso que seria relevante adicionar a missão da nossa autoavaliação. A Missão de uma instituição e/ou de um determinado instrumento (como no nosso caso, do instrumento de autoavaliação) pode ser entendida como a definição de sua razão de existir.
SUGESTÃO 6 (Nível de Importância: Importante):
Inclusão da Missão:
A Autoavaliação do Curso de Engenharia de Produção da Universidade Federal de Itajubá - Campus Itajubá (UNIFEI - Itajubá) tem por misssão organizar um diagnóstico acerca da qualidade do curso a partir de diferentes abordagens de avaliação de modo a pautar ações a serem tomadas pelo Núcleo Docente Estruturante do curso (NDE-EPR) na direção da melhoria contínua. (achei cafona, mas seria um ponta pé inicial ao texto).
Uma vez definida a missão, penso há a “deixa no texto” para definição das abordagens de análise. Estas abordagens podem ser organizadas de acordo com as óticas de análise de cada um dos questionários aplicados. Um início do texto é apresnetado abaixo:
SUGESTÃO 7 (Nível de Importância: Importante):
Inclusão das Abordagens de Avaliação: Com o objetivo de mensurar a qualidade de curso em todos os seus fundamentos e acepções na Tabela XXX são apresentadas as abordagens de autoavaliação do curso e os respectivos focos de análise, fonte e ótica de coleta de dados, frequência de coleta de dados e apresentação dos resultados e tomada de decisão:
ABORDAGEM | FOCO | FONTE | ÓTICA |
---|---|---|---|
Desenvolvimento de Competências, Objetivos de Aprendizagem e Didática do Professor | Análise da Disciplina e Didática do Professor | Disciplina Obrigatórias | Aluno |
Desenvolvimento de Competências | Desenvolvimento do Aluno | Disciplina “EPR/2” | Aluno e Comunidade Externa |
Desenvolvimento de Competências, Objetivos de Aprendizagem e Didática do Professor | Análise da Disciplina e Didática do Professor | Disciplinas Optativas | Aluno |
Desenvolvimento de Competências | Desenvolvimento do Aluno e Orientação do Professor | TCC | Aluno |
Desenvolvimento de Competências | Desenvolvimento do Aluno e Eficiência do Curso | Estágio Supervisionado | Aluno e Supervisor do Estágio (Representante da Comunidade Externa) |
Desenvolvimento de Competências | Desenvolvimento do Aluno e Eficiência do Curso | Contatos com Egressos | Egressos |
Administração | Eficiência e Comunicação | Contato com Estudantes, Professores e Técnicos Administrativos | Estudantes, Professores e Técnicos Administrativos |
Em associação, pode-se complementar o texto das abordagens (após a tabela):
SUGESTÃO 7 (complemento) (Nível de Importância: Importante):
Inclusão das Abordagens de Avaliação: Cumpre ressaltar que formulários Google serão os instrumentos de todas as coletas de dados
(acredito que possa ser relevante acrescentar que os recursos do Google fazem parte da plataforma da instituição). Além disso, cada questionário possuirá dois grupos de perguntas, as
questões com escala de likert para uma análise quantitativa da percepção do respondente e também uma questão aberta de modo a contemplar possibilidades de críticas e sugestões elaboradas pelo próprio autor.
Entendo que a decisão por uma escala de Likert ser par foi acertada, visto que, elimina-se o viés de centro de pessoas “supostamente indecisas” ou que não querem se comprometer com as respostas 1.
SUGESTÃO 8 (Nível de Importância: Importante):
Inclusão dos critérios: Para o grupo de questões com análise quantitativa, adotou-se uma escala de Likert de 1 à 4 em que, para todas as questões, 4 sempre será considerado o nível de satisfação total e 1 sempre será considerado o nível de insatisfação total, conforme demosntrado no adiagrama abaixo:
FIGURA 2 - Critérios Autoavaliação
Uma vez realizadas todas as inclusões, resta adicionar as frequências, metas de médio e longo prazo e as ações (caso aceitem a proposta de deixar a autoavaliação em um capítulo único, já teremos alguns parâmetros de tomada de decisão organizados).
SUGESTÃO 9 (Nível de Importância: Importante):
Inclusão das Frequências: Todas as coletas de dados cujas fontes são disciplinas, ou TCC, ou estágio ocorrerão ao final da de sua ocorrência. Por sua vez, as coletas de dados cujas fontes são os egressos, ou cuja abordagem consiste na avaliação da administração ocorrerão a cada dois anos. O prazo de coleta de dados de cada um dos formulários será de 10 dias corridos a contar da data de envio. Todos os Formulários serão encaminhados via email e não será cobrada identificação do respondente.
Além disso, cumpre destacar as frequências de divulgação de resultados. No meu entendimento, elas devem ocorrer logo após a finalização da coleta de dados. No caso das disciplinas e TCC, para evitar constranger os professores, apenas deve-se apresentar os resultados gerais do curso (média das notas das discplinas). os resultados particulares de cada professor deve ser visto só pelo NDE e pelo próprio professor.
Outro ponto importante: sugeri adicionar uma questão aberta pois é assim é possível receber sugestões e as análises podem se pautar em núvens de palavras. Porém, com questões abertas, “respostas deselegantes” podem aparecer. Neste caso, recomendo que apenas o NDE tenha acesso a este tipo de avaliação.
SUGESTÃO 10 (Nível de Importância: Importante):
Inclusão dos Resultados: Os resultados consolidados serão apresentados ao final de cada ciclo de autoavaliação e serão enviados por e-mail à todos os participantes (além disso, podemos acrescentar que divulgaremos os resultados no site).
As metas de médio prazo podem incluir a avaliação de um primeiro ciclo finalizado de operação do novo PPC de modo a pautar reuniões do NDE para possibilidades de novos ajustes. As metas de longo prazo eu penso que são mais genéricas (“estilo ser uma universidade de excelência e reconhecimento em ensino e desenvolvimento de competências em seus estudantes”).
PROPOSTA DE PLATAFORMA DE ANÁLISE DE DADOS
A integração de um aplicativo de avaliação e geração automática de relatório (em PDF ou HTML, por exemplo) e o google forms é relativamente fácil. Gostaria de desenvolver o aplicativo. Assim, nós dispararíamos os forms, daríamos 10 dias para resposta e, depois disso, com um clique, geraríamos todos os resultados.
Além disso, o aplicativo permitirá o controle de acesso para que não haja qualquer problema de exposição de envolvidos.
Clique AQUI um ponta pé inicial para o aplicativo. Ele seria encerrado após aprovação do PPC na assembléia.
As pessoas não sabem o que querem. Quando sabem não dizem. Quando dizem, mentem!↩︎