O artigo avalia o impacto do Programa Ensino Integral (PEI), implementado pela rede estadual de ensino de São Paulo desde 2012, sobre o desempenho dos estudantes dos anos finais do ensino fundamental nos testes de português e matemática do Sistema de Avaliação da Educação Básica (Saeb). Por meio da aplicação combinada das técnicas de Pareamento por Escore de Propensão e Diferenças em Diferenças, foram obtidas estimativas de impactos positivos do PEI, sendo os impactos de três anos de participação no programa superiores aos impactos de um ano de participação.
{"title":"Efeitos do Programa Ensino Integral sobre o desempenho dos alunos no Saeb","authors":"Fernando Vizotto Galvão","doi":"10.18222/eae.v34.9346","DOIUrl":"https://doi.org/10.18222/eae.v34.9346","url":null,"abstract":"O artigo avalia o impacto do Programa Ensino Integral (PEI), implementado pela rede estadual de ensino de São Paulo desde 2012, sobre o desempenho dos estudantes dos anos finais do ensino fundamental nos testes de português e matemática do Sistema de Avaliação da Educação Básica (Saeb). Por meio da aplicação combinada das técnicas de Pareamento por Escore de Propensão e Diferenças em Diferenças, foram obtidas estimativas de impactos positivos do PEI, sendo os impactos de três anos de participação no programa superiores aos impactos de um ano de participação.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"17 11","pages":"0"},"PeriodicalIF":0.0,"publicationDate":"2023-11-08","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"135341460","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Adriana Cioato Ferrazza, Jeovani Schmitt, Dalton Francisco de Andrade Andrade, Andrea Cristina Konrath, Silvana Ligia Vincenzi
A pesquisa buscou analisar a evasão recorrendo à identificação de Funcionamento Diferencial dos Itens no contexto do ensino superior presencial em instituições de ensino superior pública e privada comunitária com aplicação do instrumento WWH- -dropout scale. A avaliação das propriedades psicométricas dos itens foi realizada por meio da Teoria de Resposta ao Item e o estudo do viés, pelo Método de Regressão Logística, comparando instituições pública e privada. A análise do viés dos itens identificou dois itens com funcionamento diferencial e o reposicionamento desses itens na escala revelou que o desempenho discente influencia mais a evasão na instituição privada do que na pública e contribui para a atuação antecipada e diferenciada das instituições de ensino na prevenção à evasão.
{"title":"Adequação psicométrica de uma escala de medida de propensão à evasão","authors":"Adriana Cioato Ferrazza, Jeovani Schmitt, Dalton Francisco de Andrade Andrade, Andrea Cristina Konrath, Silvana Ligia Vincenzi","doi":"10.18222/eae.v34.9362","DOIUrl":"https://doi.org/10.18222/eae.v34.9362","url":null,"abstract":"A pesquisa buscou analisar a evasão recorrendo à identificação de Funcionamento Diferencial dos Itens no contexto do ensino superior presencial em instituições de ensino superior pública e privada comunitária com aplicação do instrumento WWH- -dropout scale. A avaliação das propriedades psicométricas dos itens foi realizada por meio da Teoria de Resposta ao Item e o estudo do viés, pelo Método de Regressão Logística, comparando instituições pública e privada. A análise do viés dos itens identificou dois itens com funcionamento diferencial e o reposicionamento desses itens na escala revelou que o desempenho discente influencia mais a evasão na instituição privada do que na pública e contribui para a atuação antecipada e diferenciada das instituições de ensino na prevenção à evasão.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":"0"},"PeriodicalIF":0.0,"publicationDate":"2023-10-26","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"135013793","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Carlos Eduardo Andrade Pinheiro, Diogo Onofre de Souza
O artigo objetiva aferir se o Teste de Progresso é apropriado para avaliar cursos e estudantes em diferentes fases da graduação de medicina. Analisam-se as características das questões e a confiabilidade de três testes de progresso já aplicados. Constatou-se que, para os estudantes do 2º ano, 76,4% das questões se mostraram de qualidade pobre (bisserial < 0,2); diminuindo para 47,7% no 4º ano e para 25,3% no 6º ano. A confiabilidade dos testes, pelo alfa de Cronbach, foi de somente 0,60 para os alunos do 2º ano, aumentando para 0,76 para os do 4º ano e 0,87 para os alunos do 6º ano. A forma atual do Teste de Progresso mostrou confiabilidade baixa e inaceitável para os estudantes do 2º ano, razoável para os do 4º e ótima para os estudantes do 6º ano. Um aperfeiçoamento dessa forma de avaliação longitudinal é proposto.
{"title":"Avaliação longitudinal de estudantes de medicina: o teste de progresso é apropriado?","authors":"Carlos Eduardo Andrade Pinheiro, Diogo Onofre de Souza","doi":"10.18222/eae.v34.9220","DOIUrl":"https://doi.org/10.18222/eae.v34.9220","url":null,"abstract":"O artigo objetiva aferir se o Teste de Progresso é apropriado para avaliar cursos e estudantes em diferentes fases da graduação de medicina. Analisam-se as características das questões e a confiabilidade de três testes de progresso já aplicados. Constatou-se que, para os estudantes do 2º ano, 76,4% das questões se mostraram de qualidade pobre (bisserial < 0,2); diminuindo para 47,7% no 4º ano e para 25,3% no 6º ano. A confiabilidade dos testes, pelo alfa de Cronbach, foi de somente 0,60 para os alunos do 2º ano, aumentando para 0,76 para os do 4º ano e 0,87 para os alunos do 6º ano. A forma atual do Teste de Progresso mostrou confiabilidade baixa e inaceitável para os estudantes do 2º ano, razoável para os do 4º e ótima para os estudantes do 6º ano. Um aperfeiçoamento dessa forma de avaliação longitudinal é proposto.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"41 1","pages":"0"},"PeriodicalIF":0.0,"publicationDate":"2023-09-12","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"135825730","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Pub Date : 2023-09-12DOI: 10.18222/eae.v34.9220_port
{"title":"Avaliação longitudinal de estudantes de medicina: o teste de progresso é apropriado?","authors":"","doi":"10.18222/eae.v34.9220_port","DOIUrl":"https://doi.org/10.18222/eae.v34.9220_port","url":null,"abstract":"","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"62 1","pages":"0"},"PeriodicalIF":0.0,"publicationDate":"2023-09-12","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"135878472","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Daniel Brito Alves, Marcos de Oliveira Garcias, Samuel Alex Coelho Campos
Verificou-se de que forma está distribuída a infraestrutura nas escolas públicas de ensinos fundamental e/ou médio do Paraná e quais aspectos precisam de maior atenção dos formuladores de políticas públicas, uma vez que a infraestrutura escolar pode influenciar no desempenho dos alunos e, por conseguinte, no capital humano e no crescimento econômico. Utilizaram-se microdados do Censo Escolar de 2017 e 2019 e empregou-se a Análise Fatorial. Diante dos resultados, recomenda-se a implementação de políticas que visem a melhorias nas estruturas de apoio, atividades extraclasse e aparelhamento eletrônico. Constatou-se que escolas rurais ainda requerem maior atenção das políticas públicas e que, entre as mesorregiões, o Sudeste Paranaense carece de maior atenção quanto à infraestrutura de suas escolas.
{"title":"Infraestrutura das escolas públicas do Paraná: uma aplicação da análise fatorial","authors":"Daniel Brito Alves, Marcos de Oliveira Garcias, Samuel Alex Coelho Campos","doi":"10.18222/eae.v34.10152","DOIUrl":"https://doi.org/10.18222/eae.v34.10152","url":null,"abstract":"Verificou-se de que forma está distribuída a infraestrutura nas escolas públicas de ensinos fundamental e/ou médio do Paraná e quais aspectos precisam de maior atenção dos formuladores de políticas públicas, uma vez que a infraestrutura escolar pode influenciar no desempenho dos alunos e, por conseguinte, no capital humano e no crescimento econômico. Utilizaram-se microdados do Censo Escolar de 2017 e 2019 e empregou-se a Análise Fatorial. Diante dos resultados, recomenda-se a implementação de políticas que visem a melhorias nas estruturas de apoio, atividades extraclasse e aparelhamento eletrônico. Constatou-se que escolas rurais ainda requerem maior atenção das políticas públicas e que, entre as mesorregiões, o Sudeste Paranaense carece de maior atenção quanto à infraestrutura de suas escolas.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-09-06","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"67618063","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Este artigo tem como objetivo apresentar uma revisão sistemática da literatura sobre o mapeamento da produção científica acerca das pesquisas empíricas relacionadas ao Sistema de Avaliação da Educação Básica (Saeb). Para tanto, utilizaram-se o método Prisma e a análise bibliométrica. Os artigos foram selecionados no Portal de Periódicos da Capes, SciELO e Doaj e datam de 1995 a 2021. Foram consideradas e examinadas 75 publicações. A partir dessa amostra foi possível a criação de oito categorias, organizadas de acordo com a temática, objetivo e resultado das pesquisas empíricas relacionadas ao Saeb. Como resultado, o estudo apontou a necessidade de pesquisas futuras que proporcionem a consolidação do campo da avaliação educacional com base em evidências produzidas a partir dos dados do Saeb.
{"title":"Revisão sistemática: pesquisas empíricas acerca do Saeb (1995-2021)","authors":"Fábio Alexandre Ferreira Gusmão, S. Amorim","doi":"10.18222/eae.v34.9051","DOIUrl":"https://doi.org/10.18222/eae.v34.9051","url":null,"abstract":"Este artigo tem como objetivo apresentar uma revisão sistemática da literatura sobre o mapeamento da produção científica acerca das pesquisas empíricas relacionadas ao Sistema de Avaliação da Educação Básica (Saeb). Para tanto, utilizaram-se o método Prisma e a análise bibliométrica. Os artigos foram selecionados no Portal de Periódicos da Capes, SciELO e Doaj e datam de 1995 a 2021. Foram consideradas e examinadas 75 publicações. A partir dessa amostra foi possível a criação de oito categorias, organizadas de acordo com a temática, objetivo e resultado das pesquisas empíricas relacionadas ao Saeb. Como resultado, o estudo apontou a necessidade de pesquisas futuras que proporcionem a consolidação do campo da avaliação educacional com base em evidências produzidas a partir dos dados do Saeb.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-08-22","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"67618498","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
O objetivo deste ensaio é discutir as potencialidades e, sobretudo, os limites do emprego de métodos experimentais e quase-experimentais na avaliação de programas públicos. Inicia-se com uma breve apresentação do desenho experimental clássico, seus requisitos e conceitos relacionados, como validades interna, externa e contrafatual. Em seguida, são abordadas as modalidades de desenhos quase-experimentais de avaliação, modelos que flexibilizam os requisitos do experimento clássico. Em duas seções de natureza crítica, apontam-se as limitações éticas, políticas e operacionais dos desenhos experimentais e quase-experimentais na avaliação de programas e, depois, as motivações político- -institucionais da resiliência dessa abordagem diante de conhecidos e recorrentes problemas de robustez.
{"title":"Delineamentos experimentais na avaliação de políticas públicas: usos e abusos","authors":"P. Jannuzzi","doi":"10.18222/eae.v34.9956","DOIUrl":"https://doi.org/10.18222/eae.v34.9956","url":null,"abstract":"O objetivo deste ensaio é discutir as potencialidades e, sobretudo, os limites do emprego de métodos experimentais e quase-experimentais na avaliação de programas públicos. Inicia-se com uma breve apresentação do desenho experimental clássico, seus requisitos e conceitos relacionados, como validades interna, externa e contrafatual. Em seguida, são abordadas as modalidades de desenhos quase-experimentais de avaliação, modelos que flexibilizam os requisitos do experimento clássico. Em duas seções de natureza crítica, apontam-se as limitações éticas, políticas e operacionais dos desenhos experimentais e quase-experimentais na avaliação de programas e, depois, as motivações político- -institucionais da resiliência dessa abordagem diante de conhecidos e recorrentes problemas de robustez.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-08-18","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"67618160","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
O artigo caracteriza e analisa iniciativas de avaliação educacional desenvolvidas no estado do Ceará que se revestiram de finalidades e atributos distintos do Sistema Permanente de Avaliação da Educação Básica, o qual tem sido objeto de diversos estudos. São tratadas três iniciativas, implementadas no decurso dos anos 1980, 1990 e 2000: i) avaliação de cursos de formação de profissionais; ii) avaliação institucional; e iii) avaliação de uma vertente da política educacional. A retrospectiva histórica dessas iniciativas se realizou por meio da consulta a documentos que registram seus objetivos e escopo. Intenta-se, com a difusão dessas proposições, iluminar perspectivas de ação que venham a se integrar ao sistema estadual de avaliação desse e de outros entes federados.
{"title":"Iniciativas de avaliação educacional no estado do Ceará","authors":"S. Sousa","doi":"10.18222/eae.v34.9328","DOIUrl":"https://doi.org/10.18222/eae.v34.9328","url":null,"abstract":"O artigo caracteriza e analisa iniciativas de avaliação educacional desenvolvidas no estado do Ceará que se revestiram de finalidades e atributos distintos do Sistema Permanente de Avaliação da Educação Básica, o qual tem sido objeto de diversos estudos. São tratadas três iniciativas, implementadas no decurso dos anos 1980, 1990 e 2000: i) avaliação de cursos de formação de profissionais; ii) avaliação institucional; e iii) avaliação de uma vertente da política educacional. A retrospectiva histórica dessas iniciativas se realizou por meio da consulta a documentos que registram seus objetivos e escopo. Intenta-se, com a difusão dessas proposições, iluminar perspectivas de ação que venham a se integrar ao sistema estadual de avaliação desse e de outros entes federados.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-08-11","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"47523720","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Márcia Mendes Ruiz Cantano, A. Gonçalves, Marília Silveira de Almeida Campos, L. R. Pereira
Este trabalho apresenta a elaboração de um questionário para avaliação continuada em um curso de Farmácia. Foram realizadas revisão da literatura e discussões envolvendo o Apoio Pedagógico e a Comissão de Graduação do curso, dando origem à primeira versão do questionário com 20 itens, analisados por especialistas e submetidos a um pré-teste com graduandos; após a etapa de adequação, foi aplicado o Questionário de Avaliação Continuada (QAC) com 21 itens e 383 questionários respondidos. O escore máximo foi atingido por 5,48% dos respondentes, sugerindo que o QAC apresenta evidências de validade de conteúdo e que o processo de reformulação da avaliação continuada descrito pode auxiliar outras instituições de ensino superior que estejam vivenciando cenários semelhantes.
{"title":"Reformulação do instrumento de avaliação docente em uma graduação em Farmácia","authors":"Márcia Mendes Ruiz Cantano, A. Gonçalves, Marília Silveira de Almeida Campos, L. R. Pereira","doi":"10.18222/eae.v34.8858","DOIUrl":"https://doi.org/10.18222/eae.v34.8858","url":null,"abstract":"Este trabalho apresenta a elaboração de um questionário para avaliação continuada em um curso de Farmácia. Foram realizadas revisão da literatura e discussões envolvendo o Apoio Pedagógico e a Comissão de Graduação do curso, dando origem à primeira versão do questionário com 20 itens, analisados por especialistas e submetidos a um pré-teste com graduandos; após a etapa de adequação, foi aplicado o Questionário de Avaliação Continuada (QAC) com 21 itens e 383 questionários respondidos. O escore máximo foi atingido por 5,48% dos respondentes, sugerindo que o QAC apresenta evidências de validade de conteúdo e que o processo de reformulação da avaliação continuada descrito pode auxiliar outras instituições de ensino superior que estejam vivenciando cenários semelhantes.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":" ","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-06-30","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"49320410","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}
Antônia Edivaneide de Sousa Gonzaga, Raimundo Hélio Leite, Lucas Melgaço da Silva, Wirla Risany Lima Carvalho
O presente artigo originou-se de uma pesquisa doutoral, realizada com professores dos cursos de Licenciatura em Matemática nos institutos federais do Ceará e da Paraíba. O objetivo era analisar as concepções e práticas avaliativas desses professores e sua relação com a formação docente. O estudo, de abordagem qualitativa, fez uso dos fundamentos filosóficos da fenomenologia hermenêutica, a partir das visões de Martin Heidegger e Hans-Georg Gadamer, para análise dos dados coletados em entrevistas semiestruturadas. As concepções e práticas de avaliação da aprendizagem abordadas sinalizaram o indicativo de que não há uma cultura de formação direcionada para os princípios de uma avaliação da aprendizagem, o que contribui para o fortalecimento de práticas avaliativas de reprodução.
{"title":"A avaliação da aprendizagem na formação docente: revelando horizontes","authors":"Antônia Edivaneide de Sousa Gonzaga, Raimundo Hélio Leite, Lucas Melgaço da Silva, Wirla Risany Lima Carvalho","doi":"10.18222/eae.v34.8097","DOIUrl":"https://doi.org/10.18222/eae.v34.8097","url":null,"abstract":"O presente artigo originou-se de uma pesquisa doutoral, realizada com professores dos cursos de Licenciatura em Matemática nos institutos federais do Ceará e da Paraíba. O objetivo era analisar as concepções e práticas avaliativas desses professores e sua relação com a formação docente. O estudo, de abordagem qualitativa, fez uso dos fundamentos filosóficos da fenomenologia hermenêutica, a partir das visões de Martin Heidegger e Hans-Georg Gadamer, para análise dos dados coletados em entrevistas semiestruturadas. As concepções e práticas de avaliação da aprendizagem abordadas sinalizaram o indicativo de que não há uma cultura de formação direcionada para os princípios de uma avaliação da aprendizagem, o que contribui para o fortalecimento de práticas avaliativas de reprodução.","PeriodicalId":32060,"journal":{"name":"Estudos em Avaliacao Educacional","volume":"1 1","pages":""},"PeriodicalIF":0.0,"publicationDate":"2023-06-20","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":null,"resultStr":null,"platform":"Semanticscholar","paperid":"67618192","PeriodicalName":null,"FirstCategoryId":null,"ListUrlMain":null,"RegionNum":0,"RegionCategory":"","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":"","EPubDate":null,"PubModel":null,"JCR":null,"JCRName":null,"Score":null,"Total":0}