1 UNIVERSIDADE FEDERAL DA PARAÍBACENTRO DE EDUCAÇÃO PROGRAMA DE PÓS-GRADUAÇÃO EM POLÍTICAS PÚBLICAS, GESTÃO E AVALIAÇÃO DA EDUCAÇÃO SUPERIOR DISCIPLINA: Avaliação da Educação Superior PROFESSORES: Isac Almeida de Medeiros Maria das Graças Gonçalves Vieira Guerra ANÁLISE DE AVALIAÇÃO DA PÓS-GRADUAÇÃO: um comparativo dos Programas em Computação e Informática (UFAM, UFRGS e UnB) André Domingos da Silva Anna Regina da Silva Ribeiro Maria José Rodrigues Paiva Rodrigo Araújo de Sá Pereira Vanicleide de Carvalho Jovito
2 Ciência da Computação Esta área tem papel fundamental no desenvolvimento da Tecnologia da Informação no Brasil. A formação de recursos humanos na área de Ciência da Computação é fator estratégico para todos os países, em particular para o Brasil. Em agosto de 2012, o Ministério de Ciência, Tecnologia e Inovação (MCT&I) lançou o Programa Estratégico de Software e Serviços e Tecnologia da Informação (TI Maior), como um Programa de Incentivo à Indústria de Software e Serviços no Brasil. A Sociedade Brasileira de Computação está envolvida no TI Maior por meio da participação nas Comissões de Avaliação do Programa e na definição de um modelo de certificação para formação profissional de nível médio. A Computação revolucionou a pesquisa científica, sendo hoje reconhecida como o “terceiro pilar” a sustentar a pesquisa, junto com os pilares da teoria e da experimentação. Dessa Forma, ela permeia os avanços em todas as áreas do conhecimento.
3 Ficha de Avaliação do Programa – RequisitosA proposta deve descrever a(s) área(s) de concentração e suas linhas de pesquisa, bem como definir o perfil do egresso a ser formado pelo curso. O curso deve oferecer aos alunos um leque de disciplinas de Computação articulado com as linhas de pesquisa do programa e com o perfil do egresso e que forneça uma formação abrangente atual. Deve incluir um conjunto de disciplinas obrigatórias que garantam aos egressos uma base sólida de formação em Computação. A proposta deve evidenciar a capacidade de captação de recursos pelos professores do Curso por meio de projetos de pesquisa em andamento financiados por agências de fomento e ter foco na área de Computação (tendo como referência a classificação da CAPES-CNPq). O número esperado de orientandos por orientador deve ser adequado para um curso que está sendo criado. Deve-se considerar o grau de experiência e maturidade dos orientadores na orientação de dissertações. No caso de orientadores com pouca experiência, recomenda-se 2 orientandos por ano. Espera-se que o corpo docente possua comprovada capacidade de produção científica, representada pela publicação de artigos em congressos e periódicos classificados no Qualis CC (Periódicos da Área Ciência da Computação). É importante que as publicações qualificadas tenham uma boa uniformidade de distribuição entre os membros do corpo docente. O Programa deve ter uma base sólida de professores permanentes. O corpo docente dever ter no mínimo 10 professores doutores, com atuação efetiva no curso e nas suas áreas e linhas de pesquisa. Os professores doutores em tempo integral devem possuir, predominantemente, experiência anterior de no mínimo 3 anos em pesquisa e orientação de alunos. O corpo docente deve ter formação diversificada (doutorado obtido em diferentes instituições do Brasil e/ou exterior), permitindo formação ampla em Ciência da Computação. Valoriza-se a formação e a experiência do corpo docente em Ciência da Computação, com atuação concomitante na graduação e inserção na comunidade nacional e internacional (participação em comitês e em corpo editorial, publicações conjuntas, etc). É desejável haver doutores com bolsa de produtividade ou equivalente em pesquisa do CNPq. A Área valoriza os indicadores da qualificação dos docentes como pesquisadores. 1 - Proposta do Programa 2 – Corpo docente 3 – Corpo discente, teses e dissertações 4 – Produção Intelectual É desejável que o Curso esteja preocupado com um impacto positivo na região de atuação. 5 – Inserção Social
4 Ficha de Avaliação – Triênio 2010-2012 - ItensUFAM UFRGS UnB 1 - PROPOSTA DO PROGRAMA Itens de Avaliação Peso Avaliação 1.1. Coerência, consistência, abrangência e atualização das áreas de concentração, linhas de pesquisa, projetos em andamento e proposta curricular. 35 Muito bom Bom 1.2. Planejamento do programa com vistas a seu desenvolvimento futuro, contemplando os desafios internacionais da área na produção do conhecimento, seus propósitos na melhor formação de seus alunos, suas metas quanto à inserção social mais rica dos seus egressos, conforme os parâmetros da área. Regular 1.3. Infraestrutura para ensino, pesquisa e, se for o caso, extensão. 30 Comissão Definições e comentários sobre o Item Recomenda-se que o programa apresente um planejamento para o desenvolvimento futuro e metas para sua melhoria. Valorizam-se projetos institucionais, projetos que tragam recursos e projetos de intercâmbio, nacional e internacional, e iniciativas bem sucedidas de transferência para a sociedade de conhecimento gerado no Programa. Os relatórios devem ressaltar tais iniciativas. Regular Não foram encontradas explicitamente na documentação do programa, informações sobre atividades e ações de planejamento que visam especificamente o desenvolvimento futuro, a médio e longo prazo. Examinando-se mais a fundo, percebe-se que o programa pretende se concentrar na consolidação do novo curso de doutorado e continuar os esforços para a disseminação da produção intelectual dos docentes e discentes em periódicos dos estratos superiores do QUALIS (A1-A2-B1).
5 Ficha de Avaliação – Triênio 2010-2012 - ItensUFAM UFRGS UnB 2 - CORPO DOCENTE Itens de Avaliação Peso Avaliação 2.1. Perfil do corpo docente, consideradas titulação, diversificação na origem de formação, aprimoramento e experiência, e sua compatibilidade e adequação à Proposta do Programa. 30 Muito bom 2.2. Adequação e dedicação dos docentes permanentes em relação às atividades de pesquisa e de formação do programa. Bom 2.3. Distribuição das atividades de pesquisa e de formação entre os docentes do programa. 2.4. Contribuição dos docentes para atividades de ensino e/ou de pesquisa na graduação, com atenção tanto à repercussão que este item pode ter na formação de futuros ingressantes na PG, quanto (conforme a área) na formação de profissionais mais capacitados no plano da graduação. 10 Comissão Definições e comentários sobre o Item Recomenda-se a participação docente na formação de alunos de iniciação científica e no ensino de graduação. Obs.: este item só vale quando o PPG estiver ligado a curso de graduação; se não estiver, seu peso será redistribuído proporcionalmente entre os demais itens do quesito. Muito bom O programa apresenta um número muito significativo de projetos de pesquisa em Ciência da Computação de alto nível, financiados por agências de fomento à pesquisa. Foi verificado uma forte captação de recursos nacionais, inclusive internacionais.
6 Ficha de Avaliação – Triênio 2010-2012 - ItensUFAM UFRGS UnB 3 - CORPO DISCENTE, TESES E DISSERTAÇÕES Itens de Avaliação Peso Avaliação 3.1. Quantidade de teses e dissertações defendidas no período de avaliação, em relação ao corpo docente permanente e à dimensão do corpo discente. 35 Muito bom Bom 3.2. Distribuição das orientações das teses e dissertações defendidas no período de avaliação em relação aos docentes do programa. 15 3.3. Qualidade das Teses e Dissertações e da produção de discentes autores da pós-graduação e da graduação (no caso de IES com curso de graduação na área) na produção científica do programa, aferida por publicações e outros indicadores pertinentes à área. 40 3.4. Eficiência do Programa na formação de mestres e doutores bolsistas: Tempo de formação de mestres e doutores e percentual de bolsistas titulados. 10 Comissão Definições e comentários sobre o Item Recomenda-se que o programa apresente a maioria do corpo docente com orientações das teses e dissertações defendidas no triênio. Valoriza-se a cooperação entre instituições nacionais, mas a dependência de orientação externa é vista negativamente. Muito bom A distribuição de orientações entre os docentes é boa e todos os docentes estão envolvidos com orientações.
7 Ficha de Avaliação – Triênio 2010-2012 - ItensUFAM UFRGS UnB 4 - PRODUÇÃO INTELECTUAL Itens de Avaliação Peso Avaliação 4.1. Publicações qualificadas do Programa por docente permanente. 65 Muito bom Bom 4.2. Distribuição de publicações qualificadas em relação ao corpo docente permanente do Programa. 30 4.3. Produção técnica, patentes e outras produções consideradas relevantes 5 Comissão 4 – PRODUÇÃO INTELECTUAL Muito Bom UFAM - A produção acadêmica do programa é muito boa nos estratos superiores (estratos A1, A2 e B1), ficando entre os 20% mais produtivos. O programa também se encontra entre os 20% mais produtivos no estrato geral. O programa apresenta publicações qualificadas (A1, A2, B1) em número compatível com os demais programas de nível 5. O programa apresenta diversidade e qualidade de veículos na sua produção dos estratos superiores(A1, A2 e B1). Muito Bom UFRGS - No triênio foram publicados 208 artigos em periódicos e 523 em conferências. A produção bibliográfica do programa é excelente, tanto no estrato qualificado, como no estrato superior ou restrito (A1, A2, B1), o que coloca o programa entre os 10% mais produtivos da área, no índice geral e no índice restrito (A1, A2, B1). Bom UnB - O programa apresentou uma boa produção científica qualificada no triênio, com 10 publicações em periódicos A1 e 20 publicações em conferências A1. Com relação à produção em veículos dos estratos de A1 a B5, o programa ficou entre os 20% melhores da área de ciência da computação, mesma posição ocupada se considerarmos somente veículos nos estratos superiores (A1 a B1) do Qualis. Definições e comentários sobre o Item Recomenda-se que o programa apresente qualidade, quantidade e regularidade das publicações. Valoriza-se a qualidade dos trabalhos dos discentes.
8 Ficha de Avaliação – Triênio 2010-2012 - ItensSigla Instituição Teses e Dissertações [1] Artigos completos publicados em periódicos técnico-científicos Trabalhos completos publicados em anais de eventos técnico-científicos Livros e Capítulos de livro Te Di Di / Te A1 A2 B1 B2 B3 B4 B5 C NC Texto Integral Capítulos de livro Cole-tâneas Verbetes e outros UFAM 6 57 9,50 9 8 1 12 2 3 217 UFRGS 36 105 2,92 33 25 39 48 16 19 13 618 80 UnB 40 - 10 5 7 4 213 11 [1] Total de Teses (Te) e Dissertações (Di) Fonte: CAPES, Planilhas de indicadores
9 Ficha de Avaliação – Triênio 2010-2012 - ItensUFAM UFRGS UnB 5 - INSERÇÃO SOCIAL Itens de Avaliação Peso Avaliação 5.1. Inserção e impacto regional e (ou) nacional do programa. 35 Muito bom Bom 5.2. Integração e cooperação com outros programas e centros de pesquisa e desenvolvimento profissional relacionados à área de conhecimento do programa, com vistas ao desenvolvimento da pesquisa e da pós-graduação. 30 5.3 - Visibilidade ou transparência dada pelo programa à sua atuação. 15 5.4. Internacionalização. 20 Comissão Definições e comentários sobre o Item Recomenda-se que o programa mantenha página Web para a divulgação, de forma atualizada, de seus dados internos, critérios de seleção de alunos, parte significativa de sua produção docente, financiamentos recebidos da Capes e de outras agências públicas e entidades provadas. Além disto, o programa deve garantir amplo acesso a teses e dissertações pela Web. Muito bom O programa vem cooperando de maneira adequada com outros centros de pesquisa e ensino. Da mesmo forma, percebe-se uma preocupação com a sua visibilidade.
10 Avaliação – Triênio 2010-2012 – Nota FinalSigla Instituição Nome Modalidade Ano de início Nota Final da Avaliação Trienal 2013 Mestrado Doutorado UFAM INFORMÁTICA Acad 2001 2008 5 UFRGS COMPUTAÇÃO 1973 1988 7 UnB 1989 2010 4
11 Avaliações UFRGS - Computação Triênios 2001-2003 / 2004-2006 / 2007-2009Modalidade Nota Final da Avaliação Trienal Mestrado Profissional e Acadêmico e Doutorado Acadêmico 5 Mestrado e Doutorado Acadêmico 6 7 Ano de Início: Mestrados – 1973; Doutorado
12 Avaliações UFRGS - Computação Triênios 2001-2003 / 2004-2006 / 2007-2009O programa apresentou evolução positiva na produção intelectual. No entanto, o volume de publicações em periódicos internacionais qualificados ainda está fraco. Há uma grande concentração em publicações em congressos, sobretudo em nacionais. Houve um grande número de publicações reportadas que não constam do Qualis. No último ano a produção em periódicos cresceu em relação aos dois anos anteriores e a publicação em eventos científicos nacionais e internacionais qualificados permaneceu estável no período, com um índice bom, entre os melhores índices da área. A distribuição de publicação em periódicos internacionais é concentrada em menos da metade do corpo docente. Quanto a publicações em congressos, observa-se uma distribuição mais uniforme entre os docentes. Merece destaque a participação discente nas publicações qualificadas do programa. O programa vem melhorando a sua produção qualificada. No caso de periódicos, a produção qualificada em 2006 foi de 16 PIA e 7 PIB. Há também uma expressiva produção em congressos internacionais (79 CIA, 13 CIB e 24 CIC) e nacionais (11 CNA, 11 CNB e 18 CNC), além de vários capítulos de livro e um livro didático publicado na série Livros Didáticos do Instituto de Informática da UFRGS. A produção está bem distribuída entre os docentes. A Comissão de Avaliação dos Pedidos de reconsideração reitera a excelente produtividade geral da UFRGS, como foi mencionado na Ficha de Avaliação, compatível com o nível 6. Entretanto, a argumentação apresentada não se mostra suficiente para alterar a nota atribuída na Avaliação Trienal, e dar suporte indiscutível para uma mudança de nível.
13 Avaliações UFRGS - Computação Triênio 2010-2012Trata-se de um dos programas de pós-graduação em Ciência da Computação mais tradicionais do País. Seu corpo docente, em média 50 professores, possui formação diversificada, tendo a maioria dos docentes obtido seu doutorado na Europa ou na América do Norte. A qualificação dos docentes é excelente. Trinta e quatro docentes (68%) são bolsistas de produtividade em pesquisa do CNPq, dos quais 15 são de nível 1 (30%). Um grande número de docentes apresenta relevante inserção nacional e internacional, participando de comitês de programas, comitês editoriais de periódicos, ministrando palestras convidadas, etc. Há também um expressivo número de docentes que são coordenadores de projetos de cooperação internacional. No triênio o programa formou um número significativo de mestres e doutores, com dissertações e teses defendidas de muito boa qualidade. Um número significativo de publicações em periódicos no estrato qualificado e no estrato superior (A1, A2 e B1) contam com autores-discentes. Além disso, mais de 100 discentes por ano participaram em publicações em anais de congressos. O programa tem investido fortemente na formação de mestres e doutores em colaboração com instituições reconhecidas no exterior, com orientação de alunos de doutorado em co-tutela. Um número considerável de alunos realizaram estágios de pesquisa no exterior, com financiamento de projetos bilaterais de intercâmbio. A produção bibliográfica do programa é excelente, tanto no estrato qualificado, como no estrato superior ou restrito (A1, A2, B1), o que coloca o programa entre os 10% mais produtivos da área (índice geral e índice restrito). A inserção internacional do programa pode ser evidenciada pela sua parceria no chamado LICIA. O programa contribui com a formação de recursos humanos de alta qualidade. A comissão recomenda atribuição de nota 7 ao programa.
14 Referências COORDENAÇÃO DE APERFEIÇOAMENTO DE PESSOAL DE NÍVEL SUPERIOR. Cadernos de Indicadores. Disponível em:
15 Nosso muito ANÁLISE DE AVALIAÇÃO DA PÓS-GRADUAÇÃO: um comparativo dos Programas em Computação e Informática (UFAM, UFRGS e UnB) André Domingos da Silva Anna Regina da Silva Ribeiro Maria José Rodrigues Paiva Rodrigo Araújo de Sá Pereira Vanicleide de Carvalho Jovito
16