¿Se acabó QUALIS? Propuesta de indicadores para la evaluación de la producción científica de los estudios de posgrado en Enfermería (2025-2028)La evaluación de los estudios de posgrado stricto sensu en Brasil cumplirá 50 años en 2026. Este complejo proceso de evaluación ha consolidado el sistema nacional de posgrado y constituye uno de los pilares de la ciencia brasileña.
La Coordinación para el Perfeccionamiento del Personal de Nivel Superior (CAPES) orienta la evaluación de los estudios de posgrado, entre otras cosas, mediante el análisis de la producción científica. La evaluación de la producción bibliográfica y de la calidad de la difusión del conocimiento científico generado en este ámbito en particular se lleva a cabo a través de canales considerados confiables, como las revistas científicas.
Aunque la evaluación de la producción científica de los estudios de posgrado por parte de la CAPES no equivale a una evaluación directa de la calidad de los canales de difusión científica, en la dinámica del funcionamiento de los estudios de posgrado es innegable que estos procesos de evaluación están interrelacionados. Esto puede ser claramente percibido al constatarse que los investigadores vinculados a programas de posgrado en Brasil estaban acostumbrados a buscar canales de difusión para los resultados de sus investigaciones científicas teniendo en cuenta la estratificación “Qualis”, además de la productividad como fin en sí misma, lo cual puede ser perjudicial para la calidad científica y facilita procesos predatorios en el campo editorial1.
En esencia, el objetivo de Qualis, tal y como fue concebido, era aportar objetividad a los indicadores asignados a cada programa de posgrado, mediante una evaluación cuatrienal retroactiva. Paralelamente, la lógica de Qualis ha impulsado a muchas revistas científicas a adaptarse a diferentes criterios de calidad editorial, con el objetivo de convertirse en una referencia y obtener mayor visibilidad en el ámbito y, por consiguiente, ascender en la estratificación establecida por esta lógica.
Si nos centramos específicamente en el ámbito de la Enfermería, se entiende que hablar de Qualis es, necesariamente, hablar de la historia de la propia Enfermería como ciencia. Esto se debe a que, en el año en que se creó Qualis (1998), el área contaba con 14 programas de posgrado distribuidos de manera poco simétrica por todo Brasil. En la actualidad, hay 85 programas en marcha y se ha ampliado la distribución geográfica. Aunque no sea necesariamente una causa, este notable crecimiento ha traído consigo una cuestión que no se puede ignorar: a la par del avance en la expansión de la oferta y el acceso al posgrado en Enfermería, es necesario que los procesos de supervisión de los programas y de su producción científica avancen, incluyendo perspectivas multidimensionales de evaluación y un enfoque en el impacto social concreto.
Según los datos presentados en el documento del área de Enfermería, al comparar el número de artículos A1 entre 2019 y 2022, se observó un aumento del 33,6 %, lo que demuestra la evolución de este indicador. Sin embargo, se ha observado una tendencia al aumento en la publicación de artículos en revistas evaluadas por otras áreas, que han utilizado indicadores distintos a los de Enfermería, lo que podría implicar una reducción de los indicadores bibliométricos de la Enfermería brasileña2. Esto pone de manifiesto la necesidad de adaptación para nuevos parámetros.
A pesar de tratarse de una estrategia multifacética, el sistema Qualis Periódicos ha resultado insuficiente para evaluar la complejidad de la producción científica y bibliográfica en el campo de la Enfermería. Basar la evaluación únicamente en indicadores bibliométricos reconocidos a nivel mundial, que suelen proceder de bases de datos consolidadas, como el Journal Impact Factor (Web of Science), el CiteScore (SCOPUS), el índice H y el SJR (Scimago Journal & Country Rank), resulta insuficiente. Sin embargo, aunque se trate de mecanismos que, desde cierto punto de vista, fomentan el productivismo académico1, son medidas que aportan objetividad a la elaboración de clasificaciones en diferentes áreas del conocimiento científico y favorecen la planificación editorial3.
Ante este panorama, el principal reto consistía en encontrar un método que no solo reflejara la formación profesional de alto nivel, plasmada (en parte) en la calidad de las publicaciones, sino que también tuviera en cuenta la diversidad editorial existente y los impactos específicos que el área pretende lograr a nivel nacional e internacional.
Entre las críticas al Qualis Referencia, se destacaban la dificultad para diferenciar adecuadamente los programas y el uso de indicadores que no garantizaban de manera sólida la calidad de las revistas, como es el caso del índice H de Google Scholar. Estas limitaciones ponían de manifiesto la necesidad de incluir un análisis cualitativo de la producción, además de tener en cuenta otros indicadores para las publicaciones, como el factor de impacto y los percentiles de JCR, Scopus y otras bases de datos específicas de Enfermería, y que el área debía hacer hincapié en la difusión de artículos en revistas de enfermería, teniendo en cuenta el perfil de la producción correspondiente.
Para el ciclo de evaluación 2025-2028, la CAPES sustituyó el sistema Qualis Periódicos por la “Clasificación de artículos”. El principal cambio es la eliminación de la calificación fija para la revista científica. A partir de ahora, se evaluará el impacto individual de cada artículo mediante indicadores bibliométricos de las publicaciones o un análisis cualitativo del artículo, realizado por el propio departamento. La nueva clasificación utilizará ocho estratos y otorgará autonomía a cada área de conocimiento para que elija criterios cuantitativos, cualitativos o mixtos con el fin de clasificar la producción científica de los programas.
En el ámbito de la Enfermería, la metodología de evaluación vigente2 adopta el concepto de “estrato”, que se divide explícitamente en ocho niveles (A1 - A8), además de la categoría “sin clasificar”. La evaluación se centrará en una visión sistémica de la producción científica, que abarcará: indicadores bibliométricos consolidados de los canales de difusión, bases de datos y fuentes de indexación de las revistas científicas, así como el índice de citas, la altimetría y el análisis cualitativo de los trabajos publicados, evaluándose estos dos últimos aspectos a posteriori. En otras palabras, el estrato pasa a ser del producto/publicación , y no necesariamente (aunque sí indirectamente) de su canal de difusión .
Cabe destacar, además, que el área ha registrado un avance significativo al tener en cuenta bases de datos y fuentes de indexación específicas de la Enfermería. Esto valora el área de la Enfermería y contribuye a dar mayor visibilidad a nuestras producciones, así como a los canales brasileños de difusión del conocimiento en este ámbito.
Es importante observar también que, para definir los criterios de estratificación para la evaluación del cuatrienio 2025-20282, la comisión se basó en la producción científica del área durante el cuatrienio 2017-2020 y el bienio 2021-2022. Las bases y los indicadores bibliométricos utilizados en la definición de los criterios por el área de Enfermería fueron: SCOPUS (CiteScore); CLARIVATE (Factor de impacto - Journal Citation Reports - JCR); Medline/PubMed; SciELO; Rev@Enf; LILACS; BDEnf; CINAHL; RIC-CUIDEn y Latindex.
Se llevaron a cabo 12 simulaciones con diferentes combinaciones de parámetros, lo que permitió analizar la capacidad discriminatoria entre distintos niveles de desarrollo de los programas, la incorporación de la interdisciplinariedad, la valorización del área de Enfermería y de áreas afines, así como el fomento de la internacionalización del área, sin perjuicio ni desvalorización de la producción nacional. Además, se cree que, con este nuevo movimiento, el área recupera una tendencia de evaluación que había sido desestructurada por Qualis Referencia. En este proceso, cabe destacar que:
Al realizar la simulación de la estratificación de la producción utilizando los indicadores de evaluación del cuatrienio 2025-2028, se observa que los criterios actuales valoran la naturaleza transversal, compleja e integrada de la producción de conocimiento en Enfermería. En el estrato A1, el 11 % de la producción se publicó en revistas que no pertenecen al ámbito de la Enfermería y el 14 %, en revistas de Enfermería. En el estrato A2, el 22,6 % de la producción se publicó en revistas que no pertenecen al ámbito de la Enfermería y solamente el 4,4 %, en revistas de Enfermería. En el estrato A3, el 19,2 % de la producción se publicó en revistas que no pertenecen al ámbito de la Enfermería y solamente el 6,3 %, en revistas de Enfermería. En el estrato A4, el 25,7 % de la producción se publicó en revistas que no pertenecen al ámbito de la Enfermería y solamente el 7,0 %, en revistas de Enfermería.
En general, el 12,4 % de la producción se encuentra en los estratos A1 y A2, el 56,1 % en los estratos A1 a A4, con la mayor concentración (16,7 %) en el A4; el 10,0 % en el B1, el 6,0 % en el B2, el 6,6 % en el B3 y el 9,1 % en el B4. Por lo tanto, los criterios adoptados permiten distinguir entre los programas en las diferentes etapas de desarrollo, que son el objeto de nuestra evaluación.
Además, se adoptará el procedimiento “2” propuesto por CAPES, en el que se llevará a cabo la clasificación del artículo mediante indicadores bibliométricos directos del mismo (índice de citas y altimetría, para el análisis cuantitativo).
Además de los criterios establecidos, en el documento de área2 se manifiesta explícitamente el incentivo de la participación de los docentes y estudiantes de los programas en proyectos integradores e interdisciplinarios y de que, a lo largo de su trayectoria formativa, los estudiantes de maestría y doctorado tengan experiencias de aprendizaje, producción y actividades de extensión en diferentes áreas del conocimiento. Por lo tanto, resulta evidente el cuidado y la valoración de las prácticas interdisciplinarias como principio para una formación de calidad en maestrías y doctorados, el impacto científico de la enfermería, las innovaciones tecnológicas, la mejora de la atención sanitaria y el perfeccionamiento de las políticas públicas. Estos elementos deberán figurar cada vez más en la producción bibliográfica, incluso de manera concreta.
La Enfermería busca ampliar el conocimiento científico con el fin de contribuir al bienestar humano de las personas, los grupos y las poblaciones, fortaleciendo el Sistema Único de Salud (SUS). Al reafirmar la Enfermería como ciencia, se reconoce su especificidad disciplinaria como rama del conocimiento y, al mismo tiempo, se destaca la importancia de la interdisciplinariedad, teniendo en cuenta los fenómenos complejos con los que trabaja la Enfermería y la necesidad de estar dispuestos a compartir aspectos teóricos, conceptuales y metodológicos con otras áreas del conocimiento.
Más que un cambio en los indicadores, se está produciendo una redefinición de los valores. En este proceso, la Enfermería está siendo convocada para desempeñar un papel protagonista no solo en la generación de conocimiento, sino también en la reflexión crítica sobre cómo -y para qué- se genera ese conocimiento y cómo se evalúa.
Referencias bibliográficas
-
Camargo Jr KR, Travassos C. Publicação acadêmica: entre a ciência e o mercado. Saúde Debate. 2025;49(146):e10284. https://doi.org/10.1590/2358-2898202514610284P
» https://doi.org/10.1590/2358-2898202514610284P -
Ministério da Educação (BR), Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Documento de área: Área 20 - Enfermagem [Internet]. Brasília, DF: CAPES; 2024 [cited 16 Apr 2026]. Available from: https://www.gov.br/capes/pt-br/acesso-a-informacao/acoes-e-programas/avaliacao/sobre-a-avaliacao/areas-avaliacao/sobre-as-areas-de-avaliacao/colegio-de-ciencias-da-vida/ciencias-da-saude/ENFERMAGEM_DOCAREA_2025_2028.pdf
» https://www.gov.br/capes/pt-br/acesso-a-informacao/acoes-e-programas/avaliacao/sobre-a-avaliacao/areas-avaliacao/sobre-as-areas-de-avaliacao/colegio-de-ciencias-da-vida/ciencias-da-saude/ENFERMAGEM_DOCAREA_2025_2028.pdf -
Miot HA, Ianhez M, Ramos PM. Tendências dos principais indicadores bibliométricos dos Anais Brasileiros de Dermatologia (2010-2019). An Bras Dermatol. 2021;96(3):309-14. https://doi.org/10.1016/j.abd.2020.11.006
» https://doi.org/10.1016/j.abd.2020.11.006
