PARÁMETROS DE EVALUACIÓN DE LA PRODUCCIÓN

PARÁMETROS DE EVALUACIÓN DE LA
PRODUCCIÓN CIENTÍFICA EN MÉXICO
Dra. Rosario Rogel-Salazar!
Directora del Programa Editorial Universitario!
Universidad Autónoma del Estado de México!
Centro de Investigación en Ciencias Jurídicas, Justicia Penal y Seguridad Pública!
Facultad de Derecho, UAEM!
24 de Febrero del 2014!
!
!
La ciencia sólo es
ciencia si se
comunica
Canales de comunicación científica legitimados
Tradicionales!
Formales:!
Revistas científicas!
Libros especializados!
Libros compilados!
!
!
Informales:!
Ponencias y comunicaciones
en congresos!
Informes científicos y técnicos!
Correspondencia postal.!
Soporte: Papel!
Distribución: Física!
Localización: Bibliotecas fijas!
Emergentes!
Formales:!
Revistas electrónicas!
E-prints!
Pre-prints!
Libros electrónicos!
!
Informales:!
Grupos de noticias!
Redes sociales!
Foros electrónicos!
Blogs!
Soporte: Digital!
Distribución: Electrónica!
Localización: Bibliotecas digitales,
repositorios, bases de datos
electrónicas!
Tipos de revistas académicas
(glosario Latindex)
Revista de!
investigación
científica!
Publica principalmente investigaciones,
revisiones y actualizaciones que sustentan
el desarrollo científico de la disciplina.!
Revista!
Técnico-Profesional!
Presentan artículos orientados al
profesional de la disciplina, sobre
cuestiones técnicas o de procedimientos e
investigación aplicada.!
Revista de
divulgación científica
y cultural!
Se orientan a la divulgación del
conocimiento científico a un público más
amplio, incluye notas de interés general
para las ciencias.!
¿por qué razón la política científica nos
solicitar publicar/editar revistas…!
?
científicasarbitradasindizadas !
¿Qué es científica?!
¿Qué es arbitrada?!
¿Qué es indizada!
Objetivo: mantenimiento de archivos y documentos
Arbitraje!
Mecanismo para seleccionar qué se publica!
Periodicidad fija!
Espacio cotidiano de comunicación entre los
integrantes de la comunidad!
Derechos y
responsabilidad
autorales!
Mecanismo para reconocer a quien atribuir las
aportaciones!
Mantenimiento de
líneas de discusión!
Cargos por elección!
Mecanismo para dar seguimiento a los avances y
discusiones!
Por voto mayoritario y justificación escrita!
Principales retos revistas científicas
! Sobrevivencia!
! Falta de difusión!
! Interactividad local!
! Baja visibilidad!
! Bajo impacto!
La producción de revistas científicas Iberoamericanas
se incrementa año con año…!
Sin embargo, pese a ciertas excepciones…!
Su impacto en la producción global del conocimiento
es todavía local o institucional.!
Hacia una problematización
de lo que es y la utilidad
de la indización de
revistas científicas
Bases de datos contenido científico
!  Recuperan información de las revistas, con la finalidad de apoyar sus distribución o difusión
= NO DE DISTINGUIR CALIDAD!
!  Algunas bases de datos evalúan ciertas características para determinar su inclusión y otras
no.!
!  Algunas bases de datos generan servicios adicionales: indicadores bibliométricos, y otras no.!
No evalúan!
!
!
!
Evalúan!
Referenciales!
!
A texto completo!
Referenciales!
!
A texto completo!
Índices de citas!
Acceso por paga!
Acceso abierto!
Acceso por paga!
Acceso abierto!
Acceso por paga!
Acceso abierto!
Acceso por paga!
Acceso abierto!
Directorios!
Alojamiento o enlaces!
Índices de resúmenes!
Repositorios!
Directorios!
Ulrich’s!
Acceso abierto:!
DOAJ, Directorio Latindex!
Acceso de paga:! EBSCO, Informe Académico!
Acceso abierto:! DIALNET, DOAJ content!
Acceso abierto:!
Lilacs, Pubmed, Medline!
Índices de
cienciometría!
Acceso de paga:!
WoS, Scopus!
Acceso abierto:!
Scielo, Redalyc!
Bases de datos comprensivas!
Bases de datos regionales!
DE DATOS: EJEMPLOS
HAPI, Econlit, ** Abstracts, APA!
SÍ EVALÚAN!
Acceso de paga:!
Bases de datos
temáticas!
Índices de
resúmenes!
BASES
NO EVALÚAN!
Alojamiento o
enlaces!
Acceso de paga:!
Promedio de contribuciones escritas en
México a la ciencia mundial (2006)!
0.75!
PRODUCTIVIDAD POR PAÍS!
¿Está contemplado aquí el libro, o capítulo de libro que un
académico mexicano publicó en 2006?!
!
¿Por qué si ese libro le fue considerado como válido para su
promoción en el SNI, no se contabiliza como aportación a la
producción científica mundial?!
!
¿Y aquél artículo que le fue aceptado para una revista?...!
MAPA DE INDIZACIONES Y BASES DE DATOS"
DE CONTENIDO CIENTÍFICO!
Bases de datos comprensivas:!
Multinacionales y multidisciplinares!
!
¿Qué es la corriente principal de la ciencia?
ISI / ISI-Thomson!
Thomson Reuters!
www.isinet.com!
International Scientific Information, empresa privada
que calcula y publica anualmente indicadores
bibliométricos de las revista integradas a su
colección que cubre aproximadamente 12,000
Sistemas de revistas académicas. !
indización!
SCOPUS!
http://www.info.scopus.com!
Base de datos impulsada por la empresa Elsevier
BV que tiene la intención de ofrecer indicadores
bibliométricos para una base más amplia que
representa aproximadamente 80% de las
publicaciones científicas internacionales. Scopus
integra aproximadamente 26,000 publicaciones
científicas periódicas.!
JCR-ISI / SJR-Scopus!
ISI (±12 mil)!
R e d a l y c!
S c i e l o!
(*) Fuente UlrichsWeb!
ARBITRADAS EN EL MUNDO
SCOPUS (±26 mil)!
REVISTAS
Arbitradas (±75 mil)*!
Web of
Science, ISI!
• 
• 
• 
• 
Factor de Impacto!
Índice de citación (base más amplia)!
Índice de inmediatez!
Hirsh.. etc.!
Primer cuartil!
Segundo cuartil!
Tercer cuartil!
Cuarto cuartil!
Journal
Citation
Reports!
Science Citation Index (SCI)!
Social Science Citation Index (SSCI)!
Human & Behavior Citation Index (H&BCI)!
JCR!
SJR!
Scimago Journal
Rank
!
Scopus,
ElSevier!
Indicadores bibliométricos:!
• 
• 
• 
• 
Factor de Impacto!
Índice de citación (base más amplia)!
Índice de inmediatez!
Hirsh.. etc.!
Primer cuartil!
Segundo cuartil!
Tercer cuartil!
Cuarto cuartil!
Posicionamiento varia año
con año!
BIBLIOGRÁFICOS DE CITACIONES
Posicionamiento varia año
con año!
ÍNDICES
Indicadores bibliométricos:!
NO ES LO MISMO
Una revista DE ALTO factor de
impacto
Que…
Una revista CON factor de
impacto (pero bajo)
Revistas de más ALTO IMPACTO
Medicina!
Biología molecular!
Física!
Química !
Fisiología!
Fuente: ISI, 2010!
Genética!
Bioquímica!
Inmunología!
Farmacología!
Biotecnología!
El Factor de Impacto depende del ámbito
disciplinar.!
!
Las áreas biológicas, exactas y
naturales registran mayor cantidad
de artículos publicados por periodo,
y además los autores citan más.
Mientras que en las ciencias
sociales y humanas se publica
menos y se cita menos.
!
Por ello es preciso analizar este indicador por disciplina.!
FI por área del conocimiento
Alto Factor de
Impacto!
Bajo Factor de
Impacto!
Fuente: ISI, 2010!
Disyuntivas comunicación
de la ciencia AL
#!
a) 
Publicar en revistas editadas en Estados Unidos o Europa, bajo
severos (en principio) control de calidad siguiendo sus reglas del
juego. El producto tiene entonces mayor probabilidad (en principio)
de ser consumido (usado y citado) y no es necesario preocuparse
por poseer y desarrollar medios de producción propios.!
b)  Producir revistas locales o regionales y publicar en ellas, aunque no
compitan con las anteriores en prestigio y circulación. El producto
tiene entonces mayor probabilidad (en principio) de ser de interés
local y de estar al alcance de nuestros autores y lectores.!
c) 
#!
Trabajar de forma paralela en ambos objetivos, sin sacrificar las
prioridades nacionales o regionales por alguno de ellos!
POLÍTICA NACIONALES DE APOYO A CIENCIA Y
TECNOLOGÍA!
América Latina y el Caribe!
Brasil!
CAPES: Índice Qualis!
A1!
A2!
A3!
A4!
A5!
B1!
B2!
B3!
B4!
B5!
C!
! 
! 
! 
! 
Existen diversos comités de pares evaluadores por cada disciplina!
Cada comité define particularidades para cada disciplina!
Todas las revistas académicas editadas en Brasil, sin excepción tienen un índice Qualis!
Una misma revista puede ser evaluada en diferentes disciplinas, y obtener distintas
calificaciones!
!  También califican revistas extranjeras que publiquen trabajos de investigadores
brasileños!
!  Los resultados son abiertos, disponibles en la página web de Qualis-Capes!
Colombia!
Colciencias: Publindex!
A1!
A2!
B!
C!
!  Una revista sólo puede estar en una categoría y no hay diferencias por
disciplina!
!  La evaluación es constante, con periodos de reacreditación cada tres años!
!  El ascenso de nivel es en función de la obtención de indizaciones de
calidad.!
!  Cuentan con un servicio de “homologación” para revistas extranjeras.!
!  Los resultados son abiertos, disponibles en la página web de PublindexColciencias!
Chile!
Conicet: homologan con criterios Scielo!
Perú!
Concytec: Revistas peruanas científicas y técnica,
homologan con criterios Scielo!
Argentina!
Conicet: Caicyt núcleo básico de revistas, homologan
con criterios Scielo!
!  No conocemos si los organismos de ciencia y tecnología desarrollan una política
específica de publicaciones científicas; al parecer, ahorran los recursos destinados a
estas política y operan con las desarrolladas por Scielo.!
!  No se garantiza la misma calidad en todos los casos. Hay revistas reconocidas por
ciertos países que, si fuesen evaluadas con criterios de otros no serían acreditadas.!
!  Casi en todos los casos se privilegian las ciencias de la salud!
!  El costo del marcaje es absorbido por cada organismo nacional!
!  Salvo el caso de Chile, estos países no han logrado colocar más revistas en las bases
de datos comprensivas, y las que están no han mejorado sustancialmente su impacto.!
!  Las revistas reconocidas por estos países operan sus repositorios de revistas
nacionales bajo el modelo Scielo, y dependen tecnológicamente de sus desarrollos
tecnológicos.!
!
España!
FECYT: Repositorio RECYT (I3C, Índice Iberoamericano de
Investigación y Conocimiento)!
México!
Conacyt: índice de revistas de calidad!
Venezuela!
Cuba!
Revencyt: hasta 2009 homologaban Scielo como mayor calidad,
pero recién se independizaron!
CITMA: revistas acreditadas!
Infomed: acredita revistas mediante mecanismos Scielo!
MES: Comisión Nacional de Grado Científico, cuatro grupos!
!  Procesos de selección rigurosos pero menos específicos: sin categorías, sin diferencia
sustancial por indicadores bibliométricos, disciplina o indización (salvo el español que
reconoce WoS y Scopus).!
!  Una revista sólo puede estar en una categoría y no hay diferencias por disciplina.!
!  La evaluación es en periodos fijos, con reacreditación cada determinado tiempo.!
!  No cuentan con un servicio de “homologación” para revistas extranjeras.!
!  Los resultados son abiertos para el caso de España, México y Venezuela.!
!  En el caso de CITMA-Cuba es posible conocer las revistas certificadas en su página
web, pero el Ministerio de Educación Superior de Cuba (MES) no las reconoce como
de mayor calidad, sólo válida ISI, Scopus en el grupo de más calidad.!
Sesión de preguntas!
!"#$%&"'!"()*+,$*$-$%'
./&0)%1'2%"#$%&"%"()*''