Red de Revistas Científicas de América Latina y el Caribe, España y Portugal
Sistema de Información Científica
Redalyc > Criterios de evaluación
Criterios de evaluación
Comparte esta página:

Antecedentes

Es importante exponer como premisa que el cumplimiento de los parámetros es sólo la evidencia de ciertas prácticas formales en la revista, que son necesarias pero insuficientes para reflejar si ésta es una órgano de calidad, prestigio y capaz de aglutinar la discusión en un área temática y en una comunidad académica. La revisión de los criterios ofrece solamente los elementos para un análisis, pero la decisión final de incluir o no una revista toma en cuenta un balance entre todos los parámetros revisados, pero es una decisión que descansa en la experiencia del equipo evaluador, de la dirección y del Comité Científico Asesor de Redalyc. En última instancia es una decisión que se basa en una visión global de la revista, de las características que la fortalecen y de las áreas de oportunidad que tiene; y es una decisión cualitativa, no cuantitativa.

Pues se debe considerar la particularidad de cada campo, su dinámica, realidad y retos. La calidad de una revista no se puede determinar. Cada dictamen es sólo la conclusión de un conjunto de características y su balance, observado en un momento determinado de la evolución de la revista (para un mayor contexto, véase el apartado Presentación de esta sección).

Criterios de evaluación de revistas

Composición de la calificación: Categorías y Rubros

Existen tres categorías de acuerdo con el la importancia o peso que tienen en la evaluación:

  • Criterios básicos de admisión (CBA)
  • Criterios altamente valorados (CAV)
  • Criterios deseables (CD)

  • Existen seis rubros de acuerdo con la naturaleza de cada práctica y que agrupan los diferentes aspectos necesarios de la práctica editorial científica:

  • Permanencia.
  • Contenido Científico.
  • Periodicidad (incluye puntualidad y actualización).
  • Gestión Editorial.
  • Visibilidad del Contenido.
  • Aprovechamiento de la Tecnología.

  • A fin de que una revista sea considerada para ingresar en Redalyc deberá cumplir, en principio, todos los criterios básicos de admisión. Esto, junto con el balance que logre de acuerdo con el cumplimiento de criterios altamente recomendables y criterios deseables constituirá una caracterización que será calificada por la Dirección y por el Comité Científico Asesor de Redalyc para determinar su inclusión o su condicionamiento al cumplimiento de las recomendaciones emitidas. Como ya se expuso en la presentación, la selección de revistas es un proceso cualitativo, no cuantitativo, pero formalmente se evalúan 49 criterios en total.


    Los criterios se presentan a continuación, agrupados por rubros y especifican su categoría:

    Criterios de evaluación

    1. Permanencia

    1.1 Antigüedad / CBA

    La revista debe tener un mínimo de tres años de existencia. Los fascículos editados en ese periodo deben ser visibles en su plataforma. Para efectos de la evaluación, sólo se considerarán los números regulares editados sin retraso.

    2. Contenido científico


    2.1 Porcentaje de contenido científico / CBA

    Al menos el 75% de las colaboraciones de cada fascículo deben ser resultados originales producto de investigaciones científicas, así como otras contribuciones originales significativas para el área específica de la revista.


    2.2 Exigencia de originalidad / CBA

    Debe exigirse explícitamente que todo artículo postulado para publicación sea original e inédito y que no esté postulado simultáneamente en otras revistas u órganos editoriales.

    Se recomienda remitir el formato de la carta de exigencia de originalidad que se le da a firmar a los autores.


    2.3 Revisión por pares / CBA

    Todo original publicado deberá ser sometido a un proceso de dictamen por pares académicos (especialistas).

    Deberá practicarse un proceso de revisión, dictamen o arbitraje de los artículos postulados para su publicación. El equipo de Redalyc verificará que en algún apartado -de preferencia en el denominado "Proceso de revisión por pares" y/o en las instrucciones para autores- se mencione explícitamente esta exigencia.


    El proceso de dictamen debe explicitar el tipo de proceso que se lleva a cabo (sin o con anonimato, de una o de ambas partes).


    2.4 Proceso de evaluación / CBA

    La revista debe incluir una descripción del proceso de dictamen, es decir, detallar lo siguiente:

  • Todas sus fases.
  • Cómo se dirimen los casos de controversia.
  • Los posibles resultados.
  • Para una mejor evaluación es recomendable remitir el formato de dictamen.

    La carencia de alguno de estos datos determinará el incumplimiento de este criterio.


    2.5 Exogeneidad de evaluadores / CAV

    Debe mencionarse en forma explícita la participación de evaluadores externos (a la institución editora o al país) en el proceso de dictamen.


    2.6 Exogeneidad del consejo editorial / CAV

    Al menos el 75% de los integrantes del consejo editorial deben ser ajenos a la entidad editora.


    2.7 Tiempos de evaluación / CAV

    Presenta información en las instrucciones para los autores y/o en sus políticas editoriales sobre el tiempo estimado para los procesos de evaluación y publicación.


    2.8 Formato de evaluación visible / CAV

    Hace público y visible su formato de evaluación.


    2.9 Fechas del proceso de evaluación / CAV

    En cada artículo se deben indicar las fechas de recepción y aceptación, preferentemente en la primera página. Es recomendable precisar cada ronda de correcciones en el proceso de arbitraje previo a la aceptación del artículo.


    2.10 Tasas de rechazo / CAV

    Hace pública y visible la tasa de rechazo de artículos del año previo a la postulación.


    2.11 Exogeneidad en publicación / CAV

    Al menos el 70% de los trabajos científicos publicados en cada número son colaboraciones ajenas a la institución editora (con al menos un autor ajeno a la institución).

    Se pondrá especial atención en los casos donde el editor -o algún otro miembro del consejo editorial- publique con frecuencia en la revista que gestiona.

    Asimismo, se pondrá especial atención en los casos donde un mismo autor publique más de un artículo por fascículo o más de una vez al año.


    2.12 Números sin contenido científico / CAV

    Se calificarán negativamente los casos en los que los fascículos publicados sin contenido científico o documentos republicados sustituyan a los números regulares. Para revistas que ya están en redalyc.org, esta mala práctica editorial puede ser motivo de baja.

    3. Periodicidad


    3.1 Actualización y periodicidad / CBA

  • Debe mencionar explícitamente su periodicidad. (mensual, bimestral, trimestral).
  • Debe estar actualizada.
  • Las periodicidades mayores de semestral no son recomendables*.
  • No se evaluarán anuarios a menos que la especificidad de la disciplina lo requiera y que el editor presente una argumentación al respecto**.
  • *Debido a la dinámica necesaria para la comunicación científica con actualidad, en caso de ser semestral será considerado un aspecto por mejorar en cualquier revista.

    **Las razones para conservar una periodicidad anual deben estar explicadas en sus políticas editoriales.


    3.2 Política de embargo / CBA

  • La revista no debe presentar embargo sobre su contenido.

  • 3.3 Cumplimiento de la periodicidad / CBA

    Los fascículos deben publicarse puntualmente de acuerdo con la periodicidad expresada por la revista y deben estar en línea en el primer día del periodo de publicación.

    Para ello se analizarán al menos los tres fascículos regulares más recientemente editados. Los números dobles son considerados de facto como edición con retraso.


    3.4 Especificación de la periodicidad / CBA

    En la página principal del portal de la revista, en la Tabla de Contenido y en los apartados "Actual y Anteriores" o "Archivos" se deben precisar los meses que comprende el periodo de publicación de los números, así como el día de publicación de cada fascículo.


    3.5 Fecha de publicación en línea / CD

    La revista especifica el día en el que pone en línea sus fascículos (véase el apartado 3.4).

    4. Gestión editorial


    4.1 Identificación de la revista / CBA

    Debe ostentar de manera visible:

  • Título completo
  • ISSN impreso y/o electrónico
  • Institución editora
  • La carencia de alguno de estos datos determinará el incumplimiento de este criterio.


    4.2 Datos generales de la revista / CAV

    Debe ostentar lo siguiente:

  • Directorio completo de la revista (director, editor, editores adjuntos, corrector, traductor, diseñador, desarrollador de sistemas y otros miembros del equipo).
  • Directorio del consejo editorial, indicando el nombre completo de cada miembro.
  • Objetivo de la revista de manera clara.
  • Público al que se dirige.
  • La carencia de alguno de estos datos determinará el incumplimiento de este criterio.


    4.3 Datos de la institución editora / CAV

    Indicar en los datos de contacto:

  • Nombre completo del contacto.
  • Nombre completo de la institución u organismo editor (sin abreviaturas).
  • Ciudad y país de edición (sin abreviaturas).
  • Dirección postal.
  • Correo electrónico.
  • Teléfono y/o fax.
  • La carencia de alguno de estos datos determinará el incumplimiento de este criterio.


    4.4 Cobertura temática / CAV

    Debe indicarse explícitamente la cobertura temática (alcance), así como la definición precisa de la naturaleza de la revista incluyendo: propósito, público o comunidad a la que se dirige, tipologías documentales que publica, idiomas de publicación, fuentes de financiamiento (incluido APC) y formatos de edición.


    Redalyc se pronuncia por un Acceso Abierto No comercial, por lo que, aunque en la actualidad puedan ser aceptadas revistas con APC, puede limitar el uso de las ventajas y servicios que Redalyc ofrece al editor y a la revista (por ejemplo, la herramienta de marcación gratuita para XML JATS Marcalyc no estará disponible para revistas con APC y éstas deberán entregar sus XML-JATS a Redalyc).

    4.5 Especificidad temática / CAV

    Una temática específica, en la que haya pocas publicaciones, será valorada positivamente (enfoque).


    4.6 Afiliación de consejo editorial / CAV

    Debe indicarse la afiliación institucional de los miembros del consejo editorial, incluyendo el país (es indispensable no utilizar siglas).


    4.7 Características de la tabla de contenido (TDC) / CAV

    Debe existir una tabla de contenido que exhiba todos los datos que se mencionan enseguida:

  • El título completo de todos los artículos en el idioma original.
  • Los nombres completos de todos los autores (de preferencia sin abreviaturas y con apellidos unidos por un guion).
  • La página de inicio de cada artículo (no aplica para revistas exclusivamente electrónicas y/o de publicación continua).
  • La carencia de alguno de estos datos determinará el incumplimiento de este criterio, excepto el tercero bajo las condiciones especificadas.


    4.8 Tabla de contenido (TDC) con traducción / CAV

    Se incluye, además del título en el idioma original, su traducción a un segundo idioma, de preferencia al inglés.


    4.9 Adscripción de los autores / CAV

    Cada artículo debe indicar:

  • Los nombres completos de los autores.
  • La institución de adscripción de éstos.
  • El país de la institución de adscripción de cada uno (no se consideran válidas las abreviaturas o siglas ni en las instituciones ni en los países).
  • Correo electrónico de al menos uno de los autores.

  • 4.10 Artículos publicados anualmente / CAV

    Se recomienda, según cada área disciplinar, publicar una cantidad anual de artículos mayor de la mínima establecida en la siguiente tabla:

    El hecho de publicar una cantidad significativamente menor que la mínima establecida será considerado una mala práctica.

    CantidadMínima requerida Deseable áreas en Redalyc Disciplinas
    17 26 Ciencias Sociales Administración y Contabilidad, Antropología, Ciencias de la Información, Comunicación, Demografía, Derecho, Economía y Finanzas, Educación, Estudios Agrarios, Estudios Ambientales, Estudios Culturales, Estudios de Turismo, Estudios Territoriales, Geografía Social, Multidisciplinarias (Ciencias Sociales), Política, Psicología, Relaciones, Internacionales, Salud, Sociología.
    16 25 Arte y Humanidades Arquitectura, Arte, Filosofía, Historia, Lengua y Literatura, Teología.
    16 25 Ciencias Naturales y Exactas Agrociencias, Biología, Ciencias de la Tierra, Computación, Física, Astronomía y Matemáticas, Geología, Ingeniería, Medicina, Multidisciplinaria (Ciencias Naturales y Exactas), Química, Veterinaria.

    4.11 Publicación homogénea / CAV

    Debe haber homogeneidad de los fascículos en cuanto a número de artículos publicados, salvo en el caso de revistas de publicación continua o cuando explícitamente se defina que el número de artículos corresponderá al flujo editorial de la revista.


    4.12 Secciones fijas / CD

    Las secciones de la revista son constantes y fijas, salvo en el caso de revistas de publicación continua.


    4.13 Vigencia de registros / CAV

    Los registros declarados por la revista se encuentran vigentes. Debe hacerse una distinción entre:

  • Directorios.
  • Bases de datos.
  • Indizaciones.
  • Directorios: son sistemas que registran y recogen la existencia de revistas científicas, en general.

    Bases de datos: generalmente además de registrar la existencia, realizan análisis de impacto o comportamiento de las revistas en un universo determinado; algunas incluyen contenidos de las revistas registradas.

    Indizaciones: son sistemas que presentan una serie de parámetros o criterios que buscan calificar y seleccionar a las revistas . (En el caso de Latindex, por ejemplo, debe diferenciarse entre la pertenencia al Directorio o al Catálogo).


    4.14 Estilo de citación / CD

    Se indican detalladamente las normas de elaboración de las referencias bibliográficas y el estilo de citación que se debe observar. Asimismo, se verificará:

  • Su aplicación en los artículos publicados.
  • Que las fichas bibliográficas estén numeradas secuencialmente.

  • 4.15 Instrucciones para autores en inglés / CD

    Se incluyen las instrucciones para los autores a un segundo idioma, de preferencia al inglés.


    4.16 Licenciamiento y Creative Commons (CC) / CAV

    Mención explícita del licenciamiento bajo el cual la revista o institución editora publica los contenidos. Es recomendable el uso de licencias Creative Commons, con derechos de atribución y no comercial (BY, NC).

    En este aspecto, Redalyc se suma a la política del sello DOAJ.

    Para amparar la difusión de los contenidos en abierto y prevenir una explotación lucrativa por terceros, es recomendable remitir los formatos o condiciones que firman o aceptan en electrónico los autores para ceder los derechos de la distribución y reproducción de los materiales.


    4.17 Código de ética / CD

    La revista se suscribe a algún código de ética y buenas prácticas editoriales científicas e indica cuál, que debe indicar las prácticas no aceptadas y las medidas que implica infringir dicho código.

    Se valorará positivamente el uso de algún software para detectar plagios. Es recomendable que se especifique que se comunica el resultado al autor(es), con sus respectivas fuentes y solicitar sus comentarios antes de definir que es un comportanmiento de plagio y, en consecuencia, no editable.

    Se recomienda detallar las conductas no aceptadas y las consecuencias que éstas tienen. Un ejemplo de código de ética puede verse en las norma COPE (Cometee on Publication Ethics).

    5. Visibilidad del contenido


    5.1 Resúmenes y palabras clave / CAV

    Debe incluirse en cada artículo:

  • Resumen en el idioma original.
  • Resumen en un segundo idioma, de preferencia inglés.
  • Palabras clave en el idioma original.
  • Palabras clave en un segundo idioma, de preferencia inglés.

  • La carencia de alguno de estos datos determinará el incumplimiento de este criterio.

    En el caso de las revistas de Ciencias Naturales y Exactas, y Ciencias Sociales se valorará positivamente que los resúmenes y abstracts expresen de manera separada: objetivo; diseño metodología aproximación resultados; limitaciones y/o implicaciones; originalidad y/o valor, y hallazgos y/o conclusiones; o los apartados que de esta lista resulten pertinentes al trabajo.


    5.2 Membrete / CD

    Se identifica cada artículo mediante membrete bibliográfico en la página inicial y en las páginas interiores, el cual incluye:

  • Nombre de la revista o ISSN
  • Volumen y número
  • Periodo que cubre la edición indicando meses y años
  • Nombres de los autores

  • 5.3 Política de autoarchivo / CAV

    Permite publicación simultánea en sistemas de autoarchivo o repositorios institucionales.

    (Véase el apartado 4.16. Licenciamiento y Creative Commons (CC) / CAV).

    6. Aprovechamiento de la Tecnología


    6.1 Plataforma electrónica / CBA

    La revista debe contar con una página electrónica.

    Únicamente se evaluarán revistas en su plataforma electrónica, no se evaluarán revistas impresas a menos que el editor presente una justificación para ello.

    La plataforma electrónica debe ser independiente del portal de la institución o de las autoridades editoras, es decir, debe contar con un URL y un sitio independiente del portal de la institución editora, que facilite su localización y visualización.

    Redalyc no busca sustituir la presencia de la revista en la web, sino recomendar las mejores prácticas de visibilidad e interoperabilidad tecnológica. Lo anterior, acorde con los tiempos que vive la comunicación científica, donde el impreso pierde peso por sus limitantes de costo y alcance.


    6.2 Formatos de despliegue / CAV

    Pone a disposición del usuario más de un formato electrónico para el despliegue de los artículos publicados (pdf, RDF, ePub, html, xml).


    6.3 Homogeneidad de formatos / CAV

    Si la revista tiene formatos electrónico e impreso, todos los soportes deben ser homogéneos en su contenido, no necesariamente en su estilo.


    6.4 Uso de un gestor electrónico / CAV

    Utiliza un gestor editorial electrónico como herramienta de control del proceso de dictamen y no sólo como plataforma de publicación.Redalyc recomienda OJS 3.0.


    6.5 Incorporación de protocolos de interoperatividad en AA / CAV

    Cuenta con protocolos de interoperabilidad (OAI-PMH: Open Archives Initiatives - Protocol for Metadata Harvesting).


    6.6 Buscador de contenidos / CAV

    Cuenta con un motor de búsqueda específico para los contenidos de la revista, para la localización y recuperación de artículos publicados.


    6.7 Descarga individual de contenidos / CAV

    El sitio web debe permitir la descarga individual de cada uno de los artículos publicados en los fascículos de la revista, de acuerdo con la tabla de contenidos de cada número.


    6.8 XML-JATS / CAV

    Dispone de sus artículos marcados en el formato XML-JATS.

    Si no cuenta con dicho formato, la revista, en caso de ser aceptada, podrá hacer uso de la herramienta de marcación Marcalyc (una vez que reciba la capacitación sin costo por parte de Redalyc.org y la certificación para su uso) y deberá marcar todos sus contenidos a partir de 2016 para su incorporación en redalyc.org.


    6.9 Integridad de la colección / CAV

    Todos los números de la revista , con sus contenidos completos, deben estar visibles en un solo sitio web.


    6.10 Identificadores (ID) de autor / CAV

    Todos los autores aparecen junto con su identificadores (ID) de Redalyc y/o de ORCID, Research Gate, Mendeley, Academia, Google Citations, etc.


    6.11 Usabilidad / CAV

    La página electrónica cuenta con adecuada navegabilidad, usabilidad y está constantemente actualizada. Además, refleja la personalidad y la estética funcional de la revista en su portal.


    Notas generales


    Para los criterios de identificación autoral no se considerará la información incluida en secciones aparte, que pueden denominarse "Nuestros Autores" o "Acerca de los autores".


    Acerca de los criterios de resúmenes y abstracts no se considerará la información incluida en secciones aparte, generalmente llamadas "resúmenes y/o abstracts".


    Categorías


    Categoría 1. Criterios básicos de admisión (CBA)


    Criterios que de forma obligatoria deben ser cubiertos por todas las revistas interesadas en ser incluidas en Redalyc. Si una revista no cumple alguno de estos criterios, el proceso de evaluación se suspende en esta etapa y la revista se considera condicionada para su posterior evaluación. Una vez que la revista haya efectuado los ajustes necesarios para cumplir dichos criterios deberá reiniciar su postulación desde la primera etapa.


    Categoría 2. Criterios altamente valorados (CAV)


    Si la revista acredita satisfactoriamente todos los criterios del módulo A, se procede a analizar los criterios considerados de alto valor en los procesos editoriales y la capacidad de inserción en las tecnologías que permiten la visibilidad y el diálogo internacional de la revista.


    Categoría 3. Criterios deseables (CD)


    En tercera instancia, se analizan los criterios de características deseables de las revistas que le dan una mayor presencia, legibilidad y personalidad.

    uaem-pie

    Universidad Autónoma del Estado de México

    Sistema de información Científica Redalyc

    Versión 2.2 beta | 2015

    redalyc@redalyc.org

    Pie piepag