» Criterios de evaluación

INTRODUCCIÓN

Es importante exponer como premisa que el cumplimiento de los parámetros es sólo la evidencia de ciertas prácticas formales en la revista, que son necesarias pero insuficientes para reflejar si ésta es un órgano de calidad, prestigio y capaz de aglutinar la discusión en un área temática y en una comunidad académica. La revisión de los criterios ofrece solamente los elementos para un análisis, pero la decisión final de incluir o no una revista toma en cuenta un balance entre todos los parámetros revisados, y es una decisión que descansa en la experiencia del equipo evaluador, de la dirección y del Comité Científico Asesor de Redalyc. En última instancia es una decisión que se basa en una visión global de la revista, de las características que la fortalecen, de las áreas de oportunidad que tiene; es una decisión cualitativa, no cuantitativa, pues se debe considerar la particularidad de cada campo, su dinámica, realidad y retos. La calidad de una revista no se puede determinar. Cada dictamen es sólo la conclusión de un conjunto de características y su balance, observado en un momento determinado de la evolución de la revista (para un mayor contexto, véase el apartado Presentación de esta sección).

Criterios de evaluación

CRITERIOS BÁSICOS DE ADMISIÓN (CBA)

1. Antigüedad

La revista debe tener un mínimo de dos años de existencia. Los fascículos editados en los últimos dos años deben ser visibles en su plataforma. Para efectos de la evaluación, sólo se considerarán los números regulares editados sin retraso.

2. Revisión por Pares

Todo original publicado deberá ser sometido a un proceso de dictamen por pares académicos (especialistas). El proceso de dictamen debe explicitar el tipo de dictaminación que se lleva a cabo (sin o con anonimato, de una o de ambas partes), además de sus fases, posibles resultados y como se dirimen los casos de controversia.

*El equipo de Redalyc verificará que en algún apartado -de preferencia en el denominado "Proceso de revisión por pares" y/o en las instrucciones para autores- se mencione explícitamente esta exigencia.

3. Porcentaje de contenido científico.

Al menos el 75% de las colaboraciones de cada fascículo deben ser resultados originales producto de investigaciones científicas, así como otras aportaciones originales significativas para el área específica de la revista.

4. Exigeneidad en publicación.

Al menos el 70% de los trabajos científicos publicados en cada número son colaboraciones ajenas a la institución editora (con al menos un autor ajeno a la institución).

5. Cumplimiento de periodicidad.

Los fascículos deben publicarse puntualmente de acuerdo con la periodicidad expresada por la revista (mensual, bimestral, trimestral). En el caso de las revistas con periodicidad continua, se calificarán negativamente los espacios mayores a tres meses sin artículos nuevos en línea.

6. No efectuar cargos por procesamiento de artículos (APC).

La revista no debe solicitar el cobro de tarifas para la evaluación o procesamiento de sus artículos hacia los autores y/o instituciones.

7. Adhesión a DORA.

La revista ha firmado la Declaración sobre la Evaluación de la Investigación (DORA).

8. XML-JATS.

Dispone de sus artículos marcados en formato XML JATS.

*Si no cuenta con dicho formato, podrá hacer uso de la herramienta de marcación Marcalyc (una vez que reciba la capacitación sin costo por parte de Redalyc.org) y deberá marcar todos sus contenidos a partir de 2016 para su incorporación en redalyc.org.

9. Datos de Identificación.

Debe ostentar: título completo, ISSN (impreso y/o electrónico) y su institución editora.

10. Política de Acceso Abierto.

La revista debe permitir leer, descargar, copiar, distribuir, imprimir, buscar o vincular los textos completos de sus artículos.

CRITERIOS ALTAMENTE VALORADOS Y DESEABLES

1. Contenido científico.

1.1. Exogeneidad de Evaluadores. / CAV

Debe mencionarse en forma explícita la participación de evaluadores externos a la institución editora en el proceso de dictamen.

1.2. Exigencia de originalidad. / CAV

Debe exigirse explícitamente que todo artículo postulado para su publicación sea original e inédito y que no esté postulado simultáneamente en otras revistas u órganos editoriales.

1.3 Exogeneidad del consejo Editorial. / CAV

Al menos el 75% de los integrantes del consejo editorial deben ser ajenos a la entidad editora. (CAV)

*El criterio no podrá ser evaluado si la revista no menciona la institución editora y el país de los miembros del consejo editorial (no se considera válido el uso de siglas).

1.4. Tiempos de Evaluación. / CAV

Presenta información en las instrucciones para los autores y/o en sus políticas editoriales sobre el tiempo estimado para los procesos de evaluación y publicación.

1.5. Formato de Evaluación Visible. / CAV

Hace público y visible su formulario de evaluación (utilizado por los dictaminadores).

1.6. Fechas del proceso de Evaluación. / CAV

En cada artículo se deben indicar las fechas de recepción y aceptación, preferentemente en la primera página. Es recomendable precisar cada ronda de correcciones en el proceso de arbitraje previo a la aceptación del artículo.

1.7. Fascículos sin contenido Científico. / CAV

Se calificarán negativamente los casos en los que los fascículos publicados sin contenido científico o documentos republicados sustituyan a los números regulares. Esto es considerado una mala práctica editorial.

1.8. Tasas de rechazo. /CD

Hace pública y visible la tasa de rechazo de artículos del año previo a la postulación.


2. Periodicidad

2.1. Especificación de periodicidad. / CAV

En la página principal del portal de la revista, en la Tabla de Contenido y en los apartados "Actual" y "Anteriores" o "Archivos" se deben precisar los meses que comprende el periodo de publicación de los números, así como el mes de publicación de cada fascículo.

2.2. Fecha de publicación. /CD

La revista especifica el día en el que pone en línea sus fascículos.


3. Acceso abierto

3.1. Fuentes de Financiamiento. / CAV

Indicar explícitamente en su página principal cuáles son sus fuentes de financiamiento.

3.2 Licenciamiento / CAV

Mención explícita del licenciamiento bajo el cual la revista o institución editora publica los contenidos. Es recomendable el uso de licencias Creative Commons, con derechos de atribución y no comercial (BY, NC).

* Para más información visitar https://wiki.creativecommons.org/. Para amparar la difusión de los contenidos en abierto y prevenir una explotación lucrativa por terceros, es recomendable remitir los formatos o condiciones que firman o aceptan en electrónico los autores para ceder los derechos de la distribución y reproducción de los materiales.

3.3. Licencia por artículo. / CAV

La revista incluye la información relativa a la licencia Creative Commons (legible por máquinas) en los metadatos de los artículos en formatos portables (PDF, ePub…).

*Es necesario que cada artículo cuente con la información de su licencia en las propiedades del archivo portable. En cuanto a formatos de despliegue, debe ir dentro de su código fuente.

3.4. Derechos de explotacion. / CAV

Se menciona quién es el titular de los derechos patrimoniales de los contenidos de la revista (copyright).

3.5. Política de Autoarchivo. / CAV

La revista describe en qué momento (al envío del archivo, al aceptarse el trabajo, en el momento de la publicación, o después de un periodo de embargo) y en que versión (Pre-print, post-print versión editorial o post-print versión corregida) permite el autoarchivo de los artículos publicados, en repositorios institucionales, temáticos o páginas web personales.


4. Gestión Editorial.

4.1. Datos de Contacto de la institución editora. / CAV

Indicar en los datos de contacto: nombre completo del contacto, nombre completo de la institución u organismo editor (sin abreviaturas), ciudad y país de edición (sin abreviaturas) y correo electrónico (institucional).

4.2. Alcance y Naturaleza. / CAV

Debe indicarse explícitamente la cobertura temática (alcance), así como la definición precisa de la naturaleza de la revista incluyendo: propósito, público o comunidad a la que se dirige.

*La carencia de alguno de estos datos determinará el incumplimiento de este criterio.

4.3. Especifidad temática. / CAV

La revista tiene una temática específica (enfoque).

4.4. Directorios. / CAV

Debe ostentar un directorio completo de la revista que incluya lo siguiente: identidad del editor responsable, directorio del consejo editorial, indicando el nombre completo de cada miembro.

4.5. Membrete. /CD

Se identifica cada artículo mediante membrete bibliográfico en la página inicial y en las páginas interiores, el cual incluye:

  • Nombre de la revista o ISSN
  • Volumen y número
  • Periodo que cubre la edición indicando meses y años
  • Nombres de los autores

4.6. Afiliación del Consejo Editorial. / CAV

Debe indicar la afiliación institucional de los miembros del consejo editorial, incluyendo el país. (No se consideran válidas las abreviaturas o siglas ni en las instituciones ni en los países).

4.7. Tabla de contenido con traducción. / CAV

Debe existir una tabla de contenido que exhiba todos los datos que se mencionan enseguida: el título completo de todos los artículos en el idioma original y en un segundo idioma (de preferencia en inglés), nombre de al menos uno de los autores.

4.8. Datos de los autores. / CAV

Cada artículo debe indicar: los nombres completos de los autores, la institución de adscripción de éstos, el país de la institución de adscripción de cada uno (no se consideran válidas las abreviaturas o siglas ni en las instituciones ni en los países) y el correo electrónico de al menos uno de los autores.

*La carencia de alguno de estos datos determinará el incumplimiento de este criterio.

4.9. Artículos por año. / CAV

Se recomienda publicar una cantidad anual mínima de 16 artículos.

*El hecho de publicar una cantidad significativamente menor será considerado una mala práctica editorial.

4.10. Publicación Homogénea. / CAV

Homogeneidad de sus fascículos en cuanto a número de artículos publicados.

4.11. Distinción de registros vigentes. / CAV

La revista debe mencionar los registros y distinguir entre: directorios, bases de datos e indizaciones en los que se encuentra vigente. Además cada registro declarado debe contar con un enlace directo al mismo.

*Si la información expresada en el formulario no es verdadera, se dará por incumplido el criterio.

4.12. Estilo de citación. /CD

Se indican detalladamente las normas de elaboración de las referencias bibliográficas y el estilo de citación que se debe observar. Asimismo, se verificará su aplicación en los artículos publicados.

* Se recomiendan estilos de citación aceptados internacionalmente.

4.13. Resúmen y palabras clave. / CAV

Debe incluirse en cada artículo: resumen en el idioma original, resumen en un segundo idioma (de preferencia inglés), palabras clave en el idioma original y palabras clave en un segundo idioma (de preferencia inglés).

*La carencia de alguno de estos datos determinará el incumplimiento de este criterio.

4.14. Instrucciones para autores en dos idiomas. / CD

Se incluyen las instrucciones para los autores en un segundo idioma, de preferencia en inglés de manera visible en la página de la revista.

4.15. Código de ética. / CD

La revista debe mencionar si está suscrita a algún código de ética y buenas prácticas editoriales científicas (Por ejemplo: COPE, CSE, CSIC, etc.) Es recomendable que señale las prácticas no aceptadas y las medidas que implica infringir dicho código.

4.16. Detección de similitud (posible plagio). /CD

La revista debe detallar el método que utiliza para la detección similitud de textos, resultando en un posible plagio o si hace uso de algún software.

* Es recomendable que se especifique que se comunica el resultado al autor(es), con sus respectivas fuentes y solicitar sus comentarios antes de definir que es un comportamiento de plagio y, en consecuencia, no editable. Se sugiere que si se usa un software, la revista no tome la decisión sobre el conteo arrojado, si no que sea por una decisión del editor.

4.17. Política de preservación digital del documento. / CAV

Se deben detallar las políticas de preservación de archivos digitales.


5. Aprovechamiento de Tecnología.

5.1. Plataforma electrónica independiente. / CAV

La revista debe tener un Home o página de llegada independiente de la de su institución.

*Únicamente se evaluarán revistas en su plataforma electrónica, no se evaluarán revistas impresas a menos que el editor presente una justificación para ello.

*La plataforma electrónica debe ser independiente del portal de la institución o de las autoridades editoras, es decir, debe contar con un URL y un sitio independiente del portal de la institución editora, que facilite su localización y visualización (no se refiere a que esté fuera del dominio institucional).

*Redalyc no busca sustituir la presencia de la revista en la web, sino recomendar las mejores prácticas de visibilidad e interoperabilidad tecnológica. Lo anterior, acorde con los tiempos que vive la comunicación científica, donde el impreso pierde peso por sus limitantes de costo y alcance.

5.2. Formatos de despliegue. / CAV

Pone a disposición del usuario más de un formato electrónico para el despliegue de los artículos publicados (PDF, RDF, ePub, HTML, XML).

5.3. Uso de Gestor electrónico. / CAV

Utiliza un gestor editorial electrónico como herramienta de control del proceso de dictamen y no sólo como plataforma de publicación. Redalyc recomienda OJS 3.X.

5.4. Incorporacion de protocolos de interoperabilidad en AA. / CAV

Cuenta con protocolos de interoperabilidad (OAI-PMH: Open Archives Initiative-Protocol for Metadata Harvesting).

5.5. Motor de búsqueda. / CAV

Cuenta con un motor de búsqueda específico para los contenidos de la revista, para la localización y recuperación de artículos publicados, además permite el uso de operadores lógicos para optimizar la búsqueda.

5.6. Descarga individual de contenidos. / CAV

Permite la descarga de cada uno de los artículos de manera individual.

5.7. Integridad de la colección. / CAV

Todos los números digitales disponibles de la revista, deben estar visibles en un sólo sitio web.

5.8. Identificadores (ID) de autor. / CAV

La revista solicita a los autores sus identificadores (ID) de Redalyc y/o de ORCID.

5.9. Identificador de recursos digitales. / CAV

Todos los artículos deben contar con un identificador digital de objeto (DOI, Handle, etc.).

5.10. Usabilidad. / CAV

La página electrónica cuenta con eficiente navegabilidad, es decir, debe permitir el acceso a los contenidos de la revista en un máximo de tres clics.

5.11. Experiencia web. / CAV

La revista debe contar con características propias de una publicación en línea que brindan valor agregado al usuario, por ejemplo: servicios multimedia, acceso a datos fuente, servicios de accesibilidad e inclusión del usuario, así como la promoción a través de sitios especializados (Google Académico, Mendeley, Academia.edu, Research Gate, etc.).

5.12. Interacción con el usuario. / CAV

La revista debe facilitar el uso de tecnologías de interacción, como blogs y foros que permitan al usuario una participación bilateral.

5.13. Datos estadísticos. / CAV

La revista debe tener un apartado de estadísticas actualizadas ya sean de su propio sitio web, o bien recurriendo a servicios de terceros.

Notas generales

Para los criterios de identificación autoral no se considerará la información incluida en secciones aparte, que pueden denominarse "Nuestros Autores" o "Acerca de los autores".

Acerca de los criterios de resúmenes y abstracts no se considerará la información incluida en secciones aparte, generalmente llamadas "resúmenes y/o abstracts".

Categorías

Categoría 1. Criterios Básicos de Admisión: / CBA (también necesarios para permanecer en Redalyc.org):

Consta de 10 criterios que de forma obligatoria deben ser cubiertos por todas las revistas interesadas en seguir en el catálogo de Redalyc.

Categoría 2. Criterios Altamente Valorados: / CAV

Si la revista acredita satisfactoriamente todos los criterios de la categoría 1, se procede a verificar el cumplimiento de los 38 criterios considerados de alto valor en los procesos editoriales.

Categoría 3. Criterios Deseables: / CD

En tercera instancia, se constata el cumplimiento de los 7 criterios de características deseables de las revistas que les dan una mayor legibilidad, personalidad e interacción con los usuarios.