2019
112
19122018
11022019
Resumen: Los análisis bibliométricos aplican técnicas estadísticas que proporcionan información relevante para identificar avances de las actividades relacionadas con generación del conocimiento, tendencias y características de los artículos publicados en las revistas. El objetivo de la investigación fue analizar los indicadores bibliométricos de la revista Signos. Investigación en Sistemas de Gestión. Para ello se realizó un estudio bibliométrico cuantitativo, descriptivo y longitudinal. Se analizaron 121 artículos correspondientes a 16 volúmenes en el periodo 2009-2016. Se estudiaron los indicadores de producción, visibilidad e impacto y colaboración identificando nivel de citación a través de la página web de la revista. Se encontró que 4 % de escritos son en inglés, con un total de 196 autores con 3 o más artículos, de los cuales 40 escribieron de manera individual un artículo. Se encontró que el 61 % son mujeres. Hubo 46 contribuciones internas y 75 externas. Las palabras clave más frecuentes fueron gestión de la calidad y sistemas de gestión de la calidad. Se concluye que el análisis bibliométrico evidencia el estado actual de la revista, sus debilidades y fortalezas, aporte significativo para los editores como herramienta coadyuvante en el proceso de gestión.
Palabras clave: bibliometría, indicadores, investigación, conocimiento, publicación.
Abstract: Bibliometric analyses apply statistical techniques that provide relevant information to identify advances of the activities related to knowledge generation, trends and characteristics of articles published in magazines. The objective of the research consisted of analyzing bibliometric indicators of the magazine Signos. Investigación en Sistemas de Gestión, through a descriptive, longitudinal study. For this purpose, a quantitative, descriptive and longitudinal bibliometric analysis was carried out. 121 articles corresponding to 16 volumes from 2009 to 2016 were analyzed. The production, visibility and impact and collaboration indicators were studied, identifying the citation level through the magazine website. It was found that 4% of the content published by Signos was written in English, with a total of 196 authors with 3 or more articles, of which 40 authors wrote an article individually, with 61& of authors being women. Internal collaboration amounted to 46 contributions and the number of external contributions was 75. The most common keywords were quality management and quality management systems. It is concluded that this type of bibliometric analyses evidences the current status of the magazine, its weaknesses and strengths, their significant contribution to editors as a contributing tool in the management process.
Keywords: Bibliometry, indicators, research, knowledge, publication.
Resumo: As análises bibliométricas aplicam técnicas estatísticas que fornecem informações relevantes para a identificação dos avanços das atividades relacionadas com a geração do conhecimento, tendências e características dos artigos publicados nas revistas. O objetivo da pesquisa foi analisar os indicadores bibliométricos da Revista Signos. Investigación en Sistemas de Gestión, através de um estudo descritivo, longitudinal. Para isso, realizou-se um estudo bibliométrico quantitativo, descritivo e longitudinal. Foram analisados 121 artigos que correspondem a 16 volumes durante o período 2009/2016. Foram estudados os indicadores de produção, visibilidade e impacto e colaboração, identificando o nível de citação através do website da revista. Achou-se que na revista Signos foi publicado 4% de escritos em inglês, com 196 autores em total que tinham 3 ou mais artigos, dos quais 40 autores escreveram individualmente um artigo, sendo 61% mulheres. A colaboração interna foi de 46 contribuições e em nível externo foi de 75 contribuições. As palavras-chave com maior frequência foram “gestão da qualidade” e “sistemas de gestão da qualidade”. Conclui-se que esse tipo de análise bibliométricas revelam o atual estado da revista, as fraquezas e fortalezas, contribuição significativa para os editores como ferramenta coadjuvante no processo de gestão.
Palavras-chave: Bibliometria, indicadores, pesquisa, conhecimento, publicação.
Artículos
Análisis bibliométrico de la revista Signos. Investigación en Sistemas de Gestión, periodo 2009-2016*
Bibliometric analysis of magazine Signos. Investigación en Sistemas de Gestión from 2009-2016
Análise bibliométrico da Revista Signos. Investigación en Sistemas de Gestión - período 2009/2016
Recepción: 19 Diciembre 2018
Revisado: 15 Enero 2019
Aprobación: 11 Febrero 2019
La promoción y publicación del conocimiento científico juega un papel importante para la sociedad, y una efectiva herramienta para analizar esa actividad es la bibliometría. En la última década dicha técnica se ha fortalecido con diferentes maneras de evaluación que sirven para analizar cómo se crea, progresa y transmite el conocimiento científico, de modo que se ha convertido en una poderosa herramienta para evaluar el estado actual de la investigación científica, así como los aportes de los investigadores.
Los análisis bibliométricos de la producción científica “son necesarios para valorar el estado actual de la investigación” (Corrales, Fornaris, Reyes y Valdés, 2017, p. 2) y han sido objeto de discusiones debido a los aportes que ofrecen para analizar la producción científica de las revistas. En este sentido, el objetivo del presente estudio es analizar los indicadores bibliométricos de la revista Signos, a través de un estudio descriptivo longitudinal del periodo 2009-2016.
Según Publindex (Sistema Nacional de Indexación y Homologación de Revistas Especializadas de Ciencia, Tecnología e Innovación), en Colombia para 2002 se reportaban 91 revistas indexadas, de las cuales, una era categoría A1; nueve, A2; siete, B, y 74, C. Para enero de 2015 se registraban 542 revistas, de las cuales 28 estaban clasificadas en categoría A1; 138 en A2, 131 en B y 245 en C. Cifras que aunque demuestran aumentos significativos no han sido suficientes para que la producción científica en Colombia se visibilice a nivel internacional, de acuerdo a indicadores cienciométricos como cantidad de artículos publicados, cantidad de citas, factor de impacto®, índices Eigenfactor®, Scimago Journal Rank®, SNIP® e índice h (Restrepo, 2015).
Publicar y dar a conocer el conocimiento científico permite compartirlo, mostrarlo y ponerlo en práctica a partir del fomento del dialogo entre los pares y las personas interesadas. Además de evolucionar como científico y aplicar buenas prácticas ya que “la divulgación científica constituye un medio importante para mantener la sociedad al día sobre los temas científicos y para promover interacciones con ambientes y agentes sociales que resultan imposibles en situaciones corrientes” (Watanabe y Kawamura, 2016, p. 64).
A continuación, se presenta el esquema de los indicadores bibliométricos aplicados en la investigación teniendo en cuenta los conceptos y análisis bibliométricos realizados y expuestos por autores reconocidos en el área.
Los indicadores de producción son utilizados para cuantificar las publicaciones (Martínez, 2016). Por ejemplo, el análisis de la productividad por investigador, que se traduce en la cantidad de publicaciones que este ha producido.
La colaboración entre los científicos e instituciones es medida por el número de autores por trabajo o centros de investigación que colaboran (Peña, Portillo y Caldera, 2011). Además, este indicador proporciona el número de trabajos con dos, tres o más autores.
Son los más utilizados en los análisis bibliométricos ya que miden la influencia de los trabajos publicados y de los autores. Por consiguiente, son los datos más conocidos de la bibliometría dado el efecto directo que pueden tener sobre las carreras profesionales de los investigadores (Monteserín, 2016, p. 40).
Se realiza un estudio bibliométrico a través de enfoque cuantitativo, descriptivo y longitudinal de la producción científica de la revista Signos. Investigación en Sistemas de Gestión, a partir de enero de 2009 y hasta diciembre de 2016, la información se obtiene de OJS (Open Journal System) y se analiza a través del software general Excel® y de los especializados Vantage Point® y Vosviewer®.
En primera instancia, se identifica la revista en estudio, cuya información se registra en la tabla 1.
Los datos fueron recolectados a partir de la información disponible en OJS de cada artículo teniendo en cuenta año de publicación, número de volumen, autor, número de autores, palabras clave, género de autor e idioma, entre otros. Su organización se realizó mediante matrices en Excel®, posteriormente exportadas al software especializado de análisis bibliométrico Vantage point®. los resultados se muestran en listas, gráficas y mapas, estos últimos también en Vosviewer®.
Los indicadores analizados para el desarrollo de la investigación son los que se listan a continuación en tres categorías: producción, visibilidad e impacto y colaboración.
Número de publicación por año.
Número de autores por artículo.
Género, idioma, país.
Afiliación institucional.
Palabras
Palabras clave.
Número de visitas recibidas por año.
Número de consultas recibidas por año.
Número de citas recibidas por año.
3) Indicadores de colaboración
Número de autores por artículo.
Colaboración por instituciones.
Colaboración entre autores.
tecnológicos
Mapas tecnológicos de colaboración.
Se analizaron 16 volúmenes publicados de la revista, compuestos por 121 artículos correspondientes al período 2009-2016 (figura 1). Actualmente se publican 2 volúmenes por año manteniendo estabilidad en el cumplimiento de las publicaciones.
Durante el periodo bajo análisis los años más productivos han sido 2009 con 20 artículos y 2010 con 18, mientras que los años de menor producción fueron 2011 con 11 artículos y 2013 con 12.
Los autores con más de un artículo se muestran en la tabla 2. La contribución media por autor es de 0.53. Los autores con mayor contribución (entre 2 y 5 artículos) son 8 (4.9 %). La contribución restante corresponde a 177 autores con un artículo (95.1 %). Cabe resaltar que la afiliación de los autores de mayor contribución es la Universidad Santo Tomás, generalmente vinculados con el convenio usta-icontec como editores de la revista o docentes.
Es importante resaltar que la limpieza y la verificación de términos son necesarias para este tipo de datos. La limpieza hace referencia al uso de diferentes formas de nombrar un mismo autor (por ejemplo, nombre completo vs. nombre con un solo apellido), algo que se puede mejorar a través del uso de sistemas especializados como Orcid e Iralis (International Registry for Authors in Library and Information Science), y la verificación, a la comprobación de dos nombres que correspondan a un mismo autor, como se verá más adelante en la tabla 6.
En cuanto al género de los autores, se observa que las mujeres lideran la publicación de artículos en los temas relacionados con la calidad y los sistemas de gestión (figura 2).
El idioma más utilizado por los autores para la publicación de sus artículos es el español (figura 3) y la nacionalidad más común es la colombiana, elementos que dificultan la visibilidad de la revista en la comunidad científica internacional, entre la que predomina el inglés
Cabe mencionar que los datos de nacionalidad de los autores, un indicador bibliométrico necesario para identificar las colaboraciones internacionales, no se encuentran disponible en OJS.
El análisis de la afiliación institucional muestra que la mayoría de los artículos son producción endógena (tabla 3), mientras que la exógena corresponde en su mayoría a consultores independientes. Para el caso de la producción externa, en 10 artículos se denota reincidencia institucional (frecuencia superior a 1), y para los demás se registran 65 instituciones con frecuencia de 1. Las diversas instituciones se ubican en el sector público, el privado y el mixto de productos y servicios.
Al igual que en el indicador de autor, se hace necesaria la limpieza y verificación de términos para este tipo de datos. En este caso en particular se debe verificar cuándo dos denominaciones corresponden a la misma entidad (ver numerales 1 y 7 de la tabla 3).
En la revista Signos el número total de palabras clave reportadas por los autores durante el periodo estudiado fue de 254. En la tabla 4 se muestran las palabras con frecuencia superior a 3: los numerales 1 y 2 corresponden a las de mayor frecuencia y los numerales 3 a 11, a un segundo grupo con frecuencias entre 12 y 6. No se registran en la tabla 40 palabras con frecuencias entre 2 y 5 ni finalmente 202 palabras con frecuencia de 1 (lo que equivale al 79.5 % de las palabras clave). Este último grupo contiene diversidad expresiones en muchos casos sinónimas —por ejemplo, ISO 9001 e ISO 9001:2008—, lo que entorpece la visibilidad y relevancia de temas dentro de la revista puesto que no se aumenta la frecuencia, sino que por el contrario se segmenta en palabras sinónimas.
Una alternativa para mejorar la estandarización de palabras clave es el uso de tesauros o vocabularios consolidados en el área de estudio de la revista, como JEL (Journal of Economic Literature) o la ISO 9000:2015 (Sistemas de gestión de la calidad. Fundamentos y vocabulario).
El total de autores registrados para el periodo bajo estudio es de 185 distribuidos así: 2 artículos en colaboración de 4 autores, 18 artículos de 3 autores y 47 artículos de 2 autores; 40 artículos no presentan colaboración y 14 más no registran autor. Además, como se mostró en la tabla 2, tan solo 8 autores han sido recurrentes.
La colaboración entre instituciones en la revista se denota a partir de la afiliación de sus autores: estos pertenecen a 78 instituciones distintas. La institución más frecuente (convenio Usta-Icontec) tiene un alcance limitado dada su baja colaboración con instituciones externas.
En la figura 5 se muestra un mapa de relación entre autores elaborado con el software Vosviewer®, que se define a partir de los artículos escritos en coautoría. Otra cualidad que se ve en esta figura es el establecimiento de redes, que se identifican a través de las diferentes agrupaciones de autores (líneas de color). Asimismo, se evidencia el aislamiento, que puede observarse en toda la figura (líneas grises o ausencia de líneas) y denota un bajo grado de colaboración. Es decir, la tendencia de colaboración es muy baja para la revista.
Análisis más profundos se pueden hacer a partir de mapas de relación elaborados con técnicas factoriales y de correlación. Esos mapas más complejos permiten la identificación de líderes, es decir, autores con mayor número de relaciones (Luque y Palop, 2014).
Este tipo de indicadores miden la influencia de los autores y de los trabajos publicados. Para su análisis se toma en cuenta el número de visitas recibidas (el artículo fue visto online), el número de consultas realizadas en la página web de la revista (el artículo fue descargado) y el número total de citas recibidas (el artículo fue utilizado para otras investigaciones).
En el primer caso, la revista obtuvo 31 945 visitas en la página web, siendo los dos últimos años del periodo en estudio los de cifras más bajas en ese sentido. Este es un indicador negativo, habida cuenta de que entre más visitas tenga la revista mayor es su potencial para incrementar los indicadores de citación de sus artículos, lo que puede llegar a ser una fortaleza en sus indicadores de impacto y visibilidad (figura 4).
El número de consultas registradas (tabla 5) fue de 31 945. Cada artículo ha sido consultado desde 0 hasta 2289 veces. Los autores que escribieron los artículos con más consultas son docentes de la institución que edita la revista.
El indicador de citación se construye a partir de datos consultados en la página web de Harzing’s Publish or Perish, en la que se identifica que solo se han citado nueve artículos del total publicado para el periodo bajo estudio. El artículo con mayor número de citas (4) fue publicado en 2009. Cabe resaltar que no se evidencia estandarización en el nombre de autor por parte de la revista ya que en Colombia es frecuente el uso de dos apellidos y en otros ámbitos tan solo se usa el paterno. Así, las aplicaciones que siguen este último principio solo identifican el último apellido registrado, lo que dificulta la visibilidad de los autores por frecuencia de aparición (los diferentes nombres de un mismo autor se cuantifican con frecuencias independientes, ver tablas 2 y 6).
Para la revista el promedio de consultas por documento en el periodo analizado es de 280 y el promedio de consultas por autor es de 163. En la tabla 7 se muestran los autores de mayor publicación con sus respectivas consultas. Adicionalmente se presenta el número de citas recibidas para que de forma incipiente se puede afirmar que el nivel de consulta de la revista no repercute en su nivel de citación. Ha de tenerse en cuenta que los autores 6 y 9 son los consultores independientes (por afiliación) de mayor consulta sin citas y que, aunque el autor 3 tiene la mayor citación (proveniente de un artículo), pertenece a la misma afiliación de la institución editora de la revista, lo que puede indicar autocitación o divulgación dentro de la comunidad académica de la institución. Lo anterior demuestra, que la revista, aunque tiene visibilidad externa, no tiene impacto representado en el nivel de citación de sus artículos. Esto podría explicarse teniendo en cuenta la afiliación de los autores, en su mayoría empresas públicas y privadas que no utilizan los resultados de investigación provenientes de la comunidad académica con fines de nuevas publicaciones sino para el mejoramiento de sus sistemas de gestión.
El análisis bibliométrico de la revista Signos realizado para el periodo 2009-2016, que corresponde a 16 volúmenes y 121 artículos, permite concluir que los indicadores de producción muestran en general constancia en el número de artículos por año, una producción por autor baja y en su mayoría autores afiliados a la institución editora de la revista y en idioma español, lo que limita la visibilidad externa tanto de la publicación periódica como de sus autores.
Aunque hay un importante número de afiliaciones externas, no están repercutiendo en los indicadores bibliométricos de colaboración, visibilidad e impacto, lo que se suma a la falta de difusión en otros idiomas y otros países.
En cuanto a las palabras clave, indicador que demuestra la consistencia temática de la revista y las tendencias en cuanto a temas emergentes y decadentes en la materia, se evidencia que la mayoría de estas solo se usan en una oportunidad y suelen ser sinónimas de otras, lo que entorpece la visibilidad y relevancia de los temas. Se puede considerar el uso de palabras clave de editor provenientes de tesauros o vocabularios consolidados en el área de estudio de la revista, como JEL (Journal of Economic Literature) o la ISO 9000:2015 (Sistemas de gestión de la calidad. Fundamentos y vocabulario).
En relación con los indicadores de colaboración la revista tiene un nivel aceptable puesto que la mayoría de artículos tienen al menos dos autores de diferente afiliación. Sin embargo, la Universidad Santo Tomás, ya sea a nombre propio o a través del convenio con Icontec, lidera este indicador, lo que además de disminuir la visibilidad externa condiciona sus puntuaciones ante el sistema nacional de indexación de revistas en los relacionado con producción endógena. Adicionalmente, se deben mejorar la publicidad de los artículos por parte de sus autores y la estandarización de los nombres de estos a través de sistemas especializados como Orcid e Iralis.
El mapa de relación resultante de la afiliación institucional de los autores proporciona una herramienta potencial para la identificación de líderes en la materia. Por el momento tal identificación no fue posible debido a la baja incidencia de los autores. Sin embargo, se identifican pequeñas agrupaciones que pueden ayudar a mejorar esta situación.
Los análisis de los indicadores de visibilidad e impacto no favorecen a la revista, teniendo en cuenta que para el periodo estudiado las vistas online de los artículos tiende a disminuir y que, aunque las descargas han sido altas, no muestran una tendencia al alza. Es de aclarar que no se espera que un artículo reciente tenga un número importante de vistas, pero los de años anteriores deberían demostrar un potencial en este sentido, que identifique tanto la influencia de los autores como de los trabajos publicados ante la comunidad científica y empresarial, siendo esta última la que tiene un alto potencial de uso a pesar de su bajo potencial de publicación.
El indicador de citación es muy bajo, teniendo en cuenta el número de artículos publicados en el periodo bajo estudio y las visitas y consultas registradas, que indican alta potencialidad de citación, además de la posibilidad de autocitación y uso por parte de los estudiantes con la misma afiliación académica de los autores. El bajo nivel de citación podría explicarse por la afiliación de los autores, en su mayoría empresas públicas y privadas que no están utilizando los resultados de investigación provenientes de la comunidad académica para nuevas publicaciones sino para mejoramiento de sus sistemas de gestión.
