Propuesta de un índice de impacto de las revistas colombianas de ciencias sociales y humanidades (Col-Index) y su aplicación para la evaluación de la actividad científica nacional

Abstract

La presente tesis doctoral tiene como finalidad, mostrar la utilidad de una herramienta de evaluación basada en un índice de impacto, que a partir de un conjunto de revistas fuente evalúe la investigación en varios niveles y permita describir la actividad científica nacional, utilizando indicadores bibliométricos y la cita como principal medida de análisis. La investigación ha sido concebida teniendo que cuenta que una de las problemáticas que afecta a los procesos de evaluación y comunicación científica en Colombia, es la limitación de las herramientas que estudian las revistas y la investigación registrada en ellas, unido a las dificultades de los índices de citación tradicionales para evaluar las Ciencias Sociales y Humanidades, con menor representación en los principales canales de comunicación de la ciencia. Ante este panorama relacionado con la ausencia de productos para el análisis y mejoramiento de las revistas, que aporten descriptivas de las comunidades científicas, se necesita de modelos de comunicación especialmente para las Ciencias Sociales y Humanidades con criterios más ajustados al contexto en el que trabajan. Para lo anterior, se analizan los principales referentes tanto teóricos como de antecedentes que ayudaran a plantear una propuesta apropiada a dichas insuficiencias, similar a Dialnet Métricas España y otros productos creados anteriormente con similares propósitos. Se profundiza en aspectos relevantes sobre métodos e indicadores bibliométricos, fuentes de datos y metodologías de evaluación y clasificación de revistas ya empleadas en distintos escenarios, información clave para desarrollar la propuesta metodológica de un índice de citas, que no solo analice las revistas colombianas del ámbito seleccionado, sino que sirva de punto de partida para poner en marcha el producto y sea capaz de evaluar otros actores dentro de la ciencia nacional. Se aborda la importancia de las revistas como principal medio de comunicación de la ciencia y canal esencial para la visibilidad y valoración del rendimiento de las comunidades científicas, evaluadas tanto por el cumplimiento de criterios editoriales como bibliométricos. Se valora su papel como principal indicio de calidad de la investigación dentro del ecosistema de investigación y comunicación de la ciencia, sus características, fortalezas y limitaciones actuales. Los principales resultados permiten conocer la limitada presencia de las revistas en los índices y fuentes de mayor prestigio y el escaso volumen de citas que aun reciben las contribuciones publicadas en las revistas nacionales, lo que genera bajos índices de impacto, situación que necesita trabajarse desde la calidad de los contenidos y la generación de estrategias de visibilidad en busca de mejoras al producto. Otros aspectos como la presencia de mayor colaboración nacional en la producción científica del ámbito estudiado, la tendencia a publicar en revistas nacionales y poca exportación de investigación, diversidad de instituciones y autores nacionales que aportan a la producción científica, además de la importancia que tiene la contribución bibliotecaria, son elementos importantes que ayudan a la mejora futura del producto. Como conclusión de la tesis doctoral, junto a la propuesta metodológica del nuevo producto y la obtención de información sobre las revistas y distintos actores del sistema científico nacional en el ámbito escogido, se justifica la importancia y contribución de una herramienta basada en citas que ayude al mejoramiento de las revistas y la actividad científica nacional por medio de una metodología inclusiva, con aportes significativos al proceso de comunicación científica en Colombia.

The purpose of this doctoral thesis is to show the utility of an evaluation tool based on an impact index, which based on scientifics journals, evaluate research at various levels and allows describing national scientific activity, using bibliometric indicators and citation as the main measure of analysis. The research has been planned to take into account that one of the problems that affects the processes of evaluation and scientific communication in Colombia, is the limitation of the tools that study the journals and the research registered in them, and the difficulties of the traditional citation indexes to evaluate the Social Sciences and Humanities, with less representation in the main communication channels of science. Before this scenario related to the absence of products for the analysis and improvement of journals, which provide descriptions of scientific communities, communication models are needed, especially for the Social Sciences and Humanities with criteria more adjusted to the specific contexts. The main theoretical and background references were analyzed that would help to propose an appropriate proposal to said insufficiencies, similar to Dialnet Métricas España and other products created previously with similar purposes. It deepened into relevant aspects of bibliometric methods and indicators, data sources and methodologies for the evaluation and classification of journals already used, key information to develop the methodological proposal of a citation index, which not only analyzes Colombian journals in the field selected, but rather serve as a starting point to launch the product and be capable of evaluating other actors within national science. The importance of journals as the main media of science and an essential channel for the visibility and evaluation of the performance of scientific communities, evaluated by editorial and bibliometric criteria, is addressed. Its role is valued as the main indicator of research quality within the science research and communication ecosystem, its characteristics, strengths and current limitations. The main results revealed the limited presence of journals in the most prestigious indices and sources and the low volume of citations that contributions published in national journals still receive, which generates low impact rates, a situation that needs to be addressed from the content quality and the generation of visibility strategies in search of improvements to the product. Other aspects such as the presence of higher national collaboration in the scientific production of the field studied, the tendency to publish in national journals and less export of research, diversity of institutions and national authors that contribute to scientific production, in addition to the importance of library contribution, are important elements that help the future improvement of the index. As a conclusion of this doctoral thesis, with the methodological proposal of the new product and the obtaining of information on the journals and different actors of the national scientific system in the chosen field, the importance and contribution of a citation-based tool that helps the improvement of journals and national scientific activity through an inclusive methodology, with significant contributions to the process of scientific communication in Colombia.