DOI:
https://doi.org/10.14483/23448350.21447Published:
02/01/2024Issue:
Vol. 49 No. 1 (2024): January-April 2024Section:
Research ArticlesPropuesta para la evaluación de revistas y la investigación en ciencias sociales y humanidades en Colombia: una mirada desde las métricas Dialnet
Proposal for Evaluating Journals and Research in Social Sciences and Humanities in Colombia: A View from Dialnet Metrics
Keywords:
citation index, scientific evaluation, bibliometric indicators, scientific journals, Dialnet métricas Colombia (en).Keywords:
revistas científicas, indicadores bibliométricos, índice de citas, Dialnet Métricas Colombia, evaluación científica (es).Downloads
Abstract (es)
Como en otros países, el panorama actual de evaluación de la ciencia en Colombia presenta dificultades para estudiar las ciencias sociales y las humanidades. Las limitaciones de cobertura de las bases de datos de citación, la reducida presencia de revistas colombianas en ellas y las problemáticas de la clasificación existente justifican la creación de productos que cubran aspectos no presentes en los índices de carácter internacional y permitan evaluar la producción nacional y sus contribuyentes. Este artículo expone, a partir de una muestra de revistas de educación, la metodología de creación de un instrumento basado en citas, útil en la obtención de indicadores y descriptivas de las revistas y la actividad científica a distintos niveles. Esta iniciativa se fundamenta en la propuesta española Dialnet Métricas, ya activada en la mayoría de los ámbitos de las ciencias sociales, las humanidades y el derecho, además del interés que representa para Colombia contar con una herramienta que permita analizar las revistas más allá del cumplimiento de criterios y que proporcione indicadores que contribuyan a la evaluación de la ciencia. Este trabajo presenta el proceso de selección de revistas, la gestión de los datos fuente utilizados, un análisis de citas y una descripción y una visualización de los indicadores. Se constatan el valor y el aporte del instrumento en el contexto colombiano a partir de la obtención de citas e indicadores para un número considerable de revistas nacionales y a partir de su comparación con Publindex.
Abstract (en)
Like in other countries, the current landscape of scientific evaluation in Colombia faces challenges in studying the social sciences and humanities. The coverage limitations of citation databases, the scant presence of Colombian journals in them, and issues with existing classifications justify the creation of products that cover aspects not present in international indices and that allow evaluating the national production and its contributors. This article presents, based on a sample of education journals, the methodology for creating a citation-based tool that is useful for obtaining indicators and descriptions of journals and scientific activity at various levels. This initiative is based on the Spanish proposal Dialnet Métricas, already active in most areas of social sciences, humanities, and law, as well as on the interest it represents for Colombia to have a tool that allows analyzing journals beyond the fulfillment of criteria and provides indicators that contribute to the evaluation of science. This work outlines the process of journal selection, the management of the source data used, a citation analysis, and a description and visualization of the indicators. The value and contributions of the tool in the Colombian context are confirmed through the obtainment of citations and indicators for a considerable number of national journals and through their comparison with Publindex.
References
Aguado López, E., Rogel Salazar, R., Garduño Oropeza, G., Zúñiga, M. F. (2008). RedALyC: una alternativa a las asimetrías en la distribución del conocimiento científico. Ciencia, Docencia y Tecnología, 37, 11-30.
Aguirre, M., Cetto, A. M., Córdoba, S., Flores, A. M., Román, A. (2006). Calidad editorial y visibilidad de las revistas La experiencia de Latindex. En D. Babini, Dominique & J. Fraga (Ed.), Edición electrónica, bibliotecas virtuales y portales para las ciencias sociales en América Latina y El Caribe (1ra ed., pp 103-122). CLACSO. http://biblioteca.clacso.edu.ar/clacso/se/20100528033111/6Aguirre.pdf
Asubiaro, T., Onaolapo, S., Mills, D. (2024). Regional disparities in Web of Science and Scopus journal coverage. Scientometrics, 129, 1469-1491. https://doi.org/10.1007/s11192-024-04948-x DOI: https://doi.org/10.1007/s11192-024-04948-x
Baiget, T., Torres-Salinas, D. (2013). Informe APEI. Publicación en revistas científicas. Asociación Profesional de Especialistas en Información. http://hdl.handle.net/10481/26630
Braun, T., Glänzel, W., Schubert, A. (2006). A hirsch-type index for journals. Scientometrics, 69(1), 169-173. https://doi.org/10.1007/s11192-006-0147-4 DOI: https://doi.org/10.1007/s11192-006-0147-4
Bergstrom, C. T., West, J. D., Wiseman, M. A. (2008). The eigenfactor™ metrics. Journal of Neuroscience, 28(45), 11433-11434. https://doi.org/10.1523/jneurosci.0003-08.2008 DOI: https://doi.org/10.1523/JNEUROSCI.0003-08.2008
Caballero-Uribe, C. V., Viloria-Doria, J. C. (2018). Un análisis del impacto del nuevo modelo de clasificación de revistas científicas según Colciencias. Revista Científica Salud Uninorte, 34(1), 10758. https://doi.org/10.14482/sun.34.1.10758 DOI: https://doi.org/10.14482/sun.34.1.10758
Calderón-Rehecho, A. (2022). ¿Qué relevancia tiene Dialnet Métricas en las ciencias sociales y humanidades? Anuario ThinkEPI, 6, e16a12. https://doi.org/10.3145/thinkepi.2022.e16a12 DOI: https://doi.org/10.3145/thinkepi.2022.e16a12
Charum, J. (2004). La construcción de un sistema nacional de indexación, el caso de Publindex. Convergencia. Revista de Ciencias Sociales, 35, 293-309.
Córdoba González, S. (2019). La publicación académica y los sistemas de evaluación: ¿qué son y para qué sirven? Palabra Clave, 8(2), 7-8. https://doi.org/10.24215/18539912e066 DOI: https://doi.org/10.24215/18539912e066
Córdoba González, S., Murillo Goussen, G., Polanco Cortés, J. (2017). Génesis y desarrollo de UCR Index en la Universidad de Costa Rica. E-Ciencias de la Información, 7(1), 54-77. https://doi.org/10.15517/eci.v7i1.25713 DOI: https://doi.org/10.15517/eci.v7i1.25713
Delgado-López-Cózar, E., Ràfols, I., Abadal, E. (2021). Carta: por un cambio radical en la evaluación de la investigación en España. Profesional de la Información, 30(3), e300309. https://doi.org/10.3145/epi.2021.may.09 DOI: https://doi.org/10.3145/epi.2021.may.09
Delgado López-Cózar, E. (2017). Evaluar revistas científicas: un afán con mucho presente y pasado e incierto futuro. En E. Abadal (Ed.), Revistas científicas: situación actual y retos de futuro (1ra ed., pp. 73-103). Universitat de Barcelona. http://eprints.rclis.org/32132/1/Revistas%20cientificas%202017%204%20Delgado%20Emilio%20Evaluar%20revistas%20cientificas%20p%2073-103.pdf
Delgado-López-Cózar, E., Martín-Martín, A. (2019). El factor de impacto de las revistas científicas sigue siendo ese número que devora la ciencia española: ¿hasta cuándo? Anuario ThinkEPI, 13, e13e09. https://doi.org/10.3145/thinkepi.2019.e13e09 DOI: https://doi.org/10.3145/thinkepi.2019.e13e09
Díaz, G. J. (2014). Publindex: una forma perversa de fomentar la cultura del" puntímetro" y la mediocridad. Revista de la Facultad de Medicina Veterinaria y de Zootecnia, 61(3), 219-220. https://doi.org/10.15446/rfmvz.v61n3.46869 DOI: https://doi.org/10.15446/rfmvz.v61n3.46869
Díaz, G. M. (2017). Incertidumbre ante la implementación del nuevo modelo de medición de revistas científicas en Colombia. TecnoLógicas, 20(38), 9-13. DOI: https://doi.org/10.22430/22565337.579
Flórez-Carranza, F. (2018). Nociones de calidad e impacto: el lugar de las revistas indexadas de ciencias jurídicas en el nuevo sistema colombiano de competitividad, ciencia, tecnología e innovación. Vniversitas, 67, 137. https://doi.org/10.11144/Javeriana.vj137.ncei DOI: https://doi.org/10.11144/Javeriana.vj137.ncei
Garfield, E. (1972). Citation analysis as a tool in journal evaluation: Journals can be ranked by frequency and impact of citations for science policy studies. Science, 178(4060), 471-479. https://doi.org/10.1126/science.178.4060.471 DOI: https://doi.org/10.1126/science.178.4060.471
Gómez Marin, J. E., Palacios, M. (2018). Una nueva etapa de Publindex: dolores de crecimiento. Infectio, 22(1), 7-8.
González-Pereira, B., Guerrero-Bote, V. P., Moya-Anegón, F. (2010). A new approach to the metric of journals scientific prestige: The SJR indicator. Journal of Informetrics, 4(3), 379-391. https://doi.org/10.1016/j.joi.2010.03.002 DOI: https://doi.org/10.1016/j.joi.2010.03.002
Gómez Zapata, Y. (2019). ¿Cómo y para qué nos miden? Crítica reflexiva sobre el proceso de medición Publindex-Colciencias para revistas científicas en Colombia. En-Contexto. Revista de Investigación en Administración, Contabilidad, Economía y Sociedad, 7(11), 35-37. DOI: https://doi.org/10.53995/23463279.626
Gregorio-Chaviano, O., Repiso, R., Calderón-Rehecho, A., León-Marín, J., Jiménez-Contreras, E. (2021). Dialnet Métricas como herramienta de evaluación bibliométrica: aportes al análisis de la actividad científica en Ciencias Sociales y Humanidades. Profesional de la Información, 30(3), e300318. https://doi.org/10.3145/epi.2021.may.18 DOI: https://doi.org/10.3145/epi.2021.may.18
Gregorio-Chaviano, O. (2018). Evaluación y clasificación de revistas científicas: reflexiones en torno a retos y perspectivas para Latinoamérica. Revista Lasallista de Investigación, 15(1), 166-179. https://doi.org/10.22507/rli.v15n1a12 DOI: https://doi.org/10.22507/rli.v15n1a12
Guerrero-Bote, V. P., Moya- Anegón, F. (2012). A further step forward in measuring journals’ scientific prestige: The SJR2 indicator. Journal of Informetrics, 6(4), 674-688. https://doi.org/10.1016/j.joi.2012.07.001 DOI: https://doi.org/10.1016/j.joi.2012.07.001
Hicks, D., Wouters, P., Waltman, L., De-Rijcke, S., Rafols, I. (2015). Bibliometrics: the Leiden Manifesto for research metrics. Nature News, 520(7548), 429-431. https://doi.org/10.1038/520429a DOI: https://doi.org/10.1038/520429a
López, W. (2019, 30 de abril). El sistema colombiano de medición de revistas Publindex: Las paradojas de un sistema que devalúa el conocimiento producido localmente. Blog Amelica. http://amelica.org/index.php/2019/04/30/el-sistema-colombiano-de-medicion-de-revistas-publindex-las-paradojas-de-un-sistema-que-devalua-el-conocimiento-producido-localmente/
Martínez-Ávila, D. (2019). Qualis periódicos: el sistema brasileño de evaluación de revistas. Anuario ThinkEPI, 13, e13e01. https://doi.org/10.3145/thinkepi.2019.e13e01 DOI: https://doi.org/10.3145/thinkepi.2019.e13e01
Miguel, S. (2011). Revistas y producción científica de América Latina y el Caribe: su visibilidad en SciELO, RedALyC y SCOPUS. Revista Interamericana de Bibliotecología, 34(2), 187-198.
Moed, H. F. (2010). The source normalized impact per paper is a valid and sophisticated indicator of journal citation impact. Journal of the American Society for Information Science and Technology, 62(1), 211-213. https://doi.org/10.1002/asi.21424 DOI: https://doi.org/10.1002/asi.21424
Packer, A. L. (2009). The SciELO open access: A gold way from the south. Canadian Journal of Higher Education, 39(3), 111-126. DOI: https://doi.org/10.47678/cjhe.v39i3.479
Ràfols, I., Molas-Gallart, J. (2022). How to reform research evaluation in Spain. Institutional accreditation as a response to the European Agreement on research assessment. Letter. Profesional de la Información, 31(6), e310601. https://doi.org/10.3145/epi.2022.nov.0 DOI: https://doi.org/10.3145/epi.2022.nov.01
Ràfols, I. (2023). Del Manifiesto de Leiden a las reformas de la evaluación: retos hacia un uso responsable de la bibliometría. Enredadera: Revista de la Red de Bibliotecas y Archivos del CSIC, 39, 21-28. https://doi.org/10.20350/digitalCSIC/15376
Robinson-García, N. (2022). Contra el pensamiento mágico de la bibliometría. Anuario ThinkEPI, 16, e16a21. https://doi.org/10.3145/thinkepi.2022.e16a21 DOI: https://doi.org/10.3145/thinkepi.2022.e16a21
Suárez Guava, L. A. (2017). Una breve historia de las revistas científicas en Colombia o la maldición de ser editor. Universitas Humanística, 83, e83.
Teixeira da Silva, J. A., Memon, A. R. (2017). CiteScore: A cite for sore eyes, or a valuable, transparent metric? Scientometrics, 111(1), 553-556. https://doi.org/10.1007/s11192-017-2250-0 DOI: https://doi.org/10.1007/s11192-017-2250-0
Uribe-Tirado, A. (2017). Publindex se usa como no se debe. Alma Mater, 668, 6. https://doi.org/10.2139/ssrn.3489246 DOI: https://doi.org/10.2139/ssrn.3489246
Uribe-Tirado, A., Vélez-Cuartas, G., Pallares, C. (2023). Producción científica en Colombia relacionada con ciencia abierta, métricas de nueva generación y métricas responsables en el contexto de Publindex y SCIENTI. Revista Científica, 48(3), 93-112. https://doi.org/10.14483/23448350.20852 DOI: https://doi.org/10.14483/23448350.20852
Vasen, F., Lujano, I. (2017). Sistemas nacionales de clasificación de revistas científicas en América Latina: tendencias recientes e implicaciones para la evaluación académica en ciencias sociales. Revista mexicana de ciencias políticas y sociales, 62(231), 199-228. https://doi.org/10.1016/S0185-1918(17)30043-0 DOI: https://doi.org/10.1016/S0185-1918(17)30043-0
West, J. D., Bergstrom, T. C., Bergstrom, C. T. (2010). The Eigenfactor™ Metrics: A network approach to assessing scholarly journals. College & Research Libraries, 71(3), 236-244. https://doi.org/10.5860/0710236 DOI: https://doi.org/10.5860/0710236
How to Cite
APA
ACM
ACS
ABNT
Chicago
Harvard
IEEE
MLA
Turabian
Vancouver
Download Citation
License
Copyright (c) 2024 Orlando Gregorio-Chaviano, Evaristo Jiménez-Contreras
This work is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.
When submitting their article to the Scientific Journal, the author(s) certifies that their manuscript has not been, nor will it be, presented or published in any other scientific journal.
Within the editorial policies established for the Scientific Journal, costs are not established at any stage of the editorial process, the submission of articles, the editing, publication and subsequent downloading of the contents is free of charge, since the journal is a non-profit academic publication. profit.