Article Brapci-Revistas

Qualidade de revistas científicas: uma revisão sistemática da literatura

Quality of scientific journals: a systematic review of the literature

Calidad de revistas científicas: una revisión sistemática de la literatura

Mariane Sperber
Vinícius Medina Kern

The evaluation of scientific activity is a fact that has grown and been well evidenced in the academic community in recent decades. Scientific journals, the main sources of information at the present time and responsible for the diffusion of knowledge through scientific publications, are the means of evaluating the scientific activity most viewed. During the digital age and the need for publication for the validation of studies, the increase in scientific production is imminent, which consequently entails the appearance of new journal titles. The emergence of these new titles spreads in the need of the evaluation of scientific journals. It is believed that it is necessary to propose parameters and quality indicators to assist in this evaluation. As is known, quality indicators already exist that aid in the evaluation of scientific journals, of which the impact factor and the Qualis Capes are the most used and emphasized in the literature. But to what extent can we consider the impact factor and the Qualis Capes as the main quality indicators of scientific journals and use them in large majority to classify the quality of a scientific journal. Based on the points, the research in question intends to carry out an analysis of the literature, more specifically a systematic review of the literature in order to answer the following question: what characterizes a scientific journal of quality according to the scientific literature? In advance, it can be concluded that the literature is still very restricted to the quality of scientific journals, using as main indicator the impact factor, but other indicators not less important are also gaining space. It is also perceived as an incipient subject, despite the great concern of authors of articles in publishing their manuscripts in renowned journals.@en

La evaluación de la actividad científica es un hecho que ha crecido y ha sido bien evidenciado en la comunidad académica en las últimas décadas. Las revistas científicas, las principales fuentes de información en la actualidad y responsables de la difusión del conocimiento a través de publicaciones científicas, son los medios para evaluar la actividad científicas más vistas. En medio de la era digital y la necesidad de publicación para la validación de estudios, el aumento de la producción científica es inminente, lo que conlleva la aparición de nuevos títulos de revistas. La aparición de estos nuevos títulos se propaga en la necesidad de la evaluación de revistas científicas. Se cree que es necesario proponer parámetros e indicadores de calidad para ayudar en esta evaluación. Como se sabe, ya existen indicadores de calidad que ayudan en la evaluación de revistas científicas, de las cuales el factor de impacto y los Qualis Capes son los más utilizadas y destacados en la literatura. Pero ¿hasta qué punto podemos considerar el factor de impacto y los Qualis Capes como los principales indicadores de calidad de las revistas científicas y utilizarlos en gran mayoría para clasificar la calidad de una revista científica? Sobre la base de los puntos antes mencionados, la investigación en cuestión pretende realizar un análisis de la literatura, más específicamente una revisión sistemática de la literatura para responder la siguiente pregunta: ¿qué caracteriza a una revista científica de calidad según la literatura científica? De antemano, se puede concluir que la literatura todavía está muy restringida a la calidad de las revistas científicas, utilizando como indicador principal el factor de impacto, pero otros indicadores no menos importantes también están ganando espacio. También se percibe como un tema incipiente, a pesar de la gran preocupación de los autores por los artículos que publican sus manuscritos en revistas de renombre.@es
A avaliação da atividade científica é um fato que tem crescido e sido bastante evidenciado na comunidade acadêmica nas últimas décadas. As revistas científicas, principais fontes de informação na atualidade e responsáveis pela difusão do conhecimento por meio de publicações científicas, são os meios de avaliação da atividade científica mais visionados. Em meio a era digital e a necessidade da publicação para a validação dos estudos, é eminente o aumento da produção científica, que consequentemente acarreta o surgimento de novos títulos de revistas. O surgimento destes novos títulos esparra na necessidade da avaliação das revistas científicas. Acredita-se que seja necessário propor parâmetros e indicadores de qualidade que auxiliem nesta avaliação. Como sabe-se, já existem indicadores de qualidade que auxiliam na avaliação das revistas científicas, dos quais o fator de impacto e o Qualis Capes são os mais utilizados e enfatizados na literatura. Mas até que ponto podemos considerar o fator de impacto e o Qualis Capes como os principais indicadores de qualidade das revistas científicas e utilizá-los em grande maioria para classificar a qualidade de uma revista científica? Partindo dos pontos supracitados, a pesquisa em questão pretende realizar uma análise da literatura, mais especificamente uma revisão sistemática da literatura a fim de responder a seguinte questão: o que caracteriza uma revista científica de qualidade de acordo com a literatura científica? De antemão, pode-se concluir que a literatura ainda está muito restrita à qualidade de revistas científicas, utilizando como principal indicador o fator de impacto, mas outros indicadores não menos importantes também estão ganhando espaço. Percebe-se ainda que é um tema incipiente, apesar da grande preocupação dos autores de artigos em publicarem seus manuscritos em revistas de renome.@pt

. Quality of scientific journals: a systematic review of the literature calidad de revistas científicas: una revisión sistemática de la literatura qualidade de revistas científicas: uma revisão sistemática da literatura. Revista ibero-americana de ciência da informação, [????].

References

  • CARELLI, A. E.., GIANNASI-KAIMEN, M. J. Os periódicos científicos no compartilhamento da informação e do conhecimento: aspectos extrínsecos dos periódicos eletrônicos Qualis A da área de ciência da informação. Encontros Bibli: Revista Eletrônica de Biblioteconomia e Ciência da Informação, v. 14, n. 27, p. 191-213, 2009.
  • CHAVARRO, Diego., RÀFOLS, Ismael., TANG, Puay. To what extent is inclusion in the Web of Science an indicator of journal ‘quality’?. Research Evaluation, v. 27, n. 2, p. 106-118, 2018.
  • DIAMANDIS, Eleftherios P. The Journal Impact Factor is under attack–use the CAPCI factor instead. 2017. BMC Medicine, v. 15, n. 9, 2017. DOI 10.1186/s12916-016-0773-5
  • DUAN, Lian., NASRI, Farrokh., PAKNEJAD, Javad. A data‐driven method for rating management information systems journals in the same scale of the Association of Business Schools Journal Guide. Expert Systems, v. 35, n. 6, p. e12309, 2018.
  • HADDAWY, Peter et al. A comprehensive examination of the relation of three citation-based journal metrics to expert judgment of journal quality. Journal of Informetrics, v. 10, n. 1, p. 162173, 2016.
  • KITCHENHAM, B.., CHARTERS, S. Guidelines for performing systematic literature reviews in software engineering. Technical Report EBSE 2007-001, Keele University and Durham University Joint Report, 2007.
  • KRZYZANOWSKI, Rosaly Favero., FERREIRA, Maria Cecília Gonzaga. Avaliação de periódicos científicos e técnicos brasileiros. Ciência da Informação, Brasília, v. 27, n. 2, p. 165-175, maio/ago. 1998.
  • LEE, Hakyeon., SHIN, Juneseuk. Measuring journal performance for multidisciplinary research: An efficiency perspective. Journal of Informetrics, v. 8, n. 1, p. 77-88, 2014.
  • LEFF, Donna. Making an impact: the rise of the impact factor as a measure of journal quality. Journal of the Academy of Nutrition and Dietetics, v. 105, n. 1, p. 29-30, 2005.
  • MAITY, Bapan Kumar., HATUA, Sudip Ranjan. Designing a model to evaluate scholarly publications with special reference to social sciences in India. Scientometrics, v. 109, n. 3, p. 2031-2048, 2016.
  • MINGERS, John., YANG, Liying. Evaluating journal quality: A review of journal citation indicators and ranking in business and management. European Journal of Operational Research, v. 257, n. 1, p. 323-337, 2017.
  • MIGLIOLI, S. Influência e limites do fator de impacto como métrica de avaliação na ciência. Ponto de Acesso, v. 11, n. 3, 2017. Disponível em: . Acesso em: 18 jun. 2018.
  • ORTNER, Hugo M. The impact factor and other performance measures–much used with little knowledge about. International Journal of Refractory Metals and Hard Materials, v. 28, n. 5, p. 559-566, 2010.
  • ROWLINSON, Michael et al. Accounting for research quality: Research audits and the journal rankings debate. Critical Perspectives on Accounting, v. 26, p. 2-22, 2015.
  • SANTOS, Solange Maria dos. Perfil dos periódicos científicos de Ciências Sociais e de Humanidades: mapeamento das características extrínsecas. Tese de Doutorado. Universidade de São Paulo. Disponível em: . Acesso em: 16 out. 2018.
  • SANTOS, L. R.., RABELO, D. M. R. S. Produção científica: avaliação, ferramentas e indicadores de qualidade. Ponto de Acesso, v. 11, n. 2, p. 3-33, 2017.
  • SHIDELER, Geoffrey S.., ARAÚJO, Rafael J. Measures of scholarly journal quality are not universally applicable to determining value of advertised annual subscription price. Scientometrics, v. 107, n. 3, p. 963-973, 2016.
  • STUMPF, Ida Regina Chitto. Avaliação das revistas de comunicação pela comunidade acadêmica da área. Em Questão: revista da Faculdade de Biblioteconomia e Comunicação da
  • UFRGS, v. 9, n. 1, p. 25-38, jan./junho 2003.
  • TARGINO, Maria das Graças., GARCIA, Joana Coeli Ribeiro. O editor e a revista científica: entre “o feijão e o sonho”. In: FERREIRA, Sueli Mara Soares Pinto e TARGINO, Maria das Graças (org.). Mais sobre revistas científicas: em foco a gestão. São Paulo: Senac., Cengage Learning, 2008. p.41-72.
  • XU, Fang., LIU, WenBin., MINGERS, John. New journal classification methods based on the global h-index. Information Processing and Management, v. 51, n. 2, p. 50-61, 2015.
  • WINARKO, Bambang., ABRIZAH, A.., TAHIRA, Muzammil. An assessment of quality, trustworthiness and usability of Indonesian agricultural science journals: stated preference versus revealed preference study. Scientometrics, v. 108, n. 1, p. 289-304, 2016.
  • YURET, Tolga. Author-weighted impact factor and reference return ratio: can we attain more equality among fields?. Scientometrics, v. 116, n. 3, p. 2097-2111, 2018.
NLP0.29
Visto 15 vezes
sem referências
Array
(
    [dateOfAvailability] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [2019-09-14] => 121965
                        )

                )

        )

    [hasAuthor] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Mariane Sperber] => 121989
                        )

                    [1] => Array
                        (
                            [Vinícius Medina Kern] => 3891
                        )

                )

        )

    [hasFileStorage] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [_repository/596/2019/09/oai_ojs_pkp_sfu_ca_article_21000#00040.pdf] => 122579
                        )

                )

        )

    [hasPageEnd] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [955] => 121988
                        )

                )

        )

    [hasPageStart] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [941] => 121987
                        )

                )

        )

    [hasSectionOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Artigo de revisão] => 98
                        )

                )

        )

    [hasSubject] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Revista científica] => 187757
                        )

                    [1] => Array
                        (
                            [Qualidade de revista científica] => 230679
                        )

                    [2] => Array
                        (
                            [Fator de impacto] => 270935
                        )

                    [3] => Array
                        (
                            [Indicador de qualidade] => 66316
                        )

                    [4] => Array
                        (
                            [Quality indicators] => 191525
                        )

                    [5] => Array
                        (
                            [Indicadores de qualidade] => 279152
                        )

                )

            [es] => Array
                (
                    [0] => Array
                        (
                            [Calidad de la revista científica] => 230680
                        )

                    [1] => Array
                        (
                            [Factor de impacto] => 266864
                        )

                    [2] => Array
                        (
                            [Indicadores de calidad] => 58706
                        )

                    [3] => Array
                        (
                            [Revista científica] => 264405
                        )

                    [4] => Array
                        (
                            [Indicadores de calidad] => 279153
                        )

                )

            [en] => Array
                (
                    [0] => Array
                        (
                            [Scientific journal] => 262203
                        )

                    [1] => Array
                        (
                            [Quality of scientific journal] => 230681
                        )

                    [2] => Array
                        (
                            [Impact factor] => 178959
                        )

                    [3] => Array
                        (
                            [Quality indicators] => 279154
                        )

                )

        )

    [wasPublicationInDate] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [2019-09-14] => 269638
                        )

                )

        )

    [hasLanguageExpression] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [pt] => 232736
                        )

                )

        )

    [hasLicense] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Copyright (c)] => 232755
                        )

                    [1] => Array
                        (
                            [CCBY4.0] => 232756
                        )

                )

        )

    [isPartOfSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Revista Ibero-Americana de Ciência da Informação] => 596
                        )

                )

        )

    [hasIssueOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [ISSUE:JNL:00040-2019-12 NO 3-3] => 121929
                        )

                    [1] => Array
                        (
                            [ISSUE:JNL:00040-2019-12-] => 230603
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [ISSUE:JNL:40:2019-12-3] => 232133
                        )

                )

        )

    [hasAbstract] => Array
        (
            [en] => Array
                (
                    [0] => Array
                        (
                            [The evaluation of scientific activity is a fact that has grown and been well evidenced in the academic community in recent decades. Scientific journals, the main sources of information at the present time and responsible for the diffusion of knowledge through scientific publications, are the means of evaluating the scientific activity most viewed. During the digital age and the need for publication for the validation of studies, the increase in scientific production is imminent, which consequently entails the appearance of new journal titles. The emergence of these new titles spreads in the need of the evaluation of scientific journals. It is believed that it is necessary to propose parameters and quality indicators to assist in this evaluation. As is known, quality indicators already exist that aid in the evaluation of scientific journals, of which the impact factor and the Qualis Capes are the most used and emphasized in the literature. But to what extent can we consider the impact factor and the Qualis Capes as the main quality indicators of scientific journals and use them in large majority to classify the quality of a scientific journal. Based on the points, the research in question intends to carry out an analysis of the literature, more specifically a systematic review of the literature in order to answer the following question: what characterizes a scientific journal of quality according to the scientific literature? In advance, it can be concluded that the literature is still very restricted to the quality of scientific journals, using as main indicator the impact factor, but other indicators not less important are also gaining space. It is also perceived as an incipient subject, despite the great concern of authors of articles in publishing their manuscripts in renowned journals.] => 0
                        )

                )

            [es] => Array
                (
                    [0] => Array
                        (
                            [La evaluación de la actividad científica es un hecho que ha crecido y ha sido bien evidenciado en la comunidad académica en las últimas décadas. Las revistas científicas, las principales fuentes de información en la actualidad y responsables de la difusión del conocimiento a través de publicaciones científicas, son los medios para evaluar la actividad científicas más vistas. En medio de la era digital y la necesidad de publicación para la validación de estudios, el aumento de la producción científica es inminente, lo que conlleva la aparición de nuevos títulos de revistas. La aparición de estos nuevos títulos se propaga en la necesidad de la evaluación de revistas científicas. Se cree que es necesario proponer parámetros e indicadores de calidad para ayudar en esta evaluación. Como se sabe, ya existen indicadores de calidad que ayudan en la evaluación de revistas científicas, de las cuales el factor de impacto y los Qualis Capes son los más utilizadas y destacados en la literatura. Pero ¿hasta qué punto podemos considerar el factor de impacto y los Qualis Capes como los principales indicadores de calidad de las revistas científicas y utilizarlos en gran mayoría para clasificar la calidad de una revista científica? Sobre la base de los puntos antes mencionados, la investigación en cuestión pretende realizar un análisis de la literatura, más específicamente una revisión sistemática de la literatura para responder la siguiente pregunta: ¿qué caracteriza a una revista científica de calidad según la literatura científica? De antemano, se puede concluir que la literatura todavía está muy restringida a la calidad de las revistas científicas, utilizando como indicador principal el factor de impacto, pero otros indicadores no menos importantes también están ganando espacio. También se percibe como un tema incipiente, a pesar de la gran preocupación de los autores por los artículos que publican sus manuscritos en revistas de renombre.] => 0
                        )

                )

            [pt] => Array
                (
                    [0] => Array
                        (
                            [A avaliação da atividade científica é um fato que tem crescido e sido bastante evidenciado na comunidade acadêmica nas últimas décadas. As revistas científicas, principais fontes de informação na atualidade e responsáveis pela difusão do conhecimento por meio de publicações científicas, são os meios de avaliação da atividade científica mais visionados. Em meio a era digital e a necessidade da publicação para a validação dos estudos, é eminente o aumento da produção científica, que consequentemente acarreta o surgimento de novos títulos de revistas. O surgimento destes novos títulos esparra na necessidade da avaliação das revistas científicas. Acredita-se que seja necessário propor parâmetros e indicadores de qualidade que auxiliem nesta avaliação. Como sabe-se, já existem indicadores de qualidade que auxiliam na avaliação das revistas científicas, dos quais o fator de impacto e o Qualis Capes são os mais utilizados e enfatizados na literatura. Mas até que ponto podemos considerar o fator de impacto e o Qualis Capes como os principais indicadores de qualidade das revistas científicas e utilizá-los em grande maioria para classificar a qualidade de uma revista científica? Partindo dos pontos supracitados, a pesquisa em questão pretende realizar uma análise da literatura, mais especificamente uma revisão sistemática da literatura a fim de responder a seguinte questão: o que caracteriza uma revista científica de qualidade de acordo com a literatura científica? De antemão, pode-se concluir que a literatura ainda está muito restrita à qualidade de revistas científicas, utilizando como principal indicador o fator de impacto, mas outros indicadores não menos importantes também estão ganhando espaço. Percebe-se ainda que é um tema incipiente, apesar da grande preocupação dos autores de artigos em publicarem seus manuscritos em revistas de renome.] => 0
                        )

                    [1] => Array
                        (
                            [A avaliação da atividade científica é um fato que tem crescido e sido bastante evidenciado na comunidade acadêmica nas últimas décadas. As revistas científicas, principais fontes de informação na atualidade e responsáveis pela difusão do conhecimento por meio de publicações científicas, são os meios de avaliação da atividade científica mais visionados. Em meio a era digital e a necessidade da publicação para a validação dos estudos, é eminente o aumento da produção científica, que consequentemente acarreta o surgimento de novos títulos de revistas. O surgimento destes novos títulos esparra na necessidade da avaliação das revistas científicas. Acredita-se que seja necessário propor parâmetros e indicadores de qualidade que auxiliem nesta avaliação. Como sabe-se, já existem indicadores de qualidade que auxiliam na avaliação das revistas científicas, dos quais o fator de impacto e o Qualis Capes são os mais utilizados e enfatizados na literatura. Mas até que ponto podemos considerar o fator de impacto e o Qualis Capes como os principais indicadores de qualidade das revistas científicas e utilizá-los em grande maioria para classificar a qualidade de uma revista científica? Partindo dos pontos supracitados, a pesquisa em questão pretende realizar uma análise da literatura, mais especificamente uma revisão sistemática da literatura a fim de responder a seguinte questão: o que caracteriza uma revista científica de qualidade de acordo com a literatura científica? De antemão, pode-se concluir que a literatura ainda está muito restrita à qualidade de revistas científicas, utilizando como principal indicador o fator de impacto, mas outros indicadores não menos importantes também estão ganhando espaço. Percebe-se ainda que é um tema incipiente, apesar da grande preocupação dos autores de artigos em publicarem seus manuscritos em revistas de renome.] => 0
                        )

                )

        )

    [hasID] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [oai:ojs.pkp.sfu.ca:article/21000] => 0
                        )

                )

        )

    [hasRegisterId] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [http://periodicos.unb.br/index.php/RICI/article/view/21000] => 0
                        )

                    [1] => Array
                        (
                            [10.26512/rici.v12.n3.2019.21000] => 0
                        )

                    [2] => Array
                        (
                            [https://periodicos.unb.br/index.php/RICI/article/view/21000] => 0
                        )

                )

        )

    [hasSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Revista Ibero-Americana de Ciência da Informação; Vol 12 No 3 (2019): Revista Ibero-americana de Ciência da Informação; 941-955] => 0
                        )

                    [1] => Array
                        (
                            [Revista Ibero-Americana de Ciência da Informação; v. 12 n. 3 (2019): Revista Ibero-americana de Ciência da Informação; 941-955] => 0
                        )

                    [2] => Array
                        (
                            [Revista Ibero-Americana de Ciência da Informação; Vol. 12 No. 3 (2019): Revista Ibero-americana de Ciência da Informação; 941-955] => 0
                        )

                )

            [es] => Array
                (
                    [0] => Array
                        (
                            [Revista Ibero-Americana de Ciência da Informação; Vol. 12 Núm. 3 (2019): Revista Ibero-americana de Ciência da Informação; 941-955] => 0
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [1983-5213] => 0
                        )

                    [1] => Array
                        (
                            [10.26512/rici.v12.n3.2019] => 0
                        )

                )

        )

    [hasTitle] => Array
        (
            [en] => Array
                (
                    [0] => Array
                        (
                            [Quality of scientific journals: a systematic review of the literature] => 0
                        )

                )

            [es] => Array
                (
                    [0] => Array
                        (
                            [Calidad de revistas científicas: una revisión sistemática de la literatura] => 0
                        )

                )

            [pt] => Array
                (
                    [0] => Array
                        (
                            [Qualidade de revistas científicas: uma revisão sistemática da literatura] => 0
                        )

                )

        )

    [hasUrl] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [http://periodicos.unb.br/index.php/RICI/article/view/21000/23556] => 0
                        )

                    [1] => Array
                        (
                            [https://periodicos.unb.br/index.php/RICI/article/view/21000/23556] => 0
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [https://periodicos.unb.br/index.php/RICI/article/view/21000] => 0
                        )

                    [1] => Array
                        (
                            [https://periodicos.unb.br/index.php/RICI/article/view/21000/23556] => 0
                        )

                )

        )

    [prefLabel] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Oai:ojs.pkp.sfu.ca:article/21000#00040] => 0
                        )

                )

        )

    [hasDOI] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [10.26512/rici.v12.n3.2019.21000] => 0
                        )

                )

        )

)