Article Brapci-Autoridades

Agregadores de dados altmétricos: analisando o altmetric.com e o webometric analyst

Altmetric data aggregators: analyzing altmetric.com and webometric analyst

Vildeane da Rocha Borba
Sônia Elisa Caregnato

Objective: reports the experience of using altmetric data aggregators Altmetric.com and Webometric Analyst, in a study on the presence of articles from Brazilian scientific journals on Information Science on social media platforms. Methods: the study was characterized as descriptive, of qualitative and quantitative nature, which analyzed the aggregators Altmetric.com and Webometric Analyst. The corpus used to test them consisted of 13 Brazilian journals in Information Science, encompassing 2,724 scientific articles published in the period from 2011 to 2018. Result: from the use of the two aggregators to collect altmetric data about articles from Brazilian journals in Information Science, it was primarily verified that different methodologies and tools generate different results, with discrepancies and specific similarities. It was also noticed that the DOI numbers of some articles were incorrect, that is, the link of these DOIs pointed to an error page in CrossRef, assuming that was the reason for the small number of positive results in the Altmetric.com via API. Although the Webometric Analyst has shown greater coverage of altmetric data for articles from Brazilian journals in Information Science, possibly due to the search strategy used, in this case author, title and year, some inconsistencies were noticed in Mendeley, such as an article with different versions or with different publication dates, showing divergent counts of readers for the same article. Conclusions: it is considered that the tools used for generating altmetric data should be understood as facilitators of data collection on social media platforms, however one must be aware of the scope and limitations of each of these tools, as well as of the collection chosen for testing and capture. As the nature of the platforms is uneven, they can be employed as to complement one another.@en

Objetivo: relata a experiência de utilização dos agregadores de dados altmétricos Altmetric.com e do Webometric Analyst, em um estudo sobre a presença dos artigos de revistas científicas brasileiras da Ciência da Informação nas plataformas de mídias sociais. Método: o estudo foi caracterizado como descritivo, de natureza qualiquantitativa, cujo objeto de análise foram os agregadores Altmetric.com e Webometric Analyst. O corpus utilizado para testá-los constituiu-se de 13 periódicos brasileiros da área da Ciência da Informação, englobando 2.724 artigos científicos publicados no período de 2011 a 2018. Resultado: a partir da utilização desses agregadores para coletar dados altmétricos sobre artigos de periódicos brasileiros em Ciência da Informação, pode-se constatar primariamente que distintas metodologias e ferramentas geram diferentes resultados, com discrepâncias e semelhanças pontuais. Percebeu-se também que os números de DOIs de alguns artigos de periódicos estavam incorretos, isto é, o link destes DOIs remetia a uma página de erro na CrossRef, presumindo-se que a baixa quantidade de resultados positivos de dados altmétricos no Altmetric.com via API deve-se a isso. Embora o Webometric Analyst tenha apresentado uma maior cobertura de dados altmétricos para os artigos de periódicos brasileiros em Ciência da Informação, possivelmente pela forma de busca de dados utilizada, neste caso autor, título e ano, foram percebidas algumas inconsistências no Mendeley, como um artigo com diferentes versões ou com datas de publicação distintas, mostrando divergentes contagens de leitores para um mesmo artigo. Conclusões: considera-se que as ferramentas utilizadas para gerar dados altmétricos devem ser entendidas como facilitadores da coleta de dados em plataformas de mídias sociais, porém deve-se estar atento à abrangência e limitação de cada uma dessas ferramentas, assim como da coleção escolhida para teste e captura de dados. Como a natureza das plataformas é desigual, elas podem ser utilizadas de modo complementar em estudos altmétricos.  @pt

. Altmetric data aggregators: analyzing altmetric.com and webometric analyst agregadores de dados altmétricos: analisando o altmetric.com e o webometric analyst. Encontros bibli: revista eletrônica de biblioteconomia e ciência da informação, [????].

References

  • ADIE, E.., ROE., W. Altmetric: enriching scholarly content with article-level discussion and metrics. Learned Publishing, Bristol, v. 26, n. 1, p. 11-17, 2013.
  • ARAÚJO, R. F. Mídias sociais e comunicação científica: análise altmétrica em artigos de periódicos da ciência da informação. Em Questão, Porto Alegre, v. 21, n. 1, p. 96-109, jan./abr. 2015.
  • BAR-ILAN, J.., HALEVI, G.., MILOJEVIĆ, S. Differences between Altmetric Data Sources A Case Study. Journal of Altmetrics, United Kingdom, v. 2, n. 1, p. 1-8, 2019.
  • BARTLING, S.., FRIESIKE, S. Towards Another Scientific Revolution. In: BATLING, S.., FRIESIKE, S. (ed.). Opening Science: the evolving guide on how the Internet is Changing Research, Collaboration and Scholarly Publishing. Heidelberg: Springer Open, 2014. p. 315.
  • CABRERA, D.., ROY, D., CHISOLM, M. S. Social Media Scholarship and Alternative Metrics for Academic Promotion and Tenure. American College of Radiology, Reston, v. 15, n. 1, p. 135-141, jan. 2018.
  • DIGITAL SCIENCE. Altmetric: Who’s talking about your research? Altmetric, [s. l.], c2018. Disponível em: https://www.altmetric.com. Acesso em: 10 jun. 2021.
  • ERDT, M. et al. Altmetrics: an analysis of the state-of-the-art in measuring research impact on social media. Scientometrics, New York, v. 109, n. 2, p. 1117-1166, 2016.
  • HAUSTEIN, S.., BOWMAN, T. D.., COSTAS, R. Interpreting ‘altmetrics’: Viewing acts on social media through the lens of citation and social theories. In: SUGIMOTO, C. R. (ed.). Theories of Informetrics and scholarly communication. Frankfurt: De Gruyter, 2016. p. 372-406.
  • KARMAKAR, M.., BANSHAL, S. K.., SINGH, V. K. A large‐scale comparison of coverage and mentions captured by the two altmetric aggregators: Altmetric.com and PlumX. Scientometric, New York, v. 126, p. 4465-4489, 2021.
  • MANHIQUE, I. L. E. et al. Indicadores altmétricos em periódicos brasileiros da Ciência da Informação no Brasil. Revista Ibero-Americana de Ciência da Informação, Brasília, DF, v. 12, n. 2, p. 515-532, maio/ago. 2019.
  • MESCHEDE, C.., SIEBENLIST, T. Cross-metric compatibility and inconsistencies of altmetrics. Scientometrics, New York, v. 115, n. 1, p. 283-297, 2018.
  • MUKHERJEE, B.., SUBOTIC, S.., CHAUBEY, A. K. And now for something completely different: the congruence of the Altmetric Attention Score’s structure between different article groups. Scientometrics, New York, v. 114, n. 1, p. 253-275, 2018.
  • NASCIMENTO, A. G.., ODDONE, N. E. Uso de altmetrics para avaliação de periódicos científicos brasileiros em Ciência da Informação. Ciência da Informação em Revista, Maceió, v. 2, n. 1, p. 3-12, jan./abr. 2015.
  • NASCIMENTO, A. G. do., ODDONE, N. E. Uso de indicadores altmetrics na avaliação de periódicos científicos brasileiros em Ciência da Informação. In: ENCONTRO BRASILEIRO DE BIBLIOMETRIA E CIENTOMETRIA, 4., 2014, Recife. Anais [...]. Recife: UFPE, 2014. p. 1-2.
  • NATIONAL INFORMATION STANDARDS ORGANIZATION. NISO RP-25-2016: Outputs of the NISO Alternative Assessment Metrics Project. Baltimore: NISO, 2016. Disponível em: https://www.niso.org/publications/rp-25-2016-altmetrics. Acesso em: 10 jun. 2020.
  • ORTEGA, J.-L. Altmetrics data providers: A meta-analysis review of the coverage of metrics and publications. El profesional de la información, León, v. 29, n. 1, p. 1-23, 2020.
  • ORTEGA, J.-L. Reliability and accuracy of altmetric providers: a comparison among Altmetric.com, PlumX and Crossref Event Data. Scientometrics, New York, v. 116, p. 2123-2138, 2018.
  • PRIEM, J. et al. Altmetrics: A manifesto. Altmetrics, [s. l.], 2010. Disponível em: http://altmetrics.org/manifesto. Acesso em: 30 jul. 2017.
  • SANKAR, P.., KAVITHA, E. S. Altmetrics: new research tool in the growth social media. EJournal of Library and Information Science, Madison, v. 3, n. 1, p. 80-91, Feb. 2016.
  • STATISTICAL CYBERMETRICS RESEARCH GROUP. Webometric Analyst. [2019]. Disponível em: http://lexiurl.wlv.ac.uk/index.html. Acesso em: 10 jun. 2020.
  • SUGIMOTO, C. R. et al. Scholarly use of social media and altmetrics: a review of the literature. Journal of the Association for Information Science and Technology, New York, v. 68, n. 9, p. 2037-2062, 2017.
  • THELWALL, M. Introduction to Webometrics: quantitative Web Research for the Social Sciences. San Rafael: Morgan and Claypool, 2009.
  • ZAHEDI, Z.., COSTAS, R. General discussion of data quality challenges in social media metrics: Extensive comparison of four major altmetric data aggregators. Plos One, São Francisco, v. 13, n. 5, May 2018.
  • ZAHEDI, Z.., FENNER, M.., COSTAS, R. Consistency among altmetrics data provider/aggregators: What are the challenges? In: ALTMETRICS WORKSHOP, 9., 2015, Amsterdam. Proceedings […]. Amsterdam: Amsterdam Science Park, 2015. Disponível em: https://scholarlypublications.universiteitleiden.nl/handle/1887/48265. Acesso em: 10 jun. 2021.
NLP0.29
Visto 16 vezes
sem referências
Array
(
    [dateOfAvailability] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [2021-10-08] => 164913
                        )

                )

        )

    [hasAuthor] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Vildeane da Rocha Borba] => 8716
                        )

                    [1] => Array
                        (
                            [Sônia Elisa Caregnato] => 35607
                        )

                )

        )

    [hasFileStorage] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [_repository/271/2021/11/oai_periodicos_ufsc_br_article_78797#00016.pdf] => 166588
                        )

                )

        )

    [hasPageEnd] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [19] => 1508
                        )

                )

        )

    [hasPageStart] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [1] => 696
                        )

                )

        )

    [hasSectionOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Dossiê Especial] => 273
                        )

                    [1] => Array
                        (
                            [Dossiê] => 293
                        )

                )

        )

    [hasSubject] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Altmetria] => 227687
                        )

                    [1] => Array
                        (
                            [Agregador de dado altmétrico] => 164932
                        )

                    [2] => Array
                        (
                            [Api do altmetric] => 164933
                        )

                    [3] => Array
                        (
                            [Webometric analyst] => 164934
                        )

                    [4] => Array
                        (
                            [Agregadores de dados altmétricos] => 261503
                        )

                    [5] => Array
                        (
                            [Pi do altmetric.com] => 261504
                        )

                )

            [en] => Array
                (
                    [0] => Array
                        (
                            [Com] => 57558
                        )

                    [1] => Array
                        (
                            [Altmetric] => 153177
                        )

                    [2] => Array
                        (
                            [Altmetric data aggregators] => 164935
                        )

                    [3] => Array
                        (
                            [Com api] => 164936
                        )

                    [4] => Array
                        (
                            [Altmetric.com api] => 261501
                        )

                    [5] => Array
                        (
                            [Webometric analyst] => 261502
                        )

                )

        )

    [wasPublicationInDate] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [2021-10-08] => 261414
                        )

                )

        )

    [hasLanguageExpression] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [pt] => 232736
                        )

                )

        )

    [hasLicense] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Copyright (c)] => 232755
                        )

                    [1] => Array
                        (
                            [CCBY4.0] => 232756
                        )

                )

        )

    [isPartOfSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Encontros Bibli: Revista Eletrônica de Biblioteconomia e Ciência da Informação] => 271
                        )

                )

        )

    [hasIssueOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [ISSUE:JNL:00016-2021-26-] => 153151
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [ISSUE:JNL:16:2021-26-0] => 231874
                        )

                )

        )

    [hasAbstract] => Array
        (
            [en] => Array
                (
                    [0] => Array
                        (
                            [Objective: reports the experience of using altmetric data aggregators Altmetric.com and Webometric Analyst, in a study on the presence of articles from Brazilian scientific journals on Information Science on social media platforms.
Methods: the study was characterized as descriptive, of qualitative and quantitative nature, which analyzed the aggregators Altmetric.com and Webometric Analyst. The corpus used to test them consisted of 13 Brazilian journals in Information Science, encompassing 2,724 scientific articles published in the period from 2011 to 2018.
Result: from the use of the two aggregators to collect altmetric data about articles from Brazilian journals in Information Science, it was primarily verified that different methodologies and tools generate different results, with discrepancies and specific similarities. It was also noticed that the DOI numbers of some articles were incorrect, that is, the link of these DOIs pointed to an error page in CrossRef, assuming that was the reason for the small number of positive results in the Altmetric.com via API. Although the Webometric Analyst has shown greater coverage of altmetric data for articles from Brazilian journals in Information Science, possibly due to the search strategy used, in this case author, title and year, some inconsistencies were noticed in Mendeley, such as an article with different versions or with different publication dates, showing divergent counts of readers for the same article.
Conclusions: it is considered that the tools used for generating altmetric data should be understood as facilitators of data collection on social media platforms, however one must be aware of the scope and limitations of each of these tools, as well as of the collection chosen for testing and capture. As the nature of the platforms is uneven, they can be employed as to complement one another.] => 0
                        )

                )

            [pt] => Array
                (
                    [0] => Array
                        (
                            [Objetivo: relata a experiência de utilização dos agregadores de dados altmétricos Altmetric.com e do Webometric Analyst, em um estudo sobre a presença dos artigos de revistas científicas brasileiras da Ciência da Informação nas plataformas de mídias sociais.
Método: o estudo foi caracterizado como descritivo, de natureza qualiquantitativa, cujo objeto de análise foram os agregadores Altmetric.com e Webometric Analyst. O corpus utilizado para testá-los constituiu-se de 13 periódicos brasileiros da área da Ciência da Informação, englobando 2.724 artigos científicos publicados no período de 2011 a 2018.
Resultado: a partir da utilização desses agregadores para coletar dados altmétricos sobre artigos de periódicos brasileiros em Ciência da Informação, pode-se constatar primariamente que distintas metodologias e ferramentas geram diferentes resultados, com discrepâncias e semelhanças pontuais. Percebeu-se também que os números de DOIs de alguns artigos de periódicos estavam incorretos, isto é, o link destes DOIs remetia a uma página de erro na CrossRef, presumindo-se que a baixa quantidade de resultados positivos de dados altmétricos no Altmetric.com via API deve-se a isso. Embora o Webometric Analyst tenha apresentado uma maior cobertura de dados altmétricos para os artigos de periódicos brasileiros em Ciência da Informação, possivelmente pela forma de busca de dados utilizada, neste caso autor, título e ano, foram percebidas algumas inconsistências no Mendeley, como um artigo com diferentes versões ou com datas de publicação distintas, mostrando divergentes contagens de leitores para um mesmo artigo.
Conclusões: considera-se que as ferramentas utilizadas para gerar dados altmétricos devem ser entendidas como facilitadores da coleta de dados em plataformas de mídias sociais, porém deve-se estar atento à abrangência e limitação de cada uma dessas ferramentas, assim como da coleção escolhida para teste e captura de dados. Como a natureza das plataformas é desigual, elas podem ser utilizadas de modo complementar em estudos altmétricos.
 ] => 0
                        )

                    [1] => Array
                        (
                            [Objetivo: relata a experiência de utilização dos agregadores de dados altmétricos Altmetric.com e do Webometric Analyst, em um estudo sobre a presença dos artigos de revistas científicas brasileiras da Ciência da Informação nas plataformas de mídias sociais.
Método: o estudo foi caracterizado como descritivo, de natureza qualiquantitativa, cujo objeto de análise foram os agregadores Altmetric.com e Webometric Analyst. O corpus utilizado para testá-los constituiu-se de 13 periódicos brasileiros da área da Ciência da Informação, englobando 2.724 artigos científicos publicados no período de 2011 a 2018.
Resultado: a partir da utilização desses agregadores para coletar dados altmétricos sobre artigos de periódicos brasileiros em Ciência da Informação, pode-se constatar primariamente que distintas metodologias e ferramentas geram diferentes resultados, com discrepâncias e semelhanças pontuais. Percebeu-se também que os números de DOIs de alguns artigos de periódicos estavam incorretos, isto é, o link destes DOIs remetia a uma página de erro na CrossRef, presumindo-se que a baixa quantidade de resultados positivos de dados altmétricos no Altmetric.com via API deve-se a isso. Embora o Webometric Analyst tenha apresentado uma maior cobertura de dados altmétricos para os artigos de periódicos brasileiros em Ciência da Informação, possivelmente pela forma de busca de dados utilizada, neste caso autor, título e ano, foram percebidas algumas inconsistências no Mendeley, como um artigo com diferentes versões ou com datas de publicação distintas, mostrando divergentes contagens de leitores para um mesmo artigo.
Conclusões: considera-se que as ferramentas utilizadas para gerar dados altmétricos devem ser entendidas como facilitadores da coleta de dados em plataformas de mídias sociais, porém deve-se estar atento à abrangência e limitação de cada uma dessas ferramentas, assim como da coleção escolhida para teste e captura de dados. Como a natureza das plataformas é desigual, elas podem ser utilizadas de modo complementar em estudos altmétricos.
?] => 0
                        )

                )

        )

    [hasID] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [oai:periodicos.ufsc.br:article/78797] => 0
                        )

                )

        )

    [hasRegisterId] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [https://periodicos.ufsc.br/index.php/eb/article/view/78797] => 0
                        )

                    [1] => Array
                        (
                            [10.5007/1518-2924.2021.78797] => 0
                        )

                )

        )

    [hasSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Encontros Bibli: revista eletrônica de biblioteconomia e ciência da informação; Vol. 26 No. Especial (2021): O compartilhamento de dados e a pesquisa bibliométrica e cientométrica; 1-19] => 0
                        )

                    [1] => Array
                        (
                            [Encontros Bibli: revista eletrônica de biblioteconomia e ciência da informação; v. 26 n. Especial (2021): O compartilhamento de dados e a pesquisa bibliométrica e cientométrica; 1-19] => 0
                        )

                    [2] => Array
                        (
                            [1518-2924] => 0
                        )

                )

            [es] => Array
                (
                    [0] => Array
                        (
                            [Encontros Bibli: revista electrónica de bibliotecología y ciencias de la información.; Vol. 26 Núm. Especial (2021): O compartilhamento de dados e a pesquisa bibliométrica e cientométrica; 1-19] => 0
                        )

                )

        )

    [hasTitle] => Array
        (
            [en] => Array
                (
                    [0] => Array
                        (
                            [Altmetric data aggregators: analyzing altmetric.com and webometric analyst] => 0
                        )

                )

            [pt] => Array
                (
                    [0] => Array
                        (
                            [Agregadores de dados altmétricos: analisando o altmetric.com e o webometric analyst] => 0
                        )

                )

        )

    [hasUrl] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [https://periodicos.ufsc.br/index.php/eb/article/view/78797/47421] => 0
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [https://periodicos.ufsc.br/index.php/eb/article/view/78797] => 0
                        )

                    [1] => Array
                        (
                            [https://periodicos.ufsc.br/index.php/eb/article/view/78797/47421] => 0
                        )

                    [2] => Array
                        (
                            [https://periodicos.ufsc.br/index.php/eb/article/view/78797/54036] => 0
                        )

                )

        )

    [prefLabel] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Oai:periodicos.ufsc.br:article/78797#00016] => 0
                        )

                )

        )

    [hasDOI] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [10.5007/1518-2924.2021.78797] => 0
                        )

                )

        )

)