Article Brapci-Revistas

Níveis de evidência e níveis de periódicos: análise de impacto de artigos na área de Ortopedia e Traumatologia

Levels of evidence and levels of periodicals: impact analysis of articles in orthopedics and traumatology

A atuação do profissional bibliotecário junto ao profissional da saúde, através de técnicas para a busca e recuperação das informações relevantes, além do manejo dos estudos bibliométricos, podem garantir a oportunidade de colaborar no contexto da Medicina Baseada em Evidências. Nesse sentido se deram os procedimentos para realização do estudo, que se dedicou à avaliação da produção científica dos pesquisadores do Programa de Pós-Graduação em Ortopedia e Traumatologia da FMUSP, considerando variáveis qualitativas e quantitativas de 157 artigos publicados no período de 2012 a 2014. Foram avaliadas a qualidade metodológica dos artigos, assim como seu nível de evidência. Os aspectos quantitativos consistiram do número de citações recebidas na base Scopus, em uma janela de citação de quatro anos, e a classificação dos periódicos no Qualis da área de Medicina III. Constatou-se uma nítida preferência dos pesquisadores por Estudos Terapêuticos, assim como pelo nível IV de evidência, além de publicação em periódicos do estrato Qualis B3. Contudo os estudos do nível I de evidência receberam a maior média de citações, ainda que a maior parte dos artigos estivesse em estratos Qualis mais baixos. Os Estudos Anatômicos foi o tipo de estudo mais citado, mas os Estudos Terapêuticos de nível I os sobrepuseram. Finalmente, constatou-se haver alguma relação entre o impacto dos artigos e os níveis de evidência, e também com os níveis dos periódicos (estratos Qualis), sendo mais pronunciada com este último. Concluiu-se que os pesquisadores devem acentuar a prática da Medicina Baseada em Evidências, buscando aperfeiçoamento de suas pesquisas, publicando em periódicos de circulação mais ampla, e melhorando a performance do Programa na avaliação da Capes. E sua relação com o bibliotecário em ciência da saúde deve ser estreitada.@pt


the librarian role, together with the health professional, through search techniques, retrieval of relevant information, and the handling of bibliometric studies, can guarantee the opportunity to collaborate in the context of Evidence-Based Medicine. In this scenario, the procedures for this study were carried out, and dedicated to the evaluation of the scientific production of researchers from the Graduate Program in Orthopedics and Traumatology at Faculdade de Medicina, Universidade de Sao Paulo, considering qualitative and quantitative variables of 157 articles published from 2012 to 2014. The Níveis de evidência e níveis de periódicos: análise de impacto de artigos na área de Ortopedia e Traumatologia Andressa da Costa Santos Souza, Natasha Vogel Maiewski Rodrigues, Rogério Mugnaini Em Questão, Porto Alegre, v. 27, n. 4, p. 189-214, out/dez. 2021 doi; http://dx.doi.org/10.19132/1808-5245274.189-214 | 214 E-ISSN 1808-5245 methodological quality of the articles and their level of evidence were evaluated. The quantitative aspects consisted of the number of citations received in the Scopus database, in a four-year citation period, and the journals´ classification in Qualis in the area of Medicine III. Therapeutics Studies was a clear preference of researchers, as well as for level IV of evidence, in addition to publication in journals of Qualis B3 stratum. However, studies of level I of evidence received the highest average of citations, even though most articles were in lower Qualis stratum. Anatomical Studies was the most cited type of study, but Level I Therapeutics Studies overlapped them. Finally, there was a relation between the articles´ impact and the levels of evidence, also with the journals´ level (Qualis stratum), being more expressed with the latter. It was concluded that researchers should enhance the practice of Evidence-Based Medicine, seeking to improve their research, publishing in journals with broader circulation, and improving the Program performance in the Capes´ evaluation. The relationship between the librarian in health science must be straightened.@en

. Níveis de evidência e níveis de periódicos: análise de impacto de artigos na área de ortopedia e traumatologia levels of evidence and levels of periodicals: impact analysis of articles in orthopedics and traumatology. Em questão, [????].

References

  • ACTA ORTOPÉDICA BRASILEIRA. Instruções aos autores. São Paulo, SP: Acta Ortopédica Brasileira, ©2018. Disponível em: https://www.actaortopedica.com/instrucoes-para-autores. Acesso em: 07 mar 2018.
  • AMATUZZI, M. L. L. Avaliação metodológica dos artigos publicados na área de Ortopedia e Traumatologia nos anos de 2004 e 2005. 83 f. Tese (Doutorado em Ciências) - Faculdade de Medicina, Universidade de São Paulo, São Paulo, 2007.
  • AMERICAN SOCIETY FOR CELL BIOLOGY (ASCB). San Francisco declaration on research assessment: putting scienceinto the assessment of research. San Francisco, CA: ASCB, 2012. Disponível em: https://sfdora.org/read/. Acesso em: 15 jul 2020.
  • ATALLAH, A. N. Medicina baseada em evidências: o elo entre a boa ciência e a boa prática clínica. 1998. p. 325-343. Disponível em: http://www.centrocochranedobrasil.org.br/apl/artigos/artigo_516.pdf. Acesso em: Acesso em 03 de junho de 2017.
  • ATALLAH, A. N.., TREVISANI, V.., VALENTE, O. Tomada de decisões terapêuticas com base em evidências científicas. In: PRADO, F. C.., VALLE, J. R.., RAMOS, J. A. (Ed.). Atualização terapêutica: manual prático de diagnóstico e tratamento. São Paulo: Artes Médicas, 2001. p. 6–7. AZEVEDO, A. W.., BERAQUET, V. S. M. Formação e competência informacional do bibliotecário médico brasileiro. Revista Digital de Biblioteconomia e Ciência da Informação, Campinas, v.7, n. 2, p. 199-218, 2010.
  • BEDAQUE, H. P., SOUZA, A. K. C., LOPES, I. S., et al. Evidence-basedmedicine amidst the pandemic: A path towards continuing medical education and the combat of misinformation. Education for health, Mumbai, v. 33, n.30, p.120–121, 2020.
  • BERAQUET, V. S. M.., CIOL, R. O bibliotecário clínico no Brasil: reflexões sobre uma proposta de atuação em hospitais universitários. DataGramaZero Revista de Ciência da Informação, [s.l.], v.10, n. 2, p. A05-0, 2009.
  • BERNARDO, W. M.., NOBRE, M. R. C.., JATENE, F. B. A prática clínica baseada em evidências. Parte II - Buscando as evidências em fontes de informação. Revista Brasileira de Reumatologia, São Paulo, v. 44, n. 6, p.
  • 403–409, 2004.
  • BHANDARI, M., BUSSE, J., DEVEREAUX, P. J., et al. Factors associated with citation rates in the orthopedic literature. Canadian Journal of Surgery, Toronto, v. 50, n. 2, p. 119–123, 2007.
  • CALLAHAM, M.., WEARS, R. L.., WEBER, E. Journal prestige, publication bias, and other characteristics associated with citation of published studies in peer-reviewed journals. Journal of the American Medical Association, Chicago, v. 287, n. 21, p. 2847-2850, 2002.
  • EL DIB, R. Como praticar a medicina baseada em evidências. Jornal Vascular Brasileiro, São Paulo, v. 6, n. 1, p. 1–4, 2007.
  • EL DIB, R. Guia prático de medicina baseada em evidências. São Paulo: Cultura Acadêmica, 2014.
  • EVIDENCE-BASED MEDICINE WORKING GROUP, E. Evidence-based medicine: a new approach to teaching the practice of medicine. Journal of the American Medical Association, Chicago, v. 268, n. 17, p. 2420–2425, 1992.
  • IOANNIDIS, J. Coronavirus disease 2019: the harms of exaggerated information and non-evidence-based measures. European journal of clinical investigation, Berlin, n. e13223, 2020. Advance online publication. https://doi.org/10.1111/eci.13223
  • KULKARNI, A. V.., BUSSE, J. W.., SHAMS, I. Characteristics associated with citation rate of the medical literature. PloS one, San Francisco, v. 2, n. 5, p. e403, 2007.
  • LARIVIÈRE, V.., GINGRAS, Y.., ARCHAMBAULT, E. The decline in the concentration of citations, 1900–2007. Journal of the American Society for Information Science and Technology, Nova Jersey, v. 60, n. 4, p. 858-862, 2009.
  • MACROBERTS, M. H.., MACROBERTS, B. R. Problems of citation analysis: A critical review. Journal of the American Society for Information Science, Nova Jersey, v. 40, n. 5, p. 342-349, 1989.
  • MUGNAINI, R.., PIO, L. A. S.., PAULA, A. S. A. A comunicação científica em periódicos no Brasil: índices de citação, indexação e indicadores bibliométricos na avaliação da ciência. In: CARNEIRO, F. F. B.., FERREIRA NETO, A.., SANTOS, W. (Org.). A comunicação científica em periódicos. Curitiba: Appris, 2019. p. 173-202.
  • OKIKE, K., KOCHER, M. S., TORPEY, J. L., et al. Level of evidence and conflict of interest disclosure associated with higher citation rates in orthopedics. Journal of Clinical Epidemiology, Nova York, v. 64, n. 3, p. 331– 338, 2011.
  • OXMAN, A. D.., SACKETT, D. L.., GUYATT, G. H. User´s guides to the medical literature I. How to get started. Journal of the American Medical Association, Chicago, v. 270, n. 17, p. 2093–2095, 1993.
  • PACKER, A.., MENEGUINI, R. Visibilidade da produção científica. In: POBLACION, D. A. (Org.). Comunicação e produção científica: contexto, indicadores, avaliação. São Paulo: Angellara, 2006. p. 235–260. PINTO, R. R. O profissional da informação em Ciências da Saúde: subsídios para o desenvolvimento de cursos de capacitação no Brasil. 2005. 118f. (Mestrado Profissional em Ensino em Ciências da Saúde) - Escola Paulista de Medicina, Universidade Federal de São Paulo, 2005.
  • ROSENBERG, W.., DONALD, A. Evidence based medicine: an approach to clinical problem-solving. BMJ: British Medical Journal, Londres, v. 310, n. 6987, p. 1122–1126, 1995.
  • SACKETT, D. L.., ROSENBERG, W. M., GRAY, J. A, et al. Evidence based medicine: what it is and what it isn’t. BMJ: British Medical Journal, Londres, v. 312, n. 7023, p. 71–72, 1996.
  • SANTOS, S. M., MUGNAINI, R. Comunicação científica em periódicos e a internacionalização das ciências brasileiras. In: CARNEIRO, F. F. B.., FERREIRA NETO, A.., SANTOS, W. (Org.). A comunicação científica em periódicos. Curitiba: Appris, 2019. p. 73-94.
  • SAVI M. G. M., SILVA, E. L. O uso da informação na prática clínica na perspectiva da medicina baseada em evidências. Informação and Sociedade: Estudos, João Pessoa, v.20, n.2, p. 37-50, 2010.
  • SCHOONBAERT, D.., ROELANTS, G. Citation analysis for measuring the value of scientific publications: quality assessment tool or comedy of errors? Tropical Medicine and International Health, Oxford, v. 1, n. 6, p. 739-752, 1996.
  • SILVA, F. C. C. A atuação do bibliotecário médico e sua interação com os profissionais da saúde para busca e seleção de informação especializada. Revista Digital de Biblioteconomia e Ciência da Informação, Campinas, v. 3, n. 1, p. 131–151, 2005.
  • TAHAMTAN, I.., AFSHAR, A. S.., AHAMDZADEH, K. Factors affecting number of citations: a comprehensive review of the literature. Scientometrics, [s.l.], v. 107, n. 3, p. 1195-1225, 2016.
  • WYATT, J.., GULY, H. Identifying the research question and planning the project. Emergency Medicine Journal, Londres, v. 19, n. 4, p. 318–21, 2002.
  • YOUNG, J. M.., WARD, J. E. General practitioners´ use of evidence databases. Medical journal of Australia, Sydney, v. 170, n. 2, p. 56-58, 1999.
NLP0.29
Visto 21 vezes
sem referências
Array
(
    [dateOfAvailability] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [2021-08-19] => 163021
                        )

                    [1] => Array
                        (
                            [2021-09-29] => 164653
                        )

                )

        )

    [hasAuthor] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Andressa da Costa Santos Souza] => 163033
                        )

                    [1] => Array
                        (
                            [Natasha Vogel Majewski] => 163034
                        )

                    [2] => Array
                        (
                            [Rogério Mugnaini] => 10686
                        )

                )

        )

    [hasFileStorage] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [_repository/47/2021/09/oai_seer_ufrgs_br_article_105868#00002.pdf] => 163939
                        )

                )

        )

    [hasPageEnd] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [214] => 1765
                        )

                )

        )

    [hasPageStart] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [189] => 2483
                        )

                )

        )

    [hasSectionOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Artigo] => 3
                        )

                )

        )

    [hasSubject] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Ciëncia social aplicada] => 2102
                        )

                    [1] => Array
                        (
                            [Ciência da saúde] => 177
                        )

                    [2] => Array
                        (
                            [Avaliação] => 279935
                        )

                    [3] => Array
                        (
                            [Indicador bibliométrico] => 9624
                        )

                    [4] => Array
                        (
                            [Produção científica] => 261508
                        )

                    [5] => Array
                        (
                            [Periódico científico] => 247639
                        )

                    [6] => Array
                        (
                            [Qualis] => 201021
                        )

                    [7] => Array
                        (
                            [Medicina baseada em evidência] => 6470
                        )

                    [8] => Array
                        (
                            [Assessment] => 252317
                        )

                    [9] => Array
                        (
                            [Indicadores bibliométricos] => 199444
                        )

                    [10] => Array
                        (
                            [Periódicos científicos] => 261519
                        )

                    [11] => Array
                        (
                            [Medicina baseada em evidências] => 268329
                        )

                )

            [en] => Array
                (
                    [0] => Array
                        (
                            [Assessment] => 173559
                        )

                    [1] => Array
                        (
                            [Bibliometric indicators] => 268466
                        )

                    [2] => Array
                        (
                            [Scientific production] => 273771
                        )

                    [3] => Array
                        (
                            [Scientific journals] => 268330
                        )

                    [4] => Array
                        (
                            [Evidence-based medicine] => 181665
                        )

                    [5] => Array
                        (
                            [Librarian in health science] => 268331
                        )

                )

        )

    [wasPublicationInDate] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [2021-09-29] => 244484
                        )

                )

        )

    [hasLanguageExpression] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [pt] => 232736
                        )

                )

        )

    [hasLicense] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [Copyright (c)] => 232755
                        )

                    [1] => Array
                        (
                            [CCBY4.0] => 232756
                        )

                )

        )

    [isPartOfSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Em questão] => 47
                        )

                )

        )

    [hasIssueOf] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [ISSUE:JNL:00002-2021--ONLINE] => 156645
                        )

                    [1] => Array
                        (
                            [ISSUE:JNL:00002-2021-27-4] => 164651
                        )

                )

        )

    [hasAbstract] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [A atuação do profissional bibliotecário junto ao profissional da saúde, através de técnicas para a busca e recuperação das informações relevantes, além do manejo dos estudos bibliométricos, podem garantir a oportunidade de colaborar no contexto da Medicina Baseada em Evidências. Nesse sentido se deram os procedimentos para realização do estudo, que se dedicou à avaliação da produção científica dos pesquisadores do Programa de Pós-Graduação em Ortopedia e Traumatologia da FMUSP, considerando variáveis qualitativas e quantitativas de 157 artigos publicados no período de 2012 a 2014. Foram avaliadas a qualidade metodológica dos artigos, assim como seu nível de evidência. Os aspectos quantitativos consistiram do número de citações recebidas na base Scopus, em uma janela de citação de quatro anos, e a classificação dos periódicos no Qualis da área de Medicina III. Constatou-se uma nítida preferência dos pesquisadores por Estudos Terapêuticos, assim como pelo nível IV de evidência, além de publicação em periódicos do estrato Qualis B3. Contudo os estudos do nível I de evidência receberam a maior média de citações, ainda que a maior parte dos artigos estivesse em estratos Qualis mais baixos. Os Estudos Anatômicos foi o tipo de estudo mais citado, mas os Estudos Terapêuticos de nível I os sobrepuseram. Finalmente, constatou-se haver alguma relação entre o impacto dos artigos e os níveis de evidência, e também com os níveis dos periódicos (estratos Qualis), sendo mais pronunciada com este último. Concluiu-se que os pesquisadores devem acentuar a prática da Medicina Baseada em Evidências, buscando aperfeiçoamento de suas pesquisas, publicando em periódicos de circulação mais ampla, e melhorando a performance do Programa na avaliação da Capes. E sua relação com o bibliotecário em ciência da saúde deve ser estreitada.] => 0
                        )

                    [1] => Array
                        (
                            [A atuação do profissional bibliotecário junto ao profissional da saúde, através de técnicas para a busca e recuperação das informações relevantes, além do manejo dos estudos bibliométricos, pode garantir a oportunidade de colaborar no contexto da Medicina Baseada em Evidências. Nesse sentido, foram delineados os procedimentos para realização deste estudo, que se dedicou à avaliação da produção científica dos pesquisadores do Programa de PósGraduação em Ortopedia e Traumatologia da Faculdade de Medicina, Universidade de São Paulo, considerando variáveis qualitativas e quantitativas de 157 artigos publicados no período de 2012 a 2014. Foi avaliada a qualidade metodológica dos artigos, assim como seu nível de evidência. Os aspectos quantitativos consistiram no número de citações recebidas na base Scopus, em uma janela de citação de quatro anos, e a classificação dos periódicos no Qualis da área de Medicina III. Constatou-se uma nítida preferência dos pesquisadores por Estudos Terapêuticos, assim como pelo nível IV de evidência, bem como pela publicação em periódicos do estrato Qualis B3. Contudo, os estudos do nível I de evidência receberam a maior média de citações, ainda que grande parte dos artigos estivesse em estratos Qualis mais baixos. O tipo de estudo mais citado foram os Estudos Anatômicos, mas os Estudos Terapêuticos de nível I se sobrepuseram. Finalmente, constatou-se haver relação entre o impacto dos artigos e os níveis de evidência, e também com os níveis dos periódicos (estratos Qualis), sendo mais pronunciada com este último. Concluiu-se que os pesquisadores devem acentuar a prática da Medicina Baseada em Evidências, buscando aperfeiçoamento de suas pesquisas, publicando em periódicos de circulação mais ampla, e melhorando a performance do Programa na avaliação da Capes. E sua relação com o bibliotecário em ciência da saúde deve ser estreitada.] => 0
                        )

                )

            [en] => Array
                (
                    [0] => Array
                        (
                            [the librarian role, together with the health professional, through search techniques, retrieval of relevant information, and the handling of bibliometric studies, can guarantee the opportunity to collaborate in the context of Evidence-Based Medicine. In this scenario, the procedures for this study were carried out, and dedicated to the evaluation of the scientific production of researchers from the Graduate Program in Orthopedics and Traumatology at Faculdade de Medicina, Universidade de Sao Paulo, considering qualitative and quantitative variables of 157 articles published from 2012 to 2014. The Níveis de evidência e níveis de periódicos: análise de impacto de artigos na área de Ortopedia e Traumatologia Andressa da Costa Santos Souza, Natasha Vogel Maiewski Rodrigues, Rogério Mugnaini Em Questão, Porto Alegre, v. 27, n. 4, p. 189-214, out/dez. 2021 doi; http://dx.doi.org/10.19132/1808-5245274.189-214 | 214 E-ISSN 1808-5245 methodological quality of the articles and their level of evidence were evaluated. The quantitative aspects consisted of the number of citations received in the Scopus database, in a four-year citation period, and the journals´ classification in Qualis in the area of Medicine III. Therapeutics Studies was a clear preference of researchers, as well as for level IV of evidence, in addition to publication in journals of Qualis B3 stratum. However, studies of level I of evidence received the highest average of citations, even though most articles were in lower Qualis stratum. Anatomical Studies was the most cited type of study, but Level I Therapeutics Studies overlapped them. Finally, there was a relation between the articles´ impact and the levels of evidence, also with the journals´ level (Qualis stratum), being more expressed with the latter. It was concluded that researchers should enhance the practice of Evidence-Based Medicine, seeking to improve their research, publishing in journals with broader circulation, and improving the Program performance in the Capes´ evaluation. The relationship between the librarian in health science must be straightened.] => 0
                        )

                )

        )

    [hasID] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [oai:seer.ufrgs.br:article/105868] => 0
                        )

                )

        )

    [hasRegisterId] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/view/105868] => 0
                        )

                    [1] => Array
                        (
                            [10.19132/1808-524500.%p] => 0
                        )

                    [2] => Array
                        (
                            [10.19132/1808-5245274.189-214] => 0
                        )

                )

        )

    [hasSource] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Em Questão; Online first] => 0
                        )

                    [1] => Array
                        (
                            [1808-5245] => 0
                        )

                    [2] => Array
                        (
                            [Em Questão; v.27, n.4, out./dez. 2021; 189-214] => 0
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [1807-8893] => 0
                        )

                )

        )

    [hasTitle] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Níveis de evidência e níveis de periódicos: análise de impacto de artigos na área de Ortopedia e Traumatologia] => 0
                        )

                )

            [en] => Array
                (
                    [0] => Array
                        (
                            [Levels of evidence and levels of periodicals: impact analysis of articles in orthopedics and traumatology] => 0
                        )

                )

        )

    [hasUrl] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/view/105868/64054] => 0
                        )

                    [1] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59070] => 0
                        )

                    [2] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59071] => 0
                        )

                    [3] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59072] => 0
                        )

                    [4] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59073] => 0
                        )

                    [5] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59074] => 0
                        )

                    [6] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59075] => 0
                        )

                    [7] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59077] => 0
                        )

                    [8] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59078] => 0
                        )

                    [9] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59079] => 0
                        )

                    [10] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/59080] => 0
                        )

                    [11] => Array
                        (
                            [https://seer.ufrgs.br/EmQuestao/article/downloadSuppFile/105868/67681] => 0
                        )

                )

            [nn] => Array
                (
                    [0] => Array
                        (
                            [https://seer.ufrgs.br/index.php/EmQuestao/article/view/105868] => 0
                        )

                    [1] => Array
                        (
                            [https://seer.ufrgs.br/index.php/EmQuestao/article/view/105868/64054] => 0
                        )

                )

        )

    [prefLabel] => Array
        (
            [pt] => Array
                (
                    [0] => Array
                        (
                            [Oai:seer.ufrgs.br:article/105868#00002] => 0
                        )

                )

        )

    [hasDOI] => Array
        (
            [nn] => Array
                (
                    [0] => Array
                        (
                            [10.19132/1808-5245274.189-214] => 0
                        )

                )

        )

)