Interpretando a internacionalização dos periódicos científicos brasileiros / Interpreting the internationalization of brazilian scientific journals / Interpretando la internacionalización de los periódicos científicos brasileños

Explora o processo de internacionalização acadêmica dos periódicos científicos brasileiros. Mediante revisão bibliográfica, é analisado o cenário do desenvolvimento dessas publicações nas últimas décadas na América Latina, assim como as recentes ações das agências nacionais de fomento à Ciência, Tecnologia e Inovação (CT&I) para sua internacionalização. Conclui-se que, não existindo um plano para a internacionalização dos periódicos científicos brasileiros, é necessário o diálogo entre os diferentes atores para alcançar uma conjuntura inclusiva, em que prevaleça o princípio da informação científica como bem público e o livre acesso à produção científica a qualquer cidadão.

It explores the process of academic internationalization of Brazilian scientific journals. Through a bibliographic review, it analyzes the scenario of the development of these publications in the last decades in Latin America, as well as the recent actions of the national agencies for the promotion of science, technology and innovation (STI) for their internationalization. It is concluded that, in the absence of a plan for the internationalization of Brazilian scientific journals, dialogue between the different actors is necessary to achieve an inclusive situation, where the principle of scientific information as a public good prevails, together with free access to scientific production for any citizen.

Explora el proceso de internacionalización académica de las revistas científicas brasileñas. Mediante la revisión bibliográfica es analizado el escenario del desarrollo de estas publicaciones en las últimas décadas en América Latina, así como las recientes acciones de las agencias nacionales de fomento a la Ciencia, Tecnología e Innovación (CT&I) para su internacionalización. Se concluye que, no existiendo un plan para a internacionalización de las revistas científicas brasileñas, es necesario el diálogo entre los diferentes actores para alcanzar una coyuntura inclusiva, donde prevalezca el principio de la información científica como bien público y el libre acceso a la producción científica a cualquier ciudadano.

A warning for Chinese academic evaluation systems: short-term bibliometric measures misjudge the value of pioneering contributions / 浙江大学学报（英文版）（B辑：生物医学和生物技术）

Publication citation-based research evaluation, even if only in support of peer review, is not everywhere, on every level, or for everyone suitable, because of differences in scientific research, patterns of research output, stages of scientific evolution, and merits-scientific or societal-of scientific results.

Design and implementation of Traditional Chinese Medicine-Paper Influence Evaluation System / 中华医学图书情报杂志

Evaluation of paper academic influence is an important component part for the scientific and technological evaluation of traditional Chinese medicine,and plays an important role in promoting the scientific and technological innovative development of traditional Chinese medicine. The Traditional Chinese Medicine-Paper Influence Evaluation System (TCM-PIES), which was thus designed according to the existing problems in scientific and technological evaluation of traditional Chinese medicine and in evaluation of papers on traditional Chinese medicine,and the characteristics of academic papers on traditional Chinese medicine by analyzing their data with information technology as its support, is applied in selection of excellent institutions and professional academic interests.

Assessment of impact of papers on clinical research in view of evidence-based medicine / 中华医学图书情报杂志

Analyzed in this paper are the methods and their operability and efficiency for assessing the impact of papers on clinical research in view of evidence-based medicine, including citation analysis based on the clinical practice guidelines and evidence-based medicine database and comparative analysis of clinical trials registry data-base, with the model for assessing the impact of papers on clinical research in view of evidence-based medicine proposed.

Papers published in PLoS One by hospitals in China / 中华医学图书情报杂志

Objective To study the reasons why PLoS One has set off an upsurge in China especially in hospitals, the academic level of papers published in PLoS One, and how to correctly judge the SCI-covered papers published by hospitals.Methods Papers published in PLoS One by hospitals in China were retrieved.The number of papers published in PLoS One by hospitals in China, the institutions that published the papers in PLoS One, and the num-ber of fund-supported papers were analyzed.Results A total of 9739 papers were published in PLoS One by hospitals in China from 2007 to October 2015, with an average cited frequency of 5.29.The majority of authors who published the papers were from affiliated hospitals of scientific research institutions and teaching hospitals of colleges and uni-versities.Of the 9739 papers, 87.78%were supported by funds from different foundations.Conclusion Nothing is strike about the academic level of papers published in PLoS One by hospitals in China with their average cited fre-quency lower than that (8.14) in our country.The SCI-covered papers published by hospitals should not be con-sidered as the only criterion in assessing the performances of staff in hospitals.

Evaluation methods of individual technology maturity based on SCI-covered papers and patent data / 中华医学图书情报杂志

Objective To establish the evaluation methods of individual technology maturity based on SCI-covered papers and patent data using Gartner's Hype Cycle.Methods The SCI-covered papers and patent data were ana-lyzed by nonlinear regression analysis in combination with traditional X-radiography and photo-acoustic tomo-graphy, and represented as the bell-shaped curve and S-shaped curve for judging the technology maturity.Results The individual technology maturity was consistent with the qualitative review of experts.Conclusion The individual technology described in SCI-covered papers and patent data can be used in primary evaluation of its maturity.

Avaliação acadêmica, ideologia e poder / Evaluation, ideology and power / Évaluation académique, idéologie et pouvoir / Evaluación académica, ideología y poder

O artigo discute a avaliação acadêmica no contexto caracterizado pelo produtivismo. Como introdução, analisa o episódio da lista dos improdutivos, ocorrido em 1988 na USP, procurando apontar algumas tendências do debate sobre avaliação à época. Em seguida, apresenta, em linhas gerais, ideias que constituem a ideologia produtivista e examina seus desdobramentos na construção de um sistema nacional de avaliação no Brasil. Por último, considera os efeitos desse sistema no trabalho acadêmico, tomando como referência o lugar das exigências de publicação no processo de avaliação.

The article discusses the academic evaluation in the context characterized by high productivity. As an introduction, examines the episode of the unproductive list, which ocurred at USP in 1988, trying to point out some trends of the debate on evaluation at the time. It then presents, in general, ideas that constitute the productivist ideology and examines its implications in the construction of a national evaluation system in Brazil. Finally, consider the effects of this system in academic work, taking as reference publication requirements in the evaluation process.

Cet article traite de l’évaluation académique dans le contexte caractérisé par le productivisme. Dans l’introduction, on analyse l’épisode de la liste des improductifs, qui s’est tenu à l’Université de São Paulo en 1988, en essayant de souligner quelques tendances du débat sur l’évaluation dans l’époque. Ensuite, on présente, en général, des idées qui constituent l’idéologie productiviste et on examine ses implications dans la construction d’un système national d’évaluation au Brésil. Pour finir, on considère les effets de ce système dans le travail académique, en prenant pour référence le lieu des exigences de publication dans le processus d’évaluation.

El artículo discute la evaluación académica en el contexto caracterizado por el productivismo. Como introducción, analiza el episodio de la lista de los improductivos, ocurrido en 1988 en la USP, buscando apuntar algunas tendencias del debate sobre evaluación en la época. Enseguida, en líneas generales, presenta las ideas que constituyen la ideología productivista, y examina sus consecuencias en la construcción de un sistema nacional de evaluación en el Brasil. Por último, considera los efectos de este sistema en el trabajo académico, tomando por referencia el lugar de las exigencias de publicación en el proceso de evaluación.

Avaliação entre 'pares' na ciência e na academia: aspectos clandestinos de um julgamento nem sempre científico, acadêmico ou 'de avaliação' / Peer reviews in science and academy: aspects of a clandestine evaluation not always scientific, academic or assessment / L’évaluation entre 'paires' dans un contexte scientifique et universitaire: aspects d’un essai clandestin pas toujours scientifique, universitaire ou 'd’évaluation' / Evaluación entre pares en la ciencia y en el academia: aspectos de un juicio clandestino no siempre científico, académico o 'de evaluación'

A avaliação do trabalho acadêmico não pode ser reduzida apenas a medidas. Menos ainda reduzida a medidas de alguns aspectos. Há, porém, uma extensa “naturalização” de procedimentos que não são orientados por todos os aspectos que constituem essa “avaliação”. Um dos aspectos dessa “naturalização” tem sido a lenta e sutil substituição do debate e da crítica aos trabalhos acadêmicos pela sua simples exibição, apresentação ou publicação com exames mais burocráticos do que acadêmicos. As “avaliações entre pares” são geralmente exigência ou procedimento feito com problemas ainda não suficientemente resolvidos. Eles incluem o anonimato do avaliador com muitos “desvios” de uma avaliação acadêmica para uma avaliação política, ideológica ou pessoal. O debate, dessa forma, fica facilmente distorcido e as preferências do examinador (teóricas, ideológicas, políticas etc.) tendem a predominar e até serem perigosamente eliminatórias de trabalhos inovadores ou de uma corrente de contribuições diferente ou não popular no meio científico.

The assessment of academic work cannot be reduced to the measures. But there is an extensive “naturalization” of procedures that are not driven every respect constituting this “evaluation”. One aspect of this “naturalization has been slow and subtle substitution of debate and criticism of academic studies for its simple display, publication or presentation with examination more administrative than academic. The “peer reviews” has been a requirement with problems. They include the anonymity of the appraiser and it allows many “deviations” for an assessment of political, ideological or even personal. The tendency toward hegemony of groups is one of the problems. The recent proliferation of academic societies (or scientific), academic or professional journals, the publication requirements (number of titles) as a criterion for contests, promotions, financial aid or scholarships has increased the bureaucracy to administer it with a possible prejudice to the existing distortions to the development of Science.

L’évaluation du travail universitaire ne se réduit pas seulement aux mesures. Un aspect de cette évaluation est la substitution lente et subtile du débat et la critique des études universitaires pour son affichage, publication ou présentation simple. Les évaluations par les pairs ont divers problèmes. Ils comprennent l’anonymat de l’évaluateur et il permet une évaluation politique, idéologique ou même personnel. Le débat devient ainsi facilement faux et les préférences théorique, idéologique, politique etc. tendent à prédominer et à être dangereusement contraire aux oeuvres qui sont innovateurs ou qui ne font part d´un flux de contributions connue ou populaire au milieu scientifique. L´hégémonie des groupes est l’un des problèmes. La prolifération des sociétés scientifiques, des revues académiques, l’obligation de publication en tant que critère pour les concours, promotions, aide financière, bourses etc. a augmenté la bureaucratie et distorsions au développement scientifique.

La evaluación del trabajo académico no puede reducirse a medidas. Un aspecto de esta evaluación ha sido la sustitución del debate y de la crítica por su exhibición, simple publicación o presentación con una especie de examen más administrativo que académico. Las “revisiones por pares” han sido un requisito o procedimiento que se realiza con problemas. Las “evaluaciones” incluyen el anonimato del evaluador y permiten una evaluación política, ideológica o incluso personal. Las preferencias teóricas, ideológicas, políticas, etc. tienden a predominar. La hegemonía de los grupos es uno de los problemas. La reciente proliferación de sociedades científicas, revistas académicas, requisitos de publicación (cantidad) como criterio para concursos, promociones, ayuda financiera, becas, etc. ha aumentado la burocracia e contiene distorsiones que pueden llevar a un perjuicio posible por el desarrollo de la Ciencia.

Measuring scientists’ performance: a view from organismal biologist / Midiendo el desempeño de los científicos: un punto de vista de biólogos organísmicos / Medindo desempeenho dos cientistas: um ponto de vista de biólogos organísmioss

Increasingly, academic evaluations quantify performance in science by giving higher rank to scientists (as well as journals and institutions) who publish more articles and have more citations. In Mexico, for example, a centralized federal agency uses such bibliometric statistics for evaluating the performance of all Mexican scientists. In this article we caution against using this form of evaluation as an almost exclusive tool of measuring and comparing scientists’ performance. We argue that from an economic viewpoint, maximizing the number of journal articles and their citations does not necessarily correspond to the preferences and needs of society. The traditional peer review process is much better suited for that purpose, and we propose "rule-based peer review" for evaluating a large number of scientists.

En la ciencia hay una fuerte tendencia global de cuantificar el desempeño de los científicos (así como a las revistas e instituciones), dando mayor jerarquía a aquellos científicos que publican más artículos y son más citados. En México, por ejemplo, una institución federal centralizada usa tales estadísticas bibliométricas para evaluar el desempeño de todos los científicos del país. En este artículo advertimos sobre los inconvenientes de esta forma de evaluación como una herramienta casi única para medir y comparar el desempeño de los científicos. Argumentamos que, desde un punto de vista económico, la maximización del número de artículos científicos y de la frecuencia de sus citas no necesariamente corresponde a las preferencias y necesidades de la sociedad en general. El proceso tradicional de arbitraje por pares es más adecuado para este propósito, y proponemos el "arbitraje por pares basado en reglas" para evaluar a un número alto de científicos.

Há uma forte tendência global para avaliações acadêmicas que quantifiquem o desempenho nas ciências através de ranquear os cientistas (assim como revistas e instituições) que publicam mais artigos e têm mais citações. No México, por exemplo, um órgão centralizado do governo utiliza tais estatísticas bibliomêtricas para avaliar o desempenho de todos os cientistas mexicanos. No presente artigo, chamamos atenção ao uso desta forma de avaliação como ferramenta quase que exclusiva para medir e comparar o desempenho dos cientistas. Argumentamos de um ponto de vista econômico que maximizar o número de artigos e as suas citações não corresponde necessariamente às preferências e necessidades da sociedade. O processo tradicional de avaliação pelos pares é mais apropriado para esta finalidade, e propomos um sistema baseado em "avaliação pelos pares seguindo regras", que podem avaliar um grande numéro de cientistas.

Analysis on Applying H -index to Evaluate the Quality of Academic Journals / 医学信息学杂志

Applying H-index combined with other evaluation index of qualitative and quantitative evaluation for seientifie research ability, levels of researchers as well as academie journals, is becoming inereasingly concerned and will gradually be applied. The paper discusses the connotation, extension, feasibility, limitations on H-index and further analyzes the applicability of using H-index to evaluate the quality of academic journals.