Manipular Google Scholar Citations y Google Scholar Metrics: simple, sencillo y tentador

Abstract

La aparición de Google Scholar Citations y Google Scholar Metrics puede suponer una auténtica revolución en la mundo de la evaluación científica porque pone al alcance de todos los científicos herramientas para la medición bibliométrica. Con el fin de alertar a la comunidad científica de la facilidad que existe para manipular los datos e indicadores bibliométricos que proporcionan estos productos de Google, se ha realizado un experimento consistente en la manipulación del impacto de los miembros de un grupo de investigación y de sus trabajos tal como son reflejados en los perfiles de autores que ofrece Google Citations así como del número de citas e índice h de una muestra de revistas. Para ello se crean seis documentos producidos por un autor falso que emiten citas a todos los trabajos producidos por los tres autores y se suben a la página personal de un investigador de la Universidad de Granada. El resultado del experimento ha supuesto un incremento de 774 citas en los 129 trabajos producidos (con 6 citas acumuladas a cada trabajo) que revertido un incremento del índice h de los autores y de las revistas en los que se publicación los trabajos cientados. Se analiza el efecto perverso que este tipo de prácticas puede ocasionar en Google Citations y Google Scholar Metrics. Finalmente se ofrecen unas reflexiones finales sobre los efectos que pueden tener este tipo de prácticas y la falta de sistemas de control que ofrecen estos productos.

The launch of Google Scholar Citations and Google Scholar Metrics may provoke a revolution in the research evaluation field as it places within every researcher’s reach tools that allow bibliometric measuring. In order to alert the research community over how easily one can manipulate the data and bibliometric indicators offered by Google’s products we present an experiment in which we manipulate the Google Citations’ profiles of a research group through the creation of false documents that cite their documents, and consequently, the journals in which they have published modifying their H-index. For this purpose we created six documents authored by a faked author and we uploaded them to a researcher’s personal website under the University of Granada’s domain. The result of the experiment meant an increase of 774 citations in 129 papers (six citations per paper) increasing the authors and journals' H-index. We analyse the malicious effect this type of practices can cause to Google Scholar Citations and Google Scholar Metrics. Finally, we conclude with several deliberations over the effects these malpractices may have and the lack of control tools these tools offer.