<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="en"><front><journal-meta><journal-id journal-id-type="publisher-id">scieditor</journal-id><journal-title-group><journal-title xml:lang="en">Science Editor and Publisher</journal-title><trans-title-group xml:lang="ru"><trans-title>Научный редактор и издатель</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2542-0267</issn><issn pub-type="epub">2541-8122</issn><publisher><publisher-name>АНРИ</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.24069/2542-0267-2019-1-2-12-20</article-id><article-id custom-type="elpub" pub-id-type="custom">scieditor-93</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>Discussion papers</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>Дискуссионные статьи</subject></subj-group></article-categories><title-group><article-title>The power of bibliometric illusions over the lazy, the profanation of fruitful ideas and the curse of parabibliometric evaluation of science</article-title><trans-title-group xml:lang="ru"><trans-title>Власть библиометрических иллюзий над ленивыми, профанация плодотворных идей и проклятье «парабиблиометрической» оценки науки</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-0387-4515</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Лазарев</surname><given-names>В. С.</given-names></name><name name-style="western" xml:lang="en"><surname>Lazarev</surname><given-names>V. S.</given-names></name></name-alternatives><bio xml:lang="ru"><p>ведущий библиограф Научной библиотеки</p></bio><bio xml:lang="en"><p>Leading Bibliographer of the Scientific Library</p></bio><email xlink:type="simple">vslazarev@bntu.by</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Белорусский национальный технический университет</institution><country>Беларусь</country></aff><aff xml:lang="en"><institution>Belarusian National Technical University</institution><country>Belarus</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2019</year></pub-date><pub-date pub-type="epub"><day>07</day><month>10</month><year>2019</year></pub-date><volume>4</volume><issue>1-2</issue><fpage>12</fpage><lpage>20</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Lazarev V.S., 2019</copyright-statement><copyright-year>2019</copyright-year><copyright-holder xml:lang="ru">Лазарев В.С.</copyright-holder><copyright-holder xml:lang="en">Lazarev V.S.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://www.scieditor.ru/jour/article/view/93">https://www.scieditor.ru/jour/article/view/93</self-uri><abstract><p>I believe that perversion in modern practice of the evaluation of our scientific performance happen by fault of us, bibliometricians, too, as bibliometricians were negligent and laze about the interpretation of indicators, about conceptions (e.g., “altmetrics,” a term that is devoid of attempts to reflect the nature of the “discipline”; the use of the term “metric” instead of “indicator” as a sign of overvalued diagnostic ambitions) and about terminology (e.g., the use of the terms “value” and “quality”, “usefulness” and “influence” as full synonyms). A bureaucrat–noticing all this in his own way and going into no details – comes to believe in “simplicity”, “obviousness” and “unicity” of bibliometric “diagnostics”. The consequence is “bibliometric illusions”. E.g. 1) “everything can be measured with one number!” (The result is  Hirschmania at the level of planetary psychosis. The Hirsch index acquired the status of a sacred cow among bureaucrats and of a Procrustean bed among scientists – at the same time.); 2) “the conclusions are obvious” (E.g. if the journal is not sufficiently cited, “it is necessary to oblige its authors to give appropriate references in each article”. And if the average good article of the natural science profile has at least 10 references, then this “should be a mandatory minimum norm”. Some of the world’s journals arbitrarily intervene in the structure of citations in the articles they receive! But forcedly falsified references are neither a means of information coupling, nor a bibliometric indicator.); 3) “if the bibliometric indicators adequately reflect the quality of the scientific product, it is necessary to oblige scientists to produce not a scientific product, but the corresponding values of indicators” (Many world’s journals are now looking not for “quality articles”, but for “articles that will not lower our impact factor”. Some methodological features might be mistaken for a consequence of “specific Belarusian (Ukrainian, etc.) conditions”, which “is fraught with the fall of our impact factor.”) As a result, there occurs a profanation of bibliometrics itself. This means of evaluation (which has never claimed the exclusivity of its status!) unwittingly turns into a repressive tool with a maximum claim to the truth of the estimates. At the same time, there is no understanding that it is impossible in principle to predict the reach of a certain value of bibliometric indicators. The use of bibliometric indicators not for their intended purposes automatically makes the evaluation parabibliometric. The power of these trends resembles a curse!</p></abstract><trans-abstract xml:lang="ru"><p>Автор полагает, что извращения в современной практике оценки науки происходят, в частности, по вине библиометристов, проявивших небрежность и лень по отношению к трактовкам индикаторов, по отношению к самому понятийному аппарату и по отношению к терминологии в целом. Чиновник, все это по-своему замечающий и ни во что не вникающий, «убеждается» в «простоте», «очевидности» и «однозначности» библиометрической «диагностики». Отсюда возникают «библиометрические иллюзии», следствием которых оказываются как порочные библиометрические практики применения индикаторов не по назначению, так и библиометрические подтасовки уже на стадии оформления / редактирования / оценки подаваемых в печать статей. Многие мировые журналы ищут теперь не «качественные статьи», а «статьи, которые не понизят импакт-фактор» – безотносительно к тому, какова оценка научного качества статьи. Как результат, происходит профанация самой библиометрии. Средство оценки, никогда не претендовавшее на исключительность своего статуса, невольно превращается в репрессивный инструмент с максимальной претензией на истинность оценок. При этом отсутствует понимание, что спрогнозировать «достижение» какой-то величины библиометрических показателей в принципе невозможно. Применение библиометрических показателей не по назначению автоматически делает оценку «парабиблиометрической». Сила этих тенденций напоминает проклятье!</p></trans-abstract><kwd-group xml:lang="ru"><kwd>библиометрия</kwd><kwd>оценка эффективности научной деятельности</kwd><kwd>ошибки</kwd><kwd>упрощения</kwd><kwd>вульгаризация</kwd></kwd-group><kwd-group xml:lang="en"><kwd>bibliometrics</kwd><kwd>evaluation of scientific performance</kwd><kwd>mistakes</kwd><kwd>oversimplification</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Лазарев В. С., Николайчик В. В. Распределение информации по вопросам гематологии в научных журналах. В: Современные аспекты гематологии. Минск: Наука и техника; 1979. С. 128–133.</mixed-citation><mixed-citation xml:lang="en">Лазарев В. С., Николайчик В. В. Распределение информации по вопросам гематологии в научных журналах. В: Современные аспекты гематологии. Минск: Наука и техника; 1979. С. 128–133.</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Тютюнник В. М. Предисловие научного редактора. В: Лазарев В. С. «Цитируемость нобелевского класса» и понятия, выражающие характеристики и свойства цитируемых научных документов. Тамбов; М.; СПб.; Баку; Вена; Гамбург; Стокгольм; Буаке: Нобелистика; 2018. С. 4–6. Режим доступа: https://www.researchgate. net/publication/327574829_Nobel_class_citedness_level_and_the_notions_that_designate_characteristics_and_ properties_of_cited_scientiﬁc_documents_Citiruemost_nobelevskogo_klassa_i_ponatia_vyrazausie_harakteristiki_i_ svojstva_c [Дата обращения: 15 мая 2019 г.].</mixed-citation><mixed-citation xml:lang="en">Тютюнник В. М. Предисловие научного редактора. В: Лазарев В. С. «Цитируемость нобелевского класса» и понятия, выражающие характеристики и свойства цитируемых научных документов. Тамбов; М.; СПб.; Баку; Вена; Гамбург; Стокгольм; Буаке: Нобелистика; 2018. С. 4–6. Режим доступа: https://www.researchgate. net/publication/327574829_Nobel_class_citedness_level_and_the_notions_that_designate_characteristics_and_ properties_of_cited_scientiﬁc_documents_Citiruemost_nobelevskogo_klassa_i_ponatia_vyrazausie_harakteristiki_i_ svojstva_c [Дата обращения: 15 мая 2019 г.].</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Мотылев В. М. Проблемы количественных исследований в библиотечном деле. В: Соколов А. В. (ред.) Проблемы технического перевооружения библиотек. Л.: Ленингр. гос. ин-т культуры им. Н. К. Крупской; 1983. С. 55–69.</mixed-citation><mixed-citation xml:lang="en">Мотылев В. М. Проблемы количественных исследований в библиотечном деле. В: Соколов А. В. (ред.) Проблемы технического перевооружения библиотек. Л.: Ленингр. гос. ин-т культуры им. Н. К. Крупской; 1983. С. 55–69.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Лазарев В. С. Учет заказов на копии статей в информационной работе (отклик на статью У.И.Б. Онуигбо). Международный форум по информации и документации. 1986;11(2):40–41.</mixed-citation><mixed-citation xml:lang="en">Лазарев В. С. Учет заказов на копии статей в информационной работе (отклик на статью У.И.Б. Онуигбо). Международный форум по информации и документации. 1986;11(2):40–41.</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Лазарев В. С. Обращения читателей к научным периодическим изданиям как показатель тематической направленности изданий. В: Киселев А. А. (ред.) Методологические проблемы медицинской информатики и науковедения. М.; 1989. С. 173–186.</mixed-citation><mixed-citation xml:lang="en">Лазарев В. С. Обращения читателей к научным периодическим изданиям как показатель тематической направленности изданий. В: Киселев А. А. (ред.) Методологические проблемы медицинской информатики и науковедения. М.; 1989. С. 173–186.</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Scales P. A. Citation analysis as indicator of the use of serials: A comparison of ranked titles produced by citation counting and the use data. Journal of Documentation. 1976;32(1):17–25. DOI: 10.1108/eb0266112.</mixed-citation><mixed-citation xml:lang="en">Scales P. A. Citation analysis as indicator of the use of serials: A comparison of ranked titles produced by citation counting and the use data. Journal of Documentation. 1976;32(1):17–25. DOI: 10.1108/eb0266112.</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Dhawan S. M., Phull S. K., Jain P. Documentation notes: Selection of scientiﬁc journals: a model. Journal of Documentation. 1980;36(1):26–41. DOI: 10.1108/eb026689.</mixed-citation><mixed-citation xml:lang="en">Dhawan S. M., Phull S. K., Jain P. Documentation notes: Selection of scientiﬁc journals: a model. Journal of Documentation. 1980;36(1):26–41. DOI: 10.1108/eb026689.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Маркусова В. А., Минели Л. Э., Богоров В. Г., Либкинд А. Н. Показатель альтметрики как один из индикаторов научного влияния публикации. Вестник Российской академии наук. 2018;88(9):811–818. DOI: 10.31857/ S086958730001694-1.</mixed-citation><mixed-citation xml:lang="en">Маркусова В. А., Минели Л. Э., Богоров В. Г., Либкинд А. Н. Показатель альтметрики как один из индикаторов научного влияния публикации. Вестник Российской академии наук. 2018;88(9):811–818. DOI: 10.31857/ S086958730001694-1.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Глухов В. В., Михайлова Т. И., Михайлов О. В. «Хиршеметрия» научных учреждений Казани: позиции ФГБОУ ВПО «КНИТУ». Вестник Казанского технологического университета. 2015;(2):345–348.</mixed-citation><mixed-citation xml:lang="en">Глухов В. В., Михайлова Т. И., Михайлов О. В. «Хиршеметрия» научных учреждений Казани: позиции ФГБОУ ВПО «КНИТУ». Вестник Казанского технологического университета. 2015;(2):345–348.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Cole S., Cole J. R. Scientiﬁc output and recognition: a study in the operation of the reward system in science. American Sociological Review. 1967;32(3):377–390.</mixed-citation><mixed-citation xml:lang="en">Cole S., Cole J. R. Scientiﬁc output and recognition: a study in the operation of the reward system in science. American Sociological Review. 1967;32(3):377–390.</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Бредихин С. В., Кузнецов А. Ю., Щербакова Н. Г. Анализ цитирования в библиометрии. Новосибирск: ИВМиМГ СО РАН; НЭИКОН; 2013.</mixed-citation><mixed-citation xml:lang="en">Бредихин С. В., Кузнецов А. Ю., Щербакова Н. Г. Анализ цитирования в библиометрии. Новосибирск: ИВМиМГ СО РАН; НЭИКОН; 2013.</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Лазарев В. С. Научные документы и их упорядоченное совокупности: цитируемость, использование, ценность. Международный форум по информации. 2017;42(1):3–16.</mixed-citation><mixed-citation xml:lang="en">Лазарев В. С. Научные документы и их упорядоченное совокупности: цитируемость, использование, ценность. Международный форум по информации. 2017;42(1):3–16.</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Bradford S.C. Sources of information on speciﬁc subjects. Engineering. 1934;137(3550):85-86.</mixed-citation><mixed-citation xml:lang="en">Bradford S.C. Sources of information on speciﬁc subjects. Engineering. 1934;137(3550):85-86.</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Акоев М. А., Маркусова В. А., Москалева О. В., Писляков В. В. Руководство по наукометрии: индикаторы развития науки и технологии. Екатеринбург: Изд-во Урал. ун-та; 2014.</mixed-citation><mixed-citation xml:lang="en">Акоев М. А., Маркусова В. А., Москалева О. В., Писляков В. В. Руководство по наукометрии: индикаторы развития науки и технологии. Екатеринбург: Изд-во Урал. ун-та; 2014.</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">Лазарев В. С., Назаровец С. А., Скалабан А. В. Формирование комплекса библиометрических показателей для оценки университетов Беларуси и Украины. Наука и инновации. 2017;(6):63–67.</mixed-citation><mixed-citation xml:lang="en">Лазарев В. С., Назаровец С. А., Скалабан А. В. Формирование комплекса библиометрических показателей для оценки университетов Беларуси и Украины. Наука и инновации. 2017;(6):63–67.</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Roberts R. J. An obituary for the impact factor. Nature. 2017;546:600. DOI: 10.1038/546600e.</mixed-citation><mixed-citation xml:lang="en">Roberts R. J. An obituary for the impact factor. Nature. 2017;546:600. DOI: 10.1038/546600e.</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">Lazarev V. S., Nazarovets S. A. Don’t dismiss non-English citations. Nature. 2018;556:174. DOI: 10.1038/ d41586-018-04169-2.</mixed-citation><mixed-citation xml:lang="en">Lazarev V. S., Nazarovets S. A. Don’t dismiss non-English citations. Nature. 2018;556:174. DOI: 10.1038/ d41586-018-04169-2.</mixed-citation></citation-alternatives></ref><ref id="cit18"><label>18</label><citation-alternatives><mixed-citation xml:lang="ru">Маршакова И. В. Система связей между документами, построенная на основе ссылок: по данным Science Citation Index. Научно-техническая информация. Сер. 2. 1973;(6): 3–8.</mixed-citation><mixed-citation xml:lang="en">Маршакова И. В. Система связей между документами, построенная на основе ссылок: по данным Science Citation Index. Научно-техническая информация. Сер. 2. 1973;(6): 3–8.</mixed-citation></citation-alternatives></ref><ref id="cit19"><label>19</label><citation-alternatives><mixed-citation xml:lang="ru">Ma L., Ladisch M. Evaluation complacency or evaluation inertia? A study of evaluative metrics and research practices in Irish universities. Research Evaluation. 2019;rvz008. DOI: 10.1093/reseval/rvz008.</mixed-citation><mixed-citation xml:lang="en">Ma L., Ladisch M. Evaluation complacency or evaluation inertia? A study of evaluative metrics and research practices in Irish universities. Research Evaluation. 2019;rvz008. DOI: 10.1093/reseval/rvz008.</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
