Інформаційна система рейтингу публікаційної активності науковців Харківського національного університету радіоелектроніки

Размещено на http://www.allbest.ru/

Інформаційна система рейтингу публікаційної активності науковців Харківського національного університету радіоелектроніки

Філатов Валентин Олександрович доктор технічних наук, професор, науковий керівник Центру інформаційних систем та технологій, Харківський національний університет радіоелектроніки, м. Харків

Бєлянінова Ганна Георгіївна провідний інженер відділу бенчмаркінгу та веб-менеджменту, Харківський національний університет радіоелектроніки, м. Харків

Єрохін Максим Андрійович здобувач вищої освіти, Харківський національний університет радіоелектроніки, м. Харків

Анотація

Наведено досвід розробки та впровадження інформаційної системи рейтингового оцінювання наукової продуктивності співробітників Харківського національного університету радіоелектроніки. На відміну від існуючих у багатьох провідних університетах України підходах до стимулювання публікаційної активності, заснованих безпосередньо на матеріальній винагороді за кожну публікацію у виданнях, що індексуються наукометричними базами, запропонований підхід, перш за все, пропонує інформаційну систему ранжування і оприлюднення її результатів. Запропонована система оцінювання відповідає вимогам частини 2 статті 16 Закону України "Про освіту" щодо системи забезпечення якості вищої освіти (системи внутрішнього забезпечення якості), яка передбачає щорічне оцінювання науково-педагогічних працівників закладу вищої освіти та регулярне оприлюднення результатів таких оцінювань на офіційному веб- сайті. Розроблена методика орієнтована на відзначення найбільш впливових і цитованих саме в останні роки вчених, а також молодих науковців, які мають невелику загальну кількість цитувань, але таких, що отримані нещодавно. Навпаки, ті науковці, що мають велику кількість цитувань, але вже активно не публікуються і не цитуються останнім часом, займають нижчі позиції у рейтингу. Наведено методику розрахунку рейтингу, варіанти схем бази даних та програмну реалізацію у середовищі MS Access. Проаналізовано позитивний вплив рейтингу публікаційної активності на наукометричні показники. Надано пропозиції щодо подальшого вдосконалення системи розрахунку рейтингу, щодо врахування самоцитування, відповідності тематики публікацій цілям сталого розвитку, підвищення публікаційної активності та кращого представлення наукових результатів університету у міжнародних базах цитування. інформаційний оцінювання рейтинговий

Ключові слова: наукометрія, рейтинг, імпакт-фактор, CiteScore, квартиль, база даних, відношення.

Filatov Valentin Oleksandrovych Doctor of Technical Sciences, Professor, Honored Science and Technology Figure of Ukraine, Scientific Supervisor Center of Information Systems and Technologies, Kharkiv National University of Radio Electronics, Kharkiv,

Bielianinova Hanna Heorhiyivna Lead Engineer Benchmarking and Web-management Department, Kharkiv National University of Radio Electronics, Kharkiv,

Yerokhin Maksym Andriyovych PhD student, Kharkiv National University of Radio Electronics, Kharkiv

INFORMATION SYSTEM OF PUBLICATION ACTIVITY RANKING KHARKIV NATIONAL UNIVERSITY OF RADIO ELECTRONICS

The information ranking system of scientific productivity Kharkiv National University of Radio Electronics scholars is presented. In contrast to the approaches to stimulating publication activity existing in few leading Ukrainian universities, which are based directly on a material reward for each publication in journals which indexed by citation databases, the proposed approach, first of all, offers a rankings information system and its results announcement.

The proposed evaluation system meets the requirements of Part 2 Article 16 the Law of Ukraine "On Education" regarding the quality assurance system of higher education (internal quality assurance system), which provides for annual evaluation scientific and pedagogical staff from higher education institution and regular publication the results of such evaluations on the official website. The developed methodology is aimed at stimulating the most influential and cited scientists in recent years, as well as young scientists who have a small total number of citations, but those received recently. On the contrary, those scientists who have a large number of citations, but have not been actively published and cited in recent years, occupy lower positions in the ranking. The ranking methodology, the variants of database scheme and software implementation in MS Access database management system are given. The positive impact of publication activity rankings on scientometrics indicators was analyzed. Suggestions for improving the rating calculation system and features of self-citation accounting and relation publications topic to SDG are given. Proposals for increasing publication activity and better presentation university's scientific results in citation databases have been provided.

Keywords: scientometrics, ranking, impact factor, CiteScore, journal quartile, database, relation.

Постановка проблеми. Наразі академічна спільнота лише починає свій шлях у напрямі реформування системи оцінювання наукових досліджень на основі експертних оцінок. Лейденський маніфест, CoARA - Угода про реформування оцінювання в галузі науки - закликають відмовитись від використання імпакт-фактору, індексу Хірша, кількості цитувань тощо при визначенні важливості і якості наукового доробку вчених. Має сенс їх рекомендація обережно ставитись до рейтингів і не покладатись на них при прийнятті рішень, наприклад, щодо фінансування. Але поки що наукометричний підхід до оцінювання науковців, заснований на кількісних показниках, переважає скрізь. Різноманітні рейтинги також поки що являють собою невід'ємну складову освітнього середовища. Так, національний рейтинг університетів за показниками наукометричної бази Scopus використовує кількісні показники [1].

Світові рейтинги університетів використовують саме кількісний наукометричний підхід. Показники, що оцінюють наукову, дослідницьку складову, враховують кількість публікацій, кількість цитувань, квартилі журналів, h-index, та навіть альтметрики, і є найбільш вагомими [2].

Харківський національний університет радіоелектроніки є провідним технічним університетом з високим рівнем освіти, наукових досліджень, академічної репутації, міжнародної кооперації, займає високі позиції у національних рейтингах і входить до світових рейтингів Times Higher Education (THE) World University Rankingsта QS World University Rankings.

Публікаційна активність наукових і науково-педагогічних працівників ХНУРЕ є вирішальним чинником для просування Університету у світових рейтингах, і їй приділяється пильна увага. Стимулювання публікаційної активності є актуальним питанням університетського менеджменту, для вирішення якого відділом бенчмаркінгу був запропонований такий інструмент як рейтинг науковців, побудований на кількісних наукометричних показниках [3].

Для його реалізації постало питання розробки інформаційної системи і методики стимулювання публікаційної активності учасників наукового і освітнього процесу Харківського національного університету радіоелектроніки з метою збереження і розвитку наукових шкіл, заохочення молоді до наукової діяльності, заохочення оприлюднювати результати виконання фундаментальних і прикладних науково-дослідних робіт у високоцитованих виданнях з урахуванням кращих практик провідних вітчизняних вишів.

Аналіз останніх досліджень і публікацій. Дослідження і критика університетських рейтингів та так званого "publish or perish" активно ведуться зарубіжними і українськими науковцями. Наразі репрезентації успішності наукової та освітньої діяльності вченого сприяє його відповідне позиціонування у рейтингах. Деякі аспекти формування рейтингів науковців за їх публікаційною активністю висвітлюються такими українськими вченими як С. Назаровець, С. Козьменко, Л. Остапенко, О. Костюк, Н. Пасічник та ін. Однак питання управління цим процесом поки що не систематизовані і розроблені не в повному обсязі. У світі діджиталізації освіти такі інновації як автоматизована інформаційна система адекватного рейтингового оцінювання наукової продуктивності потребують більш ґрунтовного розкриття.

Мета - створення автоматизованої підсистеми рейтингового оцінювання публікаційної активності науковців Харківського національного університету радіоелектроніки.

Виклад основного матеріалу. Реферативні бази Web of Science Core Collection та Scopus є інструментами для відстеження цитувань статей, опублікованих у наукових виданнях, із можливістю індексування посилань, зазначених у пристатейних списках публікацій, і розрахунку кількісних показників цих посилань. Завдяки цим базам світові рейтинги оцінюють продуктивність та вплив наукової праці вченого, що опосередковано свідчить про якість наукових досліджень [4].

У Харківському національному університеті радіоелектроніки розрахунок рейтингу науковців за їх публікаційною активністю здійснюється Центром інформаційних систем та технологій на підставі даних наукової бібліотеки. Наукова бібліотека проводить аналіз даних у Web of Science Core Collection та Scopus щодо кількості публікацій, афіліації авторів, актуальності їх профілів, імпакт-фактору видання, кількості цитувань та передає вихідні дані до Центру інформаційних систем та технологій.

Центр інформаційних систем та технологій складає рейтинг публікаційної активності, надає результати до ректорату для прийняття подальших управлінських рішень та оприлюднює їх на офіційному сайті ХНУРЕ [5].

На першому етапі створення системи для розрахунку рейтингу запропоновано враховувати кількість статей, проіндексованих у Scopus та Web of Science Core Collection за попередній рік; кількість співавторів кожної статті; імпакт-фактор видання за даними Web of Science або CiteScore за даними Scopus; кількість цитувань автора: загальну і за рік.

Коефіцієнт публікаційної активності автора К_а визначається за формулою:

де: IF - імпакт-фактор видання за даними Web of Science або CiteScore за даними Scopus;

N_a - кількість співавторів публікації;

С_рік - кількість цитат автора за рік;

X С - загальна кількість цитат автора.

Програмна реалізація. Для вирішення поставленого завдання обрано середу розробки Microsoft Access. Microsoft Access належить до реляційних систем управлянні базами даних (СУБД) і входить в офісний пакет. Перевагою Access є можливість створювати власну базу даних та розробляти додатки за допомогою простого графічного інтерфейсу користувача. На відміну від інших настільних СУБД, Access зберігає всі дані, організовані у таблиці - відношення, в одному файлі. MS Access має достатньо широкий спектр функцій, включаючи зв'язані запити, сортування по різних полях, можливості по імпорту та експорту даних в різні формати, від таблиць Excel і текстових файлів, до практично будь-якої серверної СУБД.

В Access можливе створення зв'язків між таблицями, що дозволяє спільно використовувати дані з різних таблиць. При цьому для користувача вони будуть представлятися однією таблицею.

Перший варіант схеми бази даних системи рейтингового оцінювання представлено на рис. 1.

Рис. 1. Схема бази даних підсистеми рейтингового оцінювання

Варіант схеми реляційної бази даних може бути рекомендований для випадку, коли автори публікують свої статті у різних виданнях та подвійний складовий ключ у відношенні ТПублікації є технологією підтримки обмежень цілісності: одна стаття автора в одному номері журналу чи видання. Такий підхід дозволяє ефективно враховувати кількісні показники авторів як у сумарному вимірі публікаційної активності, так і за типами видань.

У подальшому при застосуванні запропонованої методики (1) були внесені зміни відповідно до поставлених завдань. Так, було застосовано поправочні коефіцієнти для стимулювання вчених публікуватися у найбільш впливових виданнях.

Для публікацій у високорейтингових виданнях застосовано такі коефіцієнти:

3 - стаття опублікована у журналі, що входить до списку NatureIndex;

2 - стаття опублікована у журналі, що належить до квартилю Q1;

1,5 - стаття опублікована у журналі, що належить до квартилю Q2 [6].

Якщо журнал має кілька предметних областей з різними значеннями квартилей по кожній області, то поправочний коефіцієнт приймається за вищим квартилем.

Для вирішення поставлених задач створено такі відношення реляційної бази даних:

Статті 2022 (Код_Співробітника, Номер, Співавторів, Impact-factor, C-21, C-all, KR, Q1,Q2,SK)

ДовідникКафедри (Код_Кафедри, Кафедра, Факультет)

Довідник Факультети (Код_Факультету, Факультет)

ДовідникПосади (Код_Посади, Посада)

ДовідникСпівробітники (Код_Співробітника, Прізвище, Код_Кафедри, Код_Посади)

Запропоновані зміни знайшли відображення у схемі бази даних (рис. 2).

Рис. 2. Удосконалена схема бази даних системи рейтингового оцінювання

Для обчислення сумарного індексу публікаційної активності авторів за всіма публікаціями виконується такий SQL-запит:

SELECT [Розрахунок індекса]. Факультет, [Розрахунок індекса]. КодКафедри, [Розрахунок індекса]. КодПосади, [Розрахунок індекса]. КодСпіробітника, Sum ([Розрахунок індекса]. [IN]) AS [Sum-IN]

FROM [Розрахунок індекса]

GROUP BY [Розрахунок індекса]. Факультет, [Розрахунок індекса]. Код Кафедри, [Розрахунок індекса]. КодПосади, [Розрахунок індекса]. Код_Спіробітника

ORDER BY Sum([Розрахунок індекса].[Ш]) DESC;

Запропонований підхід на основі реляційної моделі та схеми даних у третій нормальній формі дозволяє виконати глибокий інтелектуальний аналіз групових властивостей даних.

Для встановлення рейтингу факультетів виконується запит виду: SELECT [Розрахунок сумарний]. Факультет, Sum ([Розрахунок сумарний]. [Sum-IN]) AS [Sum-Sum-IN]

FROM [Розрахунок сумарний]

GROUP BY [Розрахунок сумарний]. Факультет ORDER BY Sum([Розрахунок сумарний]. [Sum-IN]) DESC;

Головна форма бази даних рейтингу публікаційної активності наведена на рис. 3.

Рис. 3. Головна форма бази даних системи рейтингового оцінювання

Аналіз і обговорення. Упродовж застосування інформаційної системи рейтингового оцінювання були внесені зміни до методики розрахунку відповідно до пропозицій комісії з провідних науковців університету, створеної для удосконалення і подальшого розвитку системи. Так, було введено корегуючи коефіцієнти для високоцитованих видань з метою входження ХНУРЕ до рейтингу NatureIndex. Також було запропоновано враховувати більше видів публікацій, що індексуються, при складанні рейтингу.

Загальна кількість публікацій науковців ХНУРЕ, проіндексованих у наукометричній базі Scopus, у 2014-2019 рр. наведена на рис. 4. Кількість публікацій науковців ХНУРЕ у виданнях першого Q1 та другого Q2 квартилів у 2012-2020 рр. наведена на рис 5.

Рис. 4. Загальна кількість публікацій

Рис. 5. Кількість публікацій Q1-Q2

У зв'язку з появою світових рейтингів, що враховують внесок університетів у досягнення 17-ти Цілей сталого розвитку ООН, постало питання, яким чином відобразити це у рейтингу публікаційної активності [7]. Компанія Elsevier почала поставляти рейтингу впливу Times Higher Education Impact University Rankings дані щодо публікацій за 17-ма Цілями сталого розвитку, що наразі потребує відповідних змін і вдосконалення системи. Рейтинг університетів QS World University Rankings при обчисленні показників Citations per Faculty, Citations per Paper та h-index відкидає кількість самоцитувань. Тому у майбутньому доцільно внести відповідні зміни щодо обчислення самоцитувань при розрахунку рейтингу.

Звісно, під час війни усі рейтинги відійшли на другий план, але, не зважаючи на всі складнощі воєнного стану, адміністрацією університету було прийнято рішення не відмовлятися від запроваджених інновацій і рейтинг публікаційної активності розраховано.

Висновки

У результаті запровадження рейтингу публікаційної активності науковців Харківського національного університету радіоелектроніки було досягнуто стабільне зростання кількості публікацій. З впевненістю можна сказати, що було нівельовано руйнівний вплив пандемії і карантинних обмежень. Так, кількість науковців у рейтингу 2020 року склала 73 особи, у рейтингу 2022 року - 109 осіб. Також зросла кількість публікацій у виданнях першого та другого квартилів. Оприлюднення результатів рейтингу, розповсюдження кращих практик вибору видання, здорова атмосфера конкуренції, а головне, преміювання за результатами рейтингу створили передумови для покращення наукометричних показників.

Література

1. Рейтинг університетів України за показниками Scopus 2022 року. Центр міжнародних проектів "Євроосвіта". URL: http://www.euroosvita.net/ index.php/?category=1&id=7401 (дата звернення 20.01.2023).

2. Козьменко С., Остапенко Л. Публікаційна активність як об'єкт оцінювання діяльності закладів вищої освіти і наукових установ (огляд нормативно-законодавчої бази України). JIC Index. 2019. URL: https://jicindex.com/news/news/42-174

3. Бєлянінова Г.Г. Рейтинги як сучасний інструмент моніторингу діяльності Харківського національного університету радіоелектроніки / Г.Г. Бєлянінова, В.О. Філатов. // XXIX Міжн. наук.-практ. конф. "Сучасні аспекти модернізації науки: стан, проблеми, тенденції розвитку". - Тепліце. - 2023. - С. 376-381.

4. Козьменко С.М. Науковець публікується, університет рейтингується. Портал Оsvita.ua, 2019. URL: https://osvita.ua/vnz/65702

5. Рейтинг публікаційної активності ХНУРЕ, Харків, 2022. URL: https://nure.ua/olimpiadi-konkursi/rejting-publikacijnoi-aktivnosti (дата звернення: 20.01.2023).

6. Назаровець С. Квартильний підхід до проблеми стимулювання росту наукової продуктивності в університетах України / Сергій Назаровець // Бібліотечний форум: історія, теорія і практика. - 2016. - № 2. - С. 10-12.

7. Особливості досягнення Цілей сталого розвитку у профільних закладах вищої освіти на прикладі Харківського національного університету радіоелектроніки / Г.Г. Бєлянінова, О.М. Драз, В.М. Ткачов, Л.Е. Чала. // Proceedings of the I International Scientific and Theoretical Conference (Vol. 3), December 3, 2021. Berlin, Germany: European Scientific Platform. - C. 29-31.

8. References:

9. Rejting umversitetiv Ukrami za pokaznikami Scopus 2022 roku. Centr mіzhnarodnih proektiv "Gvroosvha" [Ranking of Ukrainian universities according to Scopus indicators in 2022. Center for international projects "Euroeducation"]. www.euroosvita.net Retrieved from http://www.euroosvita.net/ index.php/?category=1&id=7401 [in Ukrainian].

10. Koz'menko, S., Ostapenko, L. (2019). Pubhkadjna aktivrnsf jak ob^kt odnjuvannja dyaTnosti zakladN vishhoi osvhi і naukovih ustanov (ogljad normativno-zakonodavchoi bazi Ukrami) JIC Index. 2019 [Publishing activity as an object of evaluation of the activity of higher education institutions and scientific institutions (review of the regulatory and legislative framework of Ukraine). JIC Index]. jicindex.com Retrieved from https://jicindex.com/news/news/42-174 [in Ukrainian].

11. Bєljanіnova, G.G. (2023). Rejtingi jak suchasnij mstrument momtoringu dyal'nosti HarkAs'kogo nadonal'nogo umversitetu radіoelektronіki [Ratings as a modern tool for monitoring the activities of the Kharkiv National University of Radio Electronics]. Proceedings from 29: XXIX Mizhnarodna naukovo-praktychna konferentsiia " Suchasni aspekti modernizaci'i nauki: stan, problemi, tendenci'i rozvitku " - The Twenty Ninth nternational Scientific and Practical Conference "Marketing of Innovations and Innovations in Marketing". (pp. 376-381). Kiev: Vidavnicha Grupa "Naukovі perspektivi" [in Ukrainian].

12. Koz'menko, S.M. (2019). Naukovec' pubhk^t'sja, umversitet rejting^t'sja. Portal Osvita.ua [The scientist is published, the university is ranked. Portal Osvita.ua, 2019]. osvita.ua Retrieved from https://osvita.ua/vnz/65702 [in Ukrainian].

13. Rejting pubHkadjno'i aktivnosti HNURE [Rating of publication activity of KhNURE]. nure.ua Retrieved from https://nure.ua/olimpiadi-konkursi/rejting-publikacijnoi-aktivnosti [in Ukrainian].

14. Nazarovec', S. (2016). Kvartil'nij pMhM do problemi stimuljuvannja rostu naukovoi produktivnosti v umversitetah Ukrami [A quartile approach to the problem of stimulating the growth of scientific productivity in universities of Ukraine]. Bibliotechnijforum: istorija, teorija і praktika - Bibliotechnij forum: istorija, teorija i praktika, 2, 10-12 [in Ukrainian].

15. Bєljanіnova, G. G., Draz, O. M., Tkachov, V. M., Chala, L. E. (2021). Osoblivosti dosjagnennja Cdej stalogo rozvitku u profll'nih zakladah vishhoi osvhi na prikladі HarkAs'kogo nadonal'nogo umversitetu radіoelektronіki [Peculiarities of achieving the Sustainable Development Goals in specialized institutions of higher education on the example of the Kharkiv National University of Radio Electronics]. Proceedings from I International Scientific and Theoretical Conference. (pp. 29-31). Berlin, Germany: European Scientific Platform [in Ukrainian].

Размещено на Allbest.ru