Стерлигов И. Компьютерные науки в мире и России: анализ через топовые конференции

Наукометрический центр НИУ ВШЭ, 2022

Конференции уровня Flagship по рейтингу CORE Conference Ranking – это центральный канал коммуникации, накопления и распределения престижа в CS. Таких конференций около 60. Они составляют только восемь процентов от всех конференций по рейтингу CORE. Рассматривается промежуток времени: 2016-2020 гг.

Компьютерные науки существенно отличаются от традиционных естественных наук по своему устройству и организации научной коммуникации. Ключевых особенностей две.

1. В CS из-за близости фундаментальных и прикладных наук беспрецедентно велика роль коммерческих компаний, причем речь идет именно об их вкладе в общедоступные научные публикации, а не только патенты. R&D-подразделения крупнейших IT-компаний не просто соревнуются с вузами, но уже обгоняют их, привлекая лучшие кадры. В таких масштабах подобного нет ни в одной другой крупной области науки.

США в этом вопросе лидируют. Роль Китая непрерывно растет. В 2016 г. на США и Китай приходилось 62% всех публикаций на топовых конференциях, в 2020 – уже 68%. У американских компаний есть исследовательские центры в Китае, а у китайских – в США, хотя и в меньшей степени. Среди публикаций США пока еще существенно больше сверхвысокоцитируемых: из 81 публикации с числом цитирований больше 1000 на США приходится 57, на Китай – 11 (из них 6 совместно с США), на публикации без участия этих стран – 19.

Число публикаций за последние пять лет имеет следующий порядок: США – 28 000, Китай – 12 500, Англия – 5 000, Германия – 4 500, Индия – 1000, Россия – 250.

Число публикаций по компаниям за последние пять лет: Microsoft – 2551, Alphabet (Google, DeepMind и другие) – 2266, Carnegie-Mellon – 2100, Tsinghua University – 1890, MIT – 1590 (6 место), Stanford University – 1451 (восьмое место), IBM – 1091 (11 место).

Компания Microsoft гораздо активнее сотрудничает с китайскими вузами и компаниями, чем Google, что может объясняться наличием у нее гораздо более крупного исследовательского центра в этой стране. Google, напротив, сотрудничает в основном с Microsoft и американскими вузами.

Естественно, что в рейтинге первых 100 организаций мира по рассматриваемому показателю академических организаций больше, чем компаний, но и последние, кроме перечисленных выше, весьма активно публикуются в материалах конференций ранга A*: Facebook – 796 (21 место), Tencent – 723 (23 место), Alibaba – 608 (33 место), Huawei – 349 (65), Amazon – 340 (72). Единственная корпорация из великих, которая все секретит – Apple. По каким-то причинам в указанном списке отсутствует компания Open AI .

Россия: ВШЭ – 89, Сколтех – 72, Яндекс – 59, МФТИ – 38, МГУ ­– 19, Институт Стеклова – 14, Иннополис – 12, ИТМО – 10, СПбГУ – 7. Цитируемость публикаций России пока существенно отстает от среднемировой за каждый из пяти лет наблюдений. Необходимо отметить, что авторы из разных организаций Москвы часто одни и те же.

На ряде крупных конференций докладов из России нет вовсе: например, Conference on Human Factors in Computing Systems (CHI), огромное число докладов от представителей 77 стран, включая Намибию, Сьерра-Леоне и Коста Рику. Для большинства организаций России большую роль играют иностранные соавторы. Число высокоцитируемых статей с российским участием можно пересчитать по пальцам. Поэтому можно сделать вывод, что в целом влияние публикаций российских ученых на мировую повестку и развитие CS, выраженное в таких статьях, практически отсутствует.

В соавторстве с учеными Китая у российских ученых только четыре работы. В целом процент работ с иностранными соавторами за исследованное пятилетие снижается.

Нас существенно опережают не только топовые вузы, но и вузы с которыми мы сотрудничаем, например Aalto c 273 публикациями.

Число публикаций на топовых конференции 2020 и 2021 гг.:

По странам: США – 3253, Китай – 3086, Россия – 54.

По организациям: Google – 409, Tsinghua University Tsinghua University – 385. В следующих 18 организациях 10 из Китая!

Россия: ВШЭ – 25, Сколтех – 21, Яндекс – 13, МФТИ – 13, Институт ИИ – 7. Еще примеры: ИТМО – 2, Сбербанк – 2, JetBrains – 1.

2. Как отмечено, выше, основным каналом публикаций в CS служат конференции, особенно топовые. Доминирование конференций возникло исторически и видимо связано с быстротой развития научной области, диктующей примат такого канала в сравнении с журнальным. Постепенно среди конференций выделились ведущие, публикации на которых набирают тысячи цитирований, а выступление на них стало ключевым элементом приобретения символического капитала и построения репутации в CS. Фактически, представленность на ведущих конференциях в CS означает проведение исследований мирового уровня. Приглашенный доклад на такой конференции является большим профессиональным достижением, тоже касается включения в программный комитет конференции. На таких конференциях обычно гораздо больше рукописей отвергается, чем принимается, но и принятых рукописей бывает очень много (например, на одной из конференций AAAI было принято 1850 рукописей). CS ценит конференции, как место для публикации, более высоко, чем любая другая академическая область знаний. Анализ также показывает, что небольшое число элитных конференций по CS имеют самый высокий средний уровень цитирования их материалов среди всех видов публикаций, хотя в целом показатели цитируемости конференций не выше, чем в журналах.

Презентация от 20.11.2022 г.: https://cs.hse.ru/mirror/pubs/share/786728074.pdf). Видео от 10.12.2022 г: https://www.youtube.com/watch?v=gJys2GXCXRI.

В конце этого видео проходит обсуждение доклада по теме: «Что с этими цифрами делать?».

Директор Института проблем передачи информации РАН А.Н. Соболевский сформулировал обобщенное мнение противников наукометрической оценки эффективности работы научных работников: «Долой эти оценки! Да здравствует экспертиза, которую мы проведем, как посчитаем нужным!». Этих людей он назвал сторонниками, так называемой, содержательной экспертизы.

«Кроме огромных конференций по модным направлениям (машинное обучение, большие данные, искусственный интеллект, компьютерное зрение) с тысячами докладов, в CS есть области (программная инженерия, сложность вычислений), в которых на престижные конференции очень трудно попасть, так как туда отбирают порядка 30 докладов. При этом, естественно, что там нет огромной цитируемости, о которой сказано выше» (И.А. Ломазова, ВШЭ). Она также обратила внимание на то, что на конференцию доклады принимаются, в отличие от журнальных статей, по принципу «да-нет» – нельзя вносить правки. Кроме того, размер материалов на конференции обычно значительно меньше, чем в журналах. И то и другое для научных работ весьма специфично, так как возможность доработки статей в журналах для многих весьма комфортна.

Д.П. Ветров (ВШЭ) отметил, что на конференции можно подавать дополнительные материалы почти неограниченного объема, что позволяет повышать качество статей, принимаемых на них. Еще он сказал, что в наших работах обычно меньше соавторов, чем, например в американских, так как у нас работы в основном инкрементальные.

А.А. Наумов (ВШЭ) обратил внимание на то, что в Германии создан центр ИИ, который финансируется бессрочно, пока развитие ИИ будет актуальны. Созданные же у нас центры ИИ просуществуют три года, а что дальше? Например, в рамках Москвы можно было создать такой центр, тем более что сегодня в столице в разных организациях, как отмечено выше, работают одни и те же люди.

Лидерство в публикациях не проходит зря для практики. Так очень важны Open Source-продукты. Например, нашумевший чат-бот ChatGPT осенью 2021 г. запустила компания OpenAI. Этот чат-бот использует технологии так называемого генеративного ИИ – метод машинного обучения, при котором нейросеть изучает массив данных, например, фотографии, видео или текст на определённую тему, и после этого использует полученную информацию для создания («генерирования») аналогичного контента.

Приведем пример использования чат-бота. Часть выступления премьера Киргизии А. Жапарова на форуме Digital Almaty в Казахстане была сгенерирована с его помощью. Вот что по этому поводу сказал премьер: «По прогнозам аналитиков, смарт-машины, запрограммированные рассуждать и думать, как человек, в ближайшем будущем приведут к революции в области образования, здравоохранения и во многих других. Да что там говорить, мое сегодняшнее выступление было частично сгенерировано с помощью этого чат-бота» (https://t.me/drussia/20658).

А началась история этого продукта в 2019 г., когда Microsoft инвестировала в OpenAI один млрд. долларов (!). Кроме того, Microsoft также предоставляла различные формы помощи. В частности, построила суперкомпьютер для поддержки технологии OpenAI. Сотрудничество этих компаний продолжается. Новые инвестиции по ряду оценок составят 10 млрд. долларов (!). Планируется совершенствование суперкомпьютерных технологий и оказание поддержки OpenAI в сфере облачных вычислений. Коммерциализировать плоды сотрудничества смогут обе компании (https://d-russia.ru/microsoft-narastila-investicii-v-chatgpt.html). В начале 2023 г. Microsoft представила обновлённую поисковую систему Bing и интернет-браузер Edge, которые используют технологии ИИ. Использование ещё более продвинутых технологий, чем те, что применяются в чат-боте ChatGPT, призвано помочь пользователям создавать контент и находить ответы в Интернете (https://d-russia.ru/microsoft-vnedrila-ii-v-svoj-poiskovik-i-brauzer.html).

Затем на основе другого Open Source-продукта для сжатия аудиоданных и подходов, описанных в открытых публикациях, Microsoft выпустила собственный Open Source-продукт – VALL-E. Это модель искусственного интеллекта, которая на основе трехсекундного аудиообразца голоса человека может синтезировать речь и озвучить с ее помощью текст.

А тем временем чат-бот ChatGPT все больше раскручивает спираль технологической революции (https://www.kommersant.ru/doc/5824259, https://www.kommersant.ru/doc/5838658#more).

В заключение отметим, что несмотря на то, что крупнейшие IT-гиганты конкурируют друг с другом, они все равно коллаборируют, используя Open Source-продукты друг друга и информацию, полученную на научных конференциях, что позволяет им в ряде случаев создавать принципиально значимые инновации уже через два-три месяца после начала работ.

И еще. Из рассмотрения ресурса Country Activity Tracker (CAT): Artificial Intelligence (https://cat.cset.tech/) следует, что по числу статей в этой области Россия на 17 месте (32 282), а Китай на первом с диким отрывом (1 085 554). По числу цитирований дело еще хуже: мы на 34 месте (157 236) в то время, как у США, находящихся по этому показателю на первом месте – 10 920 269. Наши результаты так себе, но не было бы «Программы 5-100» и таких бы не было.

02.03.2023 г. появился «доклад Австралийского института стратегической политики (Australian Strategic Policy Institute, ASPI), подготовленный по заказу Госдепа США, в котором говорится, что Китай добилась лидерства, занимая первые и вторые места) в сфере исследований в 44 передовых и критически важных технологиях, рассмотренных институтом (https://ad-aspi.s3.ap-southeast-2.amazonaws.com/2023-03/PB69-CriticalTechTracker-tab1.jpg), обойдя США и другие страны Запада. При этом Китай в 37 технологиях поставлен институтом на первое место, в то время, как считается, что США лидирует лишь в семи областях. Китай может стать станет монополистом в сфере синтетической биологии, производства аккумуляторов для электротранспорта, технологий 5G и нанопроизводства» (https://www.kommersant.ru/doc/5861101?from=vertical_lenta).

Автор реферата: Шалыто А.А.

Опубликовано: https://vk.com/@1077823-sterligov-i-komputernye-nauki-v-mire-i-rossii-analiz-cherez