• A
  • A
  • A
  • АБВ
  • АБВ
  • АБВ
  • A
  • A
  • A
  • A
  • A
Обычная версия сайта
  • RU
  • EN
  • Национальный исследовательский университет «Высшая школа экономики»
  • Публикации ВШЭ
  • Статьи
  • Дискриминативная лемматизация сокращений в эпоху LLM
  • RU
  • EN
Расширенный поиск
Высшая школа экономики
Национальный исследовательский университет
Приоритетные направления
  • бизнес-информатика
  • государственное и муниципальное управление
  • гуманитарные науки
  • инженерные науки
  • компьютерно-математическое
  • математика
  • менеджмент
  • право
  • социология
  • экономика
по году
  • 2027
  • 2026
  • 2025
  • 2024
  • 2023
  • 2022
  • 2021
  • 2020
  • 2019
  • 2018
  • 2017
  • 2016
  • 2015
  • 2014
  • 2013
  • 2012
  • 2011
  • 2010
  • 2009
  • 2008
  • 2007
  • 2006
  • 2005
  • 2004
  • 2003
  • 2002
  • 2001
  • 2000
  • 1999
  • 1998
  • 1997
  • 1996
  • 1995
  • 1994
  • 1993
  • 1992
  • 1991
  • 1990
  • 1989
  • 1988
  • 1987
  • 1986
  • 1985
  • 1984
  • 1983
  • 1982
  • 1981
  • 1980
  • 1979
  • 1978
  • 1977
  • 1976
  • 1975
  • 1974
  • 1973
  • 1972
  • 1971
  • 1970
  • 1969
  • 1968
  • 1967
  • 1966
  • 1965
  • 1964
  • 1963
  • 1958
  • еще
Тематика
Новости
18 ноября 2026 г.
«Наука дает мне возможность видеть красоту»
Мария Губина учится в магистратуре факультета математики НИУ ВШЭ и занимается теорией узлов. В интервью проекту «Молодые ученые Вышки» она рассказала о «числе Эрдёша», математических закономерностях вокруг нас и о том, почему ученым стоит научиться печь тортики.
17 ноября 2026 г.
Ученые НИУ ВШЭ разработали метод для обнаружения неисправностей систем охлаждения ЦОД
Исследователи НИУ ВШЭ и Уральского федерального университета разработали метод на основе искусственного интеллекта, который выявляет постепенные утечки хладагента и загрязнение теплообменников в системах охлаждения центров обработки данных. Новая модель учитывает физические связи между элементами холодильного контура, что позволяет выявлять неисправности на ранних стадиях. Результаты опубликованы в журнале IEEE Transactions on Industry Applications.
13 ноября 2026 г.
НИУ ВШЭ и ИФТТ РАН заключили соглашение о создании совместной лаборатории
Церемония подписания соглашения о создании Лаборатории экспериментальных исследований и применений новых функциональных материалов состоялась 11 ноября в здании НИУ ВШЭ на Старой Басманной улице, где расположен факультет физики. Подписи под документом поставили ректор НИУ ВШЭ Никита Анисимов и врио директора Института физики твердого тела им. Ю.А. Осипьяна (ИФТТ) РАН Ирина Ибрагимова.

 

Нашли опечатку?
Выделите её, нажмите Ctrl+Enter и отправьте нам уведомление. Спасибо за участие!

Публикации
  • Книги
  • Статьи
  • Главы в книгах
  • Препринты
  • Верификация публикаций
  • Расширенный поиск
  • Правила использования материалов
  • Наука в ВШЭ

?

Дискриминативная лемматизация сокращений в эпоху LLM

Доклады Российской академии наук. Математика, информатика, процессы управления (ранее - Доклады Академии Наук. Математика). 2025. Т. 527. С. 146–155.
Глазкова А. В., Смаль И. В., Ляшевская О. Н., Морозов Д. А.

В работе представлено исследование эффективности дискриминативных методов лемматизации сокращений в русскоязычных текстах. В отличие от генеративных подходов, дискриминативные модели осуществляют выбор оптимальной леммы из фиксированного набора вариантов, что исключает риск генерации грамматически некорректных словоформ. Впервые для русского языка проводится комплексный анализ четырех контекстно-ориентированных подходов: (1) ранжирования на основе маскированного языкового моделирования, (2) бинарной классификации, (3) многоклассовой классификации, а также (4) обучения с использованием инструкций. Особое внимание уделено случаям контекстной неоднозначности, когда одно сокращение в пределах одного текстового фрагмента соответствует разным лемам. Результаты демонстрируют, что многоклассовая классификация с дообучением предобученных моделей достигает наивысшего качества (F-мера с макроусреднением – 97.75–99.92% в зависимости от сокращения); однако в условиях ограниченного объема обучающих данных обучение с использованием инструкций и ранжирование на основе маскированного языкового моделирования показывают перспективные результаты. Кроме того, эффективность данных подходов возрастает в случаях контекстной неоднозначности. Исследование вносит вклад в развитие методов обработки русскоязычных текстов, предлагая практические рекомендации по выбору архитектур для задач лемматизации сокращений.

Научное направление: Филология и лингвистика Компьютерные науки
Язык: русский
Полный текст
DOI
Текст на другом сайте
Ключевые слова: русский языкRussian languageавтоматическая обработка естественного языкалемматизациясокращенияклассификация текстовtext classificationabbreviationslemmatization natural language processingdiscriminative methodsдискриминативные методы
Похожие публикации
«Сохрани мою речь...». Мандельштамовский альманах.
Свет, 2026.
Мандельштамовское общество в сотрудничестве с Центром цифровых архивных исследований Школы филологических наук Научно-исследователь ского университета «Высшая школа экономики» возобновляет выпуск серии традиционных Мандельштамовских альманахов «Сохрани мою речь...». Ранее серия под эгидой Мандельштамовского общества выходила в издательствах «Обновление» (1991, выпуск 1), «Книжный сад» (1994, выпуск 2) и РГГУ (2000, 2008, 2011, выпуски 3–5). Шестой выпуск посвящен ...
Добавлено: 17 ноября 2026 г.
Active learning of collinear magnetic Moment Tensor Potentials using the spin-MLIP package from soft-constrained spin-polarized DFT calculations: a case study of Fe-Pd
Burov A., Котыхов А. С., Aksyonov D. и др., Computer Physics Communications 2027 Vol. 330 Article 110458
Явный учет магнитных степеней свободы в межатомных потенциалах, построенных с помощью методов машинного обучения (магнитных MLIP), играет ключевую роль в корректном описании магнитных материалов и их свойств. Важным компонентом для обучения таких потенциалов являются спин-поляризованные расчеты в рамках теории функционала плотности (DFT), проводимые для состояний с неравновесными магнитными моментами — то есть расчеты DFT с ...
Добавлено: 17 ноября 2026 г.
Toward reliable false discovery rate control in classification problems under distribution shift
Кертес-Фаркаш А., Боревский А. О., Plos One 2026 Vol. 21 No. 11 P. 1–20
Background Domain shifts or batch effects can significantly degrade the performance of machine learning-based classifiers in software production without any warning. This can particularly be problematic in medical applications which involve human lives. The shift changes the shape of the prediction score distribution of the test samples compared to that of the training samples; hence, decision ...
Добавлено: 17 ноября 2026 г.
An Awkward Oikonym: Obscene Toponymy and Traditional Culture
Мороз А. Б., Folklore (Estonia) 2026 Vol. 101 P. 441–456
В статье рассматривается ситуация вокруг неформального, но широко известного и исторически подтвержденного ойконима, образованного от обсценного слова. Существование обсценного ойконима, с одной стороны, служит предметом своего рода гордости – как необычное явление, о котором охотно рассказывают «чужим», с другой стороны – вынуждает жителей деревни, носящей непристойное название, подчеркивать свою непричастность к семантике ойконима. Топонимические предания ...
Добавлено: 16 ноября 2026 г.
Вокруг Иосифа Бродского: неподцензурная литература 1950-х — 1970-х годов: материалы II международной конференции 28–29 мая 2025 года, Санкт-Петербург / сост. О.Л. Лейкинд. СПб.: ООО «Журнал «Звезда», 2026
Пенская Е. Н., СПб.: СПб.: ООО «Журнал «Звезда», 2026.
Сборник включает статьи авторитетных литературоведов — участников II международной научной конференции «Вокруг Иосифа Бродского: неподцензурная литература 1950-х — 1970-х годов», состоявшейся в мае 2025 года в Санкт-Петербурге. Сборник разделен на два раздела. Первый раздел — «Иосиф Бродский: биография и творчество в контексте времени» — посвящен собственно жизни и поэзии Нобелевского лауреата. Во второй раздел — ...
Добавлено: 15 ноября 2026 г.
Этнолингвистика. Ономастика. Этимология. Материалы VI Международной научной конференции, посвященной 100-летию со дня рождения А. К. Матвеева. Екатеринбург, 24–27 сентября 2026 г.
Мороз А. Б., Издательство Уральского университета, 2026.
В работах исследователей из России, стран ближнего и дальнего зарубежья рассматривается широкий спектр актуальных проблем этнолингвистики, ономастики, этимологии как общего, так и частного порядка. Особое внимание уделяется вопросам взаимодействия указанных областей языкознания — лингвокультурологическим аспектам ономастики, диалектологии и контактологии, этимологизации и семантической реконструкции нарицательных и собственных имен с опорой на этнолингвистическую информацию и др. Материалом для докладов послужили факты ...
Добавлено: 14 ноября 2026 г.
О чем говорит школьный урок? Корпусный анализ структуры урока и речи учителя как основа для педагогических продуктов
Виноградова Ю. С., Браташ В. С., Зубов В. И. и др., Вопросы образования 2026 Т. 1 № 3 С. 94–131
Цель исследования — описать структуру школьного урока и лингвистический профиль речи учителей, реализующих результативные учебные практики, на материале записей реальных занятий, проведенных в российских школах, и показать, как эти данные могут служить основой для разработки методических продуктов и инструментов профессиональной поддержки педагогов. В эмпирическую базу исследования входит корпус из 55 аудиозаписей, которые получены в 2022–2024 ...
Добавлено: 13 ноября 2026 г.
Траектории ставок как сигнал сговора: LSTM-классификация аукционов государственных закупок
Ефимов К. Д., Журнал Новой экономической ассоциации 2026 № 72 С. 105–114
В работе предлагается метод автоматического выявления картель ного поведения в электронных аукционах государственных закупок на основе анализа пол ной траектории ставок. Эмпирическая база включает 508 историй торгов за 2016–2020 гг. с электронной площадки РТС-тендер; положительный класс размечен по материалам дел ФАС России, контрольная группа сформирована из сопоставимых аукционов без зафикси рованных нарушений. Каждая сессия представлена ...
Добавлено: 13 ноября 2026 г.
Берестяные грамоты из раскопок 2024 г. II. Великий Новгород, Старая Русса, Меглецы
Гиппиус А. А., Вопросы языкознания 2026 № 6 С. 7–26
Статья содержит предварительную публикацию 14 берестяных грамот, найденных в археологическом сезоне 2024 г. в Великом Новгороде. Значительный исторический и лингвистический интерес представляет блок из семи документов второй половины XIV в., атрибутируемых писцу Фефиле, связанному с посадником Онцифором Лукиничем. Он включает, в частности, судебные записи, связанные с делом о похищении невесты, и челобитную из Заонежья с ...
Добавлено: 13 ноября 2026 г.
Model-Dependent Prompt-Component Ablation for Medical LLM Decision Support: Application to ENT Biologics Screening
Sergey N. Koltcov, Budkovaia M., Сурков А. Ю. и др., IEEE Journal of Biomedical and Health Informatics 2026 P. 1–10
Добавлено: 13 ноября 2026 г.
«Несклоняемое актантное это» в русском языке: роль синтаксического типа антецедента и информационной структуры в нестандартном оформлении местоимения
Летучий А. Б., Russian Linguistics 2026 Т. 50 Статья 17
В статье анализируется особое употребление формы именительного / винительного падежа местоимения это, иллюстрируемое примерами типа Это ты не прав и характерное прежде всего для разговорного языка (в том числе языка Интернета). В этом употреблении, с одной стороны, местоимение соответствует актанту вершины и является членом предложения, а с другой стороны, оно не принимает падежных форм, требуемых ...
Добавлено: 30 октября 2026 г.
Ветер перемен: система глаголов поля ‘менять’ в русском языке в синхронии и (микро) диахронии
Овчинникова А. В., Резникова Т. И., Рыжова Д. А. и др., Acta Linguistica Petropolitana. Труды института лингвистических исследований 2026 Т. 22 № 1 С. 68–133
В статье на типологическом фоне рассматриваются глаголы поля ‘менять’ в русском языке. Система доминантна: глагол менять(ся) покрывает большую часть фреймов; существенно расширил область употребления в последние десятилетия его дериват поменять(ся); напротив, устарел прежде доминантный переменить(ся). В то же время с дистрибутивными системами (в них фреймы покрываются разными лексемами) русскую систему сближает инвентарь приставочных дериватов корня -мен-, ...
Добавлено: 27 октября 2026 г.
Complexity of Russian Academic Texts as the Function of Syntactic Parameters.
Solovyev V., Солнышкина М. И., Ivanov V. и др., Lecture Notes in Computer Science. Computational Linguistics and Intelligent Text Processing. (Швейцария) 2023 Vol. 13396 P. 168–179
Добавлено: 22 октября 2026 г.
Classification of Russian textbooks by grade level and topic using ReaderBench
Paraschiv А., Dascalu М., Солнышкина М. И., Research Result. Theoretical and Applied Linguistics 2023 Vol. 9 No. 1
Добавлено: 22 октября 2026 г.
Text content variables as a function of comprehension: Propositional discourse analysis
Солнышкина М. И., Харькова Е. В., Эбзеева Ю. Н., Journal of Language and Education 2023 Vol. 27 No. 4
Добавлено: 22 октября 2026 г.
A BERT-Based Classification Model: The Case of Russian Fairy Tales
Solovyev V., Солнышкина М. И., Ten A. и др., Journal of Language and Education 2024 Vol. 10 No. 4 P. 98–111
Добавлено: 19 октября 2026 г.
Bert for Classification of Russian Functional Styles
Solovyev V. D., Ten A. M., Солнышкина М. И. и др., Computacion y Sistemas 2025 Vol. 29 No. 2 P. 633–641
Добавлено: 19 октября 2026 г.
Роль порядка контролера и мишени в обработке согласования по роду и числу: экспериментальное исследование на материале русского языка
Слюсарь Н. А., Антропова Д. В., В кн.: Компьютерная лингвистика и интеллектуальные технологии: По материалам ежегодной международной конференции «Диалог». Выпуск 24Issue 24.: M.: Max press, 2026. С. 590–597.
Сопоставление различных грамматических категорий при обработке согласования – одно из актуальных направлений психолингвистических исследований. Результаты предыдущих исследований, в которых сравнивались ошибки согласования по роду и числу при обработке, были противоречивы: в части исследований ошибки по роду вызывали больший эффект, в то время как в других работах более выраженные эффекты возникали в ответ на ошибки по ...
Добавлено: 28 сентября 2026 г.
Comparing Large Language Models for Aspect-Based Sentiment Analysis of Student Experience from Russian-Language Online Course Reviews
Kalicheva V., Кирина М. А., , in: Speech and Computer. 28th International Conference, SPECOM 2026, Ohrid, North Macedonia, September 17–18, 2026, Proceedings, Part I.: Springer, 2026. P. 320–337.
Добавлено: 20 сентября 2026 г.
Automatic Classification vs. Human Annotation of Emotions in Everyday Spoken Russian: A Case Study of the ESC Corpus
Кирина М. А., Чеповецкая С. В., , in: Speech and Computer. 28th International Conference, SPECOM 2026, Ohrid, North Macedonia, September 17–18, 2026, Proceedings, Part II. LNCS, volume 16935.: Springer, 2026. P. 58–75.
Добавлено: 20 сентября 2026 г.
Automated Event Logs Generation Based on Unstructured Internet Sources for Process Analysis Tasks
Voronova K. D., Лядова Л. Н., Proceedings of the Institute for System Programming of the RAS 2026 Vol. 38 No. 4 P. 153–170
В статье представлен подход к автоматизированному структурированию информации о событиях, извлекаемой из неструктурированных текстовых Интернет-источников, для задач углублённого анализа процессов. Во многих практических случаях сведения о событиях, происходящих в рамках различных процессов, представлены не в виде готовых журналов событий, а распределены по новостным публикациям, отчётам и другим текстовым материалам. Это существенно усложняет применение средств анализа ...
Добавлено: 14 сентября 2026 г.
Constructions Built of Constructions: Intensified Comparatives
Zhukova V., Ekaterina Rakhilina, Ахапкина Я. Э., Zeitschrift fur Slawistik 2026 Vol. 71 No. 2 P. 259–284
Добавлено: 4 сентября 2026 г.
Компьютерная лингвистика и интеллектуальные технологии: По материалам ежегодной международной конференции «Диалог». Выпуск 24 (г. Москва, 24–26 июня 2026 г.)
М.: Издательский центр «Российский государственный гуманитарный университет», 2026.
Добавлено: 2 сентября 2026 г.
Сервисы автоматического распознавания речи на русском языке: исследование качества и инклюзивности на примере датасета RuAphasiaBank
Колмогорова А. В., Явшиц Е. В., Никольская О. Н. и др., Вестник Новосибирского государственного университета. Серия: Лингвистика и межкультурная коммуникация 2026 Т. 24 № 1 С. 113–127
Технологии автоматического распознавания речи (АРР) к настоящему моменту стали базовым компонентом бэкенд-инфраструктуры различных голосовых и когнитивных ассистентов, обеспечивая доступ пользователей к коммерческим сервисам и государственным платформам. Однако из-за неравномерного распределения данных, на которых модели АРР обучаются, острой становится проблема предвзятости моделей при работе с атипичной речью. Цель исследования заключается в оценке качества распознавания и сравнении ...
Добавлено: 28 августа 2026 г.
  • О ВЫШКЕ
  • Цифры и факты
  • Руководство и структура
  • Устойчивое развитие в НИУ ВШЭ
  • Преподаватели и сотрудники
  • Корпуса и общежития
  • Закупки
  • Обращения граждан в НИУ ВШЭ
  • Фонд целевого капитала
  • Противодействие коррупции
  • Сведения о доходах, расходах, об имуществе и обязательствах имущественного характера
  • Сведения об образовательной организации
  • Людям с ограниченными возможностями здоровья
  • Единая платежная страница
  • Работа в Вышке
  • ОБРАЗОВАНИЕ
  • Лицей
  • Довузовская подготовка
  • Олимпиады
  • Прием в бакалавриат
  • Вышка+
  • Прием в магистратуру
  • Аспирантура
  • Дополнительное образование
  • Центр развития карьеры
  • Бизнес-инкубатор ВШЭ
  • Образовательные партнерства
  • Обратная связь и взаимодействие с получателями услуг
  • НАУКА
  • Научные подразделения
  • Исследовательские проекты
  • Мониторинги
  • Диссертационные советы
  • Защиты диссертаций
  • Академическое развитие
  • Конкурсы и гранты
  • Внешние научно-информационные ресурсы
  • РЕСУРСЫ
  • Библиотека
  • Издательский дом ВШЭ
  • Книжный магазин «БукВышка»
  • Типография
  • Медиацентр
  • Журналы ВШЭ
  • Публикации
  • http://www.minobrnauki.gov.ru/
    Министерство науки и высшего образования РФ
  • https://edu.gov.ru/
    Министерство просвещения РФ
  • https://elearning.hse.ru/mooc
    Массовые открытые онлайн-курсы
  • НИУ ВШЭ1993–2026
  • Адреса и контакты
  • Условия использования материалов
  • Политика обработки персональных данных
  • Правила применения рекомендательных технологий в НИУ ВШЭ
  • Карта сайта
Редактору