Samara University Repository
Welcome to the Samara University repository!
This is an open electronic archive created to preserve and disseminate the scientific results of our university. The works of researchers, faculty members, and students are available to everyone for academic and research purposes.
The repository contains dissertations, research articles, educational and methodological materials, monographs, and regulatory documents. The collections cover a wide range of fields: from aerospace technologies, engine engineering, and computer science to history, linguistics, mathematics, and ecology. The archive brings together the scientific heritage of the university, including materials prepared during the period of Samara State Aerospace University and Samara State University.
Looking for publications by author, title, date, or subject? Full-text search will provide relevant results. Want to explore the academic life more closely? Browse materials by the universityâs organizational units.
Descriptions of all publications and articles available in the repository can be found in the libraryâs electronic catalog. Staff and students can log in via the menu "Login -> My Resource Archive" using their personal account credentials (SSAU_id).
Use the archive for study, research, and professional development!
| Title: | Количественный анализ способности многоязычных языковых моделей следовать инструкциям на русском |
| Authors: | Килбас И. А. Мартынов И. Д. Парингер Р. А. |
| Keywords: | ability to follow instructions experimental results instruction-following instruction-level instructions in Russian multilingual language models prompt-level quantitative analysis ruIFEVAL инструкции на русском языке количественный анализ метрика ACCURACY многоязычные языковые модели результаты экспериментов способность следовать инструкциям |
| Issue Date: | 2026 |
| Citation: | Мартынов, И. Д. Количественный анализ способности многоязычных языковых моделей следовать инструкциям на русском = Quantitative analysis of the ability of multilingual language models to follow instructions in russian / И. Д. Мартынов, И. А. Килбас, Р. А. Парингер // Volga Cyber Week : материалы Всерос. II молодеж. науч.-практ. конф. по информатике и кибернетике (Самара, 12-15 мая 2026 г.) / М-во науки и высш. образования Рос. Федерации, Самар. нац. исслед. ун-т им. С. П. Королева (Самар. ун-т) ; под общ. ред. А. В. Куприянова. - Самара : Изд-во Самар. ун-та, 2026. - С. 264-267. |
| Abstract: | В работе выполнен количественный анализ способности многоязычных языковых моделей следовать инструкциям на русском языке на бенчмарке ruIFEval. Сравниваются модели llama-3.2-3b-instruct-uncensored, qwen2.5-3b-instruct и gemma-3-4b-it в формате Q8_0. Оценка проведена по метрике accuracy в режимах strict и loose на уровнях prompt-level и instruction-level, а также по категориальным показателям ruIFEval. |
| URI: | http://repo.ssau.ru/jspui/handle/123456789/64070 |
| ISBN: | |
| ISSN: | |
| ISMN: | |
| Other Identifiers: | RU\НТБ СГАУ\590051 |
| Appears in Collections: | VOLGA CYBER WEEK |
| File | Size | Format | |
|---|---|---|---|
| file-264-267.pdf | 1.07 MB | Adobe PDF | View/Open |
Items in Repository are protected by copyright, with all rights reserved, unless otherwise indicated.