Четверг, 19.06.2025, 20:04
Разделы
Опросник
Вытеснит ли интерент - телевидение, радио, телефоны
Всего ответов: 23
Форма входа
Поиск
Календарь
«  Май 2012  »
Пн Вт Ср Чт Пт Сб Вс
 123456
78910111213
14151617181920
21222324252627
28293031
Архив сайта
Главная » 2012 » Май » 11 » Выровненный украинско-русский параллельный текстовый корпус
11:52
Выровненный украинско-русский параллельный текстовый корпус
Вывод на карту приватбанка

В Информационном центре ElVisti создан выровненный на уровне предложений украинско-русский параллельный текстовый корпус из веб-публикаций. Объем корпуса - более 2,6 млн. пар уникальных предложений.

Метод построения корпуса базируется на использовании "опорных слов" в тестовых документах, а также средствах их автоматического перевода. Опорные слова в рамках данного подхода выделяются с использованием русского и украинского морфологических словарей, а также словарей переводов имен существительных для русского и украинского языков. Кроме того, для вычисления весов терминов в документах используются некоторые дополнительные эмпирико-статистические правила. Для выравнивания параллельного корпуса на уровне предложений использовались преимущественно статистические методы.

Алгоритмы были реализованы в виде программного комплекса, который интегрирован с системой контент-мониторинга InfoStream, благодаря чему корпус постоянно пополняется.

Предполагается дальнейшее использование данного лингвистического ресурса для создания системы автоматического перевода новостных сообщений.

Для интернет-пользователей обеспечена возможность поиска в этом корпусе в режиме онлайн.

Для скачивания на сайте http://ling.infostream.ua/ доступен заархивированный фрагмент параллельного корпуса размером в 100 тысяч пар уникальных предложений (в ZIP-архиве ~ 9 МБ). Формат представления данных приближен к XML. Использование этого фрагмента корпуса в научных и учебных целях - свободное.

Просмотров: 466 | Добавил: coguar | Рейтинг: 0.0/0
Всего комментариев: 0
Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]