В ноябре 1999 года компьютерный журнал "PC Expert" провел сравнительное тестирование самых известных систем машинного перевода: Power Translator, Reverso/PROjectMT*, Systran и Transcend для двух языковых пар (англо-французской и французско-английской). Было проведено обширное тестирование с использованием текстов по информатике, философии, медицине, юриспруденции, религии (использовались тексты из Библии). В ходе тестирования также переводились выдержки из художественных произведений (любовные романы и законы Мэрфи).
В приведенной ниже таблице показаны оценки, которые получили системы в результате тестирования. Оценки выставлялись по ряду параметров (таких как, качество перевода, состав и качество словарей, способность систем к развитию и встраиванию в другие системы, а также скорость работы). Каждому параметру был присвоен весовой коэффициент, определяющий важность данного параметра. Так, качеству перевода, как наиболее важному параметру, был присвоен максимальный коэффициент, равный 4. В итоге система перевода Reverso/PROjectMT опередила своих конкурентов по сумме показателей практически на 30 %.
За высокое качество перевода и, как было сказано в рецензии "за работоспособность, образованность и дипломатическую тонкость" система перевода Reverso/PROjectMT была отмечена наградой "Выбор редакции" журнала "PC Expert".
Полные тексты тестирования можно посмотреть на сайте PC Expert.
Таблица результатов тестирования
|
Параметр/Система |
Power Translator |
Reverso |
Systran |
Transcend |
Англо-Французское направление |
||||
|
Open Sources |
3,3 |
4,0 |
3,7 |
3,0 |
|
Перевод любовных романов |
3,3 |
4,0 |
3,7 |
3,0 |
|
Перевод законов Мерфи |
3,3 |
4,0 |
3,3 |
3,0 |
|
Перевод Библии |
2,0 |
2,0 |
2,0 |
2,0 |
|
Перевод отрывков из книги Societe du Spectacle |
3,0 |
3,5 |
4,0 |
4,0 |
|
Средняя оценка перевода |
3,0 |
3,5 |
3,3 |
3,0 |
|
Словарь по информатике |
1,3 |
3,8 |
1,9 |
1,6 |
|
Словарь по информатике журнала JO |
1,7 |
2,0 |
0,4 |
1,1 |
|
Юридический словарь |
4,5 |
4,5 |
4,1 |
3,1 |
|
Словарь по философии |
1,3 |
1,7 |
0,4 |
0,7 |
|
Морской словарь |
4,6 |
4,7 |
4,6 |
3,2 |
|
Медицинский словарь |
3,2 |
4,1 |
3,4 |
0,9 |
|
Средняя оценка словаря |
2,8 |
3,5 |
2,5 |
1,8 |
|
Французско-Английское направление |
||||
|
Фразы |
3,5 |
4,0 |
4,0 |
3,0 |
|
Перевод новостей |
3,5 |
3,5 |
3,8 |
3,3 |
|
Перевод отрывков из книги Societe du Spectacle |
4,0 |
3,5 |
4,0 |
3,5 |
|
Средняя оценка |
3,5 |
4,0 |
4,0 |
3,0 |
Сводная таблица результатов тестирования
|
Параметр/Система |
Power Translator |
Reverso |
Systran |
Transcend |
Коэффициент |
|
Качество перевода |
3,2 |
3,8 |
3,7 |
3,0 |
|
|
Словарь |
2,8 |
3,5 |
2,5 |
1,8 |
|
|
Способность системы к развитию |
4,0 |
4,0 |
2,0 |
2,0 |
|
|
Скорость |
0,4 |
5,0 |
2,2 |
2,9 |
|
|
Эргономика/встраиваемость |
3,0 |
4,0 |
3,5 |
1,0 |
|
|
Итоговая оценка |
Подписаться на новости
Веб-форма не найдена.
