У реченні «Постачальник не передає дані третім особам» досить загубити одне слово, і переклад уже дозволяє те, що оригінал забороняє. Перевірка орфографії може нічого не помітити, а саме речення звучатиме цілком природно.
Не менш ризиковано замінити «може розірвати договір» на «повинен розірвати договір» або переплутати, хто платить, а хто отримує гроші. Такі помилки легко прослизають крізь автоматичну перевірку, якщо вона шукає числа, терміни чи пропущені сегменти, але не порівнює зміст двох мов.
Що таке смислова помилка перекладу¶
Смислова помилка виникає, коли цільове речення говорить не те саме, що вихідне. Іноді помилка очевидна - наприклад, зникло «не». Іноді майже непомітна: більшість слів на місці, але переклад змінює обов’язок, умову чи зв’язок між учасниками.
Типологія MQM розглядає точність як окремий вимір якості. MQM визначає помилки точності як невідповідність змісту цільового тексту вихідному через спотворення, пропуск або додавання повідомлення. Тож плавне формулювання ще не означає, що зміст правильний.
Переклад може бути граматично бездоганним і водночас хибним за змістом. Наприклад, у вихідному тексті покупець повертає обладнання постачальнику, а в перекладі вже постачальник повертає його покупцеві. Обидва речення зрозумілі, але сторони помінялися місцями.
Щоб перевіряти такі випадки, розклади перевірку на кілька окремих питань:
- Полярність: твердження заперечне чи стверджувальне?
- Модальність: дія обов’язкова, дозволена, можлива чи рекомендована?
- Учасники: хто виконує дію, хто її отримує, кого або чого вона стосується?
- Умови: за яких обставин правило діє?
- Сфера дії: до якого слова, винятку чи частини речення належить заперечення або обмеження?
- Повнота: чи не пропустив переклад важливий зміст і чи не додав нового?
Такий розбір узгоджується з логікою MQM: точність - окреме питання від орфографії, стилю й оформлення. Повна типологія MQM розрізняє неправильний переклад, додавання та пропуск. Не варто зводити все до позначки «невдало сформульовано»: щоб виправити текст, треба знати, чи змінилося значення, чи загубилася частина повідомлення, чи з’явився новий зміст.
Проблема точності стосується і зв’язків між технічними компонентами. Переклад може звучати правдоподібно, але неправильно пояснювати, як одна частина системи взаємодіє з іншою. Те саме буває в договорах: усі ключові терміни на місці, але дію приписано не тій стороні.
За типологією MQM, точність стосується відповідності змісту цільового тексту вихідному, а повідомлення може бути спотворене, пропущене або доповнене.
Тож перевіряй не тільки слова, а й твердження, яке читач зробить після прочитання перекладу. Якщо переклад натякає на інше право, обов’язок або порядок дій, сегмент треба переглянути, навіть коли автоматична перевірка не подала сигналу.
Чому інструменти контролю якості пропускають такі помилки¶
Автоматичний контроль якості перекладу, або QA, звіряє текст із наперед заданими правилами. Інструмент може перевірити числа, назви, терміни, повторювані фрагменти або наявність перекладу для кожного сегмента. Це корисно, але така перевірка сама собою не доводить, що речення передає правильну думку.
Різницю між формальною перевіркою та смисловою редактурою добре видно на коротких прикладах:
| Вихідний текст | Переклад | Що може знайти автоматична перевірка | Що треба перевірити людині |
|---|---|---|---|
| «Працівник не передає пароль» | «Працівник передає пароль» | Обидва сегменти наявні, орфографічних помилок може не бути | Чи збережено заперечення |
| «Покупець може відмовитися» | «Покупець повинен відмовитися» | Ключові терміни збігаються | Чи не перетворено дозвіл на обов’язок |
| «Постачальник надає доступ покупцеві» | «Покупець надає доступ постачальнику» | Усі назви сторін присутні | Хто виконує дію та хто її отримує |
| «Доступ надають після оплати» | «Доступ надають до оплати» | Слова схожі, речення граматичне | Чи збережено послідовність і умову |
Метрика перекладу оцінює схожість або якість за власним алгоритмом. Вона не читає документ так, як його прочитає людина, яка покладатиметься на зміст. У дослідженні метрик WMT 2022 року автори перевірили 22 автоматичні метрики на наборі завдань із синонімами та критичними помилками на рівні слів і речень.
Результати відрізнялися залежно від явища: метрики на основі векторних представлень порівняно добре розрізняли речення із запереченням і без нього, але гірше встановлювали відповідність синонімів. Автори також зауважили, що на частину метрик впливав стиль тексту. Ці висновки стосуються перевірених метрик і тестового набору, а не кожного інструмента чи робочого процесу.
Плавне формулювання може ще краще приховати проблему. Якщо система побудувала природне речення, але загубила заперечення або назвала не того учасника, перевірці граматики нема за що його позначити. У такій ситуації допоможе розбір точності й плавності під час редагування машинного перекладу: спочатку з’ясуй, чи правильний зміст, і лише потім поліруй стиль.
Автори дослідження WMT 2022 року пишуть, що метрики на основі векторних представлень відносно добре розрізняли речення із запереченням і без нього, але погано пов’язували синоніми. Джерело
Це не означає, що автоматична перевірка марна. Просто її результат треба розуміти вузько: інструмент знайшов або не знайшов певні ознаки. Це не те саме, що «переклад точно передає зміст». Навіть якісна метрика не замінить двомовного зіставлення, коли помилка може змінити право, заборону чи відповідальність.
Дослідження стійкості машинного перекладу WMT 2020 року називало катастрофічними помилки, які критично змінюють значення сегмента й можуть створити оманливий переклад із наслідками для здоров’я, безпеки, права або фінансів. Серед прикладів у настановах були зворотне заперечення, зміна полярності, помилки в іменованих сутностях і зміни одиниць, дат та чисел. Тож смислову перевірку не можна зводити до орфографії й цілісності файлу.
Заперечення і модальність: маленькі слова, велика різниця¶
Заперечення змінює полярність твердження: «передає» стає «не передає», а «дозволено» - «не дозволено». Але просто пошукати слово «не» замало. Заперечення може стосуватися лише частини речення, а не всієї дії, або змінити значення залежно від свого місця.
Дослідження перекладу заперечень 2020 року розрізняє втрату негативного маркера та семантичне перевертання. Обидві помилки можуть зробити плавне речення протилежним за змістом до оригіналу. У тестованих системах і напрямках перекладу помилки із запереченням суттєво впливали на подальшу якість, а зниження перевищувало 60% у деяких випадках. Це результат конкретного дослідження, а не загальний відсоток помилок сучасних систем.
Перевір, до чого саме належить заперечення. У реченні «Не всі постачальники передають дані» заперечено твердження про всіх постачальників. Але речення не означає, що жоден постачальник не передає дані. Переклад «Жоден постачальник не передає дані» посилює заперечення й змінює, кого воно охоплює.
Ручний аналіз перекладу з китайської на англійську, опублікований 2015 року, показав, що в дослідженому завданні найчастішою категорією помилок була зміна сфери дії заперечення. Автори аналізували помилки через семантичні елементи й операції на рівні рядків. Висновок стосується конкретного мовного напрямку та системи, але добре показує, чому пошук видимого слова із запереченням може не виявити проблему.
Модальність показує, наскільки дія обов’язкова, дозволена, імовірна чи бажана. Слова «має», «повинен», «може», «дозволено», «слід» і «ймовірно» не взаємозамінні. У договорі заміна «може вимагати повернення» на «повинен вимагати повернення» перетворює право сторони на її обов’язок.
Перевіряючи модальність, прочитай речення як відповідь на чотири запитання:
- Чи зобов’язаний учасник діяти?
- Чи має він лише право або дозвіл?
- Чи йдеться про можливість, а не вимогу?
- Чи зберіг переклад умову, за якої виникає право або обов’язок?
Зроби й коротку перевірку маркерів у двох версіях. Наприклад, у вихідному реченні є «може», «лише» і «за умови письмової згоди». Якщо в перекладі залишилося тільки «повинен», зміна не косметична. Перевір, чи не загубилися дозвіл, обмеження або умова.
Дослідження нейронного машинного перекладу, опубліковане 2021 року, оцінювало заперечення в напрямках англійська-німецька та англійська-китайська в обидва боки. Автори повідомили показники ручного оцінювання 95,7% для EN→DE, 94,8% для DE→EN, 93,4% для EN→ZH і 91,7% для ZH→EN. Стаття про повторне оцінювання заперечення в нейронному машинному перекладі зазначає, що результати відрізнялися між мовними парами й напрямками, а найзначущим типом помилки в дослідженні було недостатнє передавання заперечення. Ці показники описують конкретні моделі й дані, а не гарантують безпомилкового перекладу на практиці.
Автори статті про нейронний машинний переклад назвали недостатнє передавання заперечення найзначущим типом помилки у своєму дослідженні. Джерело
Перевіряй також слова «без», «крім», «тільки», «лише», «за винятком» і «не раніше». Обмеження може залишитися в реченні, але перейти до іншого об’єкта або умови. У перевірці перекладу документів на помилки й варіанти виправлення варто відокремлювати цей крок від виправлення помилки в самому вихідному документі: перекладач має зберігати зміст джерела, а не мовчки переписувати його.
Як знаходити перестановку сторін і відношень¶
Перестановка ролей виникає, коли переклад змінює місцями того, хто виконує дію, і того, на кого вона спрямована. У лінгвістиці виконавця іноді називають агентом, а учасника, на якого спрямована дія, - пацієнсом. Для практичної перевірки досить запитати: хто діє, хто отримує дію та який об’єкт у ній бере участь?
Візьмімо умовне положення договору: «Покупець повертає товар постачальнику». У перекладі «Постачальник повертає товар покупцеві» лишаються ті самі ролі, дія й товар, але належать вони вже не тим сторонам. Перевірка термінів може підтвердити, що «покупець» і «постачальник» перекладені послідовно, та не помітити перестановку.
Для кожного важливого речення склади коротку схему:
| Частина твердження | Запитання для ревізора |
|---|---|
| Виконавець | Хто має або може виконати дію? |
| Дія | Що саме відбувається? |
| Об’єкт | На кого або на що спрямована дія? |
| Отримувач | Кому передають результат, документ або кошти? |
| Умова | Коли чи за яких обставин дія відбувається? |
| Виняток | Для кого або чого правило не діє? |
Особливо уважно перевіряй дієслова про передавання, оплату, повідомлення, схвалення, отримання й повернення. Наприклад, і «надсилає рахунок», і «отримує рахунок» можуть бути в обох версіях. Але це різні дії й різні ролі.
Зіставляй учасників не тільки в одному сегменті. Якщо документ послуговується визначеними назвами «Замовник» і «Виконавець», перевір, чи не змінюються їхні ролі в кожному положенні. Окреме речення може бути граматичним, але суперечити термінам або попередньому розподілу відповідальності. MQM розглядає термінологію як окремий вимір і відносить непослідовне вживання назв до окремої проблеми.
Той самий спосіб працює з технічними текстами. З’ясуй, який компонент системи надсилає запит, який його отримує і який повертає результат. Повна типологія MQM описує помилки у відтворенні технічних зв’язків як випадки, коли текст звучить правдоподібно, але неправильно передає відношення між складниками. Помилку у зв’язку між сторонами чи компонентами варто позначити як проблему точності, а не тільки стилю.
Перестановка можлива і в реченнях без прямо названого виконавця. Пасивне «документ має бути переданий до п’ятниці» не завжди вказує, хто відповідає за передавання. Якщо переклад додає конкретного виконавця, перевір, чи не з’явилося твердження, якого немає в джерелі.
Переклад може також створити неоднозначність, якої не було в оригіналі. За MQM, неоднозначність у цільовому тексті може бути проблемою точності: подібність окремих слів не гарантує однакового розуміння повідомлення. Якщо фразу можна прочитати двома способами, хоча джерело допускає лише один, познач її для редакторського рішення.
У договорі корисно перечитати кожне положення з боку кожної сторони: що ця сторона має зробити, що їй дозволено і чого їй не можна робити? Такий перефраз не замінює юридичного висновку. Він допомагає помітити, якщо переклад приписує право або обов’язок не тому учасникові.
Практичний протокол двомовної перевірки¶
Двомовна редактура порівнює вихідний текст із цільовим, а не просто шукає відхилення від формальних правил. Її завдання - перевірити, чи зберегло кожне твердження полярність, силу, учасників і умови. Нижче - практичний протокол, побудований на вимірах точності MQM та категоріях критичних помилок у настановах WMT.
Крок 1. Визнач ризикові сегменти. Познач речення про права, заборони, обов’язки, платежі, умови, строки дії та винятки. Не пропускай фрагменти про здоров’я, безпеку або фінансові наслідки: настанови WMT 2020 року називали ці сфери серед можливих наслідків критичних помилок.
Крок 2. Перекази твердження простою мовою. Не починай з оцінки, наскільки добре звучить переклад. Сформулюй, хто що робить, кому або чому, за якої умови та з яким рівнем обов’язковості. Якщо зміст складно переказати, повернися до вихідного речення й ширшого контексту.
Крок 3. Звір полярність. Знайди «не», «ніколи», «без», «лише», «крім» і подібні обмеження. Перевір не тільки їхню наявність, а й те, до якого учасника, дії або умови вони належать. Окремо з’ясуй, чи не стало позитивне твердження негативним або навпаки.
Крок 4. Зістав модальність. Познач, де йдеться про обов’язок, право, дозвіл, можливість чи рекомендацію. Порівняй силу формулювань у двох мовах. Не прирівнюй «може» до «повинен», а «слід» - до безумовної вимоги без підстав у контексті.
Крок 5. Розклади дію на ролі. Визнач виконавця, дію, об’єкт і отримувача. Звір учасників із визначеними термінами в документі. Переконайся, що не змінився напрям передавання інформації, товару, коштів або відповідальності.
Крок 6. Перевір умови, межі й винятки. Зістав «якщо», «після», «до», «за умови», «лише коли» та «за винятком». Дата чи число можуть не змінитися, але переклад може переставити їх у часі або прив’язати до іншої дії.
Крок 7. Звір речення з контекстом. Прочитай сусідні положення й перевір послідовність ролей та термінів. Повторювана назва сторони або компонента має означати те саме в різних сегментах, якщо документ не пояснює зміну.
Крок 8. Запиши тип проблеми та виправлення. Познач окремо спотворення, пропуск, додавання, неоднозначність або непослідовний термін. Запропонуй редакцію, що повертає значення джерела й не вигадує відсутньої інформації.
Крок 9. Перевір виправлений сегмент ще раз. Перечитай його разом із вихідним реченням і контекстом. Переконайся, що правка не змінила сусідню умову, назву сторони чи силу модального вислову.
Короткий робочий запис може бути таким: «Джерело: постачальник може відмовити за відсутності згоди. Переклад: постачальник повинен відмовити за відсутності згоди. Проблема: дозвіл перетворено на обов’язок. Виправлення: повернути модальність дозволу». Такий запис пояснює і що змінилося, і чому це важливо.
Якщо тобі потрібна докладніша схема роботи з файлами та перевірками, переглянь матеріал про інструменти й процеси перекладацького агентства з дистанційною роботою. Та незалежно від інструмента, хтось має порівняти вихідний текст із перекладом і зафіксувати спірні місця.
Добирай рівень деталізації перевірки до ризику документа. Повна типологія MQM прямо передбачає, що команди можуть вибирати деталізацію категорій помилок відповідно до свого середовища. Не кожному проєкту потрібні всі підкатегорії, але перевірку полярності, модальності й ролей варто закласти явно, якщо помилка може змінити зміст положення.
Типові хиби перевірки та способи їх уникнути¶
Найчастіша помилка ревізора - сплутати плавність із точністю. Речення читається природно, терміни знайомі, і перевіряльник уже не повертається думкою до оригіналу. На критичних фрагментах спершу переказуй зміст без уваги до стилю, а потім звіряй його з джерелом.
Друга пастка - шукати тільки слово «не». Такий пошук не перевіряє сферу дії заперечення. У реченні про «не всі заявки» переклад може перетворити часткове заперечення на повне. Аналіз 2015 року показав, наскільки важлива сфера дії для дослідженого перекладу з китайської на англійську. Його висновки не варто поширювати на всі мови, але вони добре підказують: перевіряй не тільки видимий маркер.
Третя пастка - перевірити, чи згадані всі сторони, але не з’ясувати, що саме вони роблять. Автоматична перевірка може підтвердити, що назви сторін на місці, а переклад однаково поміняє платника й отримувача. У кожному важливому положенні окремо запиши, хто діє, хто отримує результат і що передають.
Четверта пастка - звести всі зауваження до категорії «неправильний термін». MQM відокремлює помилки точності від термінологічних, стилістичних і формальних проблем. Так легше помітити небезпечне спотворення серед дрібних правок і зрозуміти, що саме треба виправити.
П’ята пастка - вважати оцінку автоматичної метрики доказом того, що помилок немає. Результат стосується конкретного методу, тестових даних і явищ, які він перевіряв. Оцінювання 22 метрик у WMT 2022 році охоплювало визначений тестовий набір, а не всі можливі речення з договору чи інструкції. Використовуй автоматичний результат як сигнал для ревізора, а не як підтвердження, що всі важливі твердження правильні.
Шоста пастка - виправити переклад і не помітити проблему у вихідному реченні. Якщо джерело суперечить саме собі, перекладач не має мовчки обирати одне з можливих значень. Зафіксуй неоднозначність і передай її авторові або відповідальному за документ. Розбір помилок у вихідному документі та вибору між дослівним перекладом і виправленням допоможе відрізнити мовну неточність від помилки джерела.
І насамкінець не змішуй виправлення змісту з редактурою стилю. Спочатку віднови виконавця, об’єкт, полярність, модальність та умови, а вже потім редагуй формулювання. Інакше гладка редакція може ще впевненіше закріпити помилкове твердження, ніж початковий машинний варіант.
FAQ¶
Чому автоматична перевірка перекладу пропускає помилки заперечення?¶
Автоматичний інструмент може перевіряти числа, терміни, пропущені сегменти або формальні відповідності, але не встановлювати, до якої частини речення належить заперечення. Щоб знайти семантичне перевертання, порівняй твердження у вихідному й цільовому текстах, а не лише наявність слова «не».
Як перевірити заперечення, обов’язок і можливість у перекладі?¶
Познач маркери полярності, наприклад «не», «ніколи», «без» і «крім», а також модальні слова на кшталт «може», «повинен» і «слід». Потім перевір, чи зберіг переклад сферу дії заперечення та силу дозволу, обов’язку або рекомендації.
Чим автоматична перевірка перекладу відрізняється від двомовної редактури?¶
Автоматична перевірка шукає задані формальні проблеми або оцінює текст за обраною метрикою. Двомовна редактура порівнює зміст джерела й перекладу, зокрема полярність, модальність, учасників, дію, об’єкт та умови.
Як виявити перестановку виконавця й отримувача в договорі?¶
Для кожного критичного положення випиши, хто виконує дію, на кого або на що вона спрямована та хто отримує результат. Зістав ці ролі з вихідним текстом і перевір, чи зберігають визначені сторони свої функції в усьому документі.
Чи можуть автоматичні метрики знайти критичну семантичну помилку?¶
Окремі метрики можуть виявляти певні типи помилок, але результати залежать від конкретної метрики й тестового набору. Дослідження WMT 2022 року показало різні результати для виявлення помилок заперечення та зіставлення синонімів, тому метрики не замінюють двомовної перевірки.