画像翻訳 - 写真をOCR＋あらゆる言語に翻訳

2つのエンジンが連携して動作します。まずOCRが写真から元のテキストを抽出し、続いて大規模言語モデルの翻訳エンジンが文脈を考慮しながら目的の言語に翻訳します。慣用句、メニュー項目、ブランド名、短い標識などはきれいに翻訳されます。長い文学的な文章の場合は、DeepLやGoogle Translateのような最上位クラスの一般向け翻訳ツールと同等の品質が期待できます。

はい。英語、スペイン語、フランス語、ドイツ語、イタリア語、ポルトガル語、オランダ語、ロシア語、ポーランド語、トルコ語、アラビア語、ヘブライ語、ヒンディー語、ベンガル語、タミル語、中国語（簡体字・繁体字）、日本語、韓国語、ベトナム語、タイ語、インドネシア語に、双方向で対応しています。フランス語 → 英語、日本語 → スペイン語、中国語 → ヒンディー語をはじめ、対応言語のあらゆる組み合わせで翻訳できます。

きれいなブロック体の手書き文字や黒板のメニューは、ほとんどの場合うまく認識されます。このOCRは日常的な看板やカジュアルな手書き文字に最適化されています。筆記体や密集した手書きの手紙、医師の処方箋の場合は、まず手書きOCRツールでテキストを抽出してから、それを翻訳ツールに貼り付けると精度が高まります。

はい。1回のアップロードで、OCR、言語の自動判別、翻訳、左右並べての表示までが行われます。左に原文、右に訳文を並べて見ることもできるので、言い回しを比べたい語学学習者にも役立ちます。単語をタップすれば、対象言語での発音を聞けます。

アップロードしたファイルは処理後、数分以内に自動削除されます。翻訳履歴はサーバーに保存されず、直近の結果はブラウザのタブ内にのみ保持され、ページを閉じると消去されます。そのため、旅行中の緊急時、医療パンフレット、個人的なやり取りの翻訳にも安心して使えます。

はい。コピーボタンを使えば、原文、訳文、またはその両方を並べた状態でワンクリックで取得できます。ダウンロードボタンでは、メモ用のシンプルな.txtや、同僚との共有用の手軽な.docxとして書き出せます。旅行者はWhatsAppに貼り付け、学生はNotionに貼り付け、エージェンシーは校正のために翻訳メモリツールに貼り付けています。

翻訳前に使われる文字認識モデルを切り替えます。「デフォルト」は、大半の印刷された標識やメニューでうまく機能します。「エンジン1」と「エンジン2」は代替エンジンで、装飾的なフォント、コントラストの低い写真、デフォルトでは扱いにくい文字体系を、より正確に読み取れます。翻訳される前の段階で検出されたテキストが誤っているように見える場合は、まずエンジンの切り替えを試してください。

翻訳先の言語の変更は自動的に再翻訳されますが、翻訳元の言語やエンジンの変更には「再実行」ボタンを押す必要があり、設定が変更されたことを知らせる黄色の通知が表示されます。これは意図的な仕様です。OCRは従量制のステップのため、ドロップダウンを操作するたびにツールが黙って画像を再スキャンすることはなく、新たな読み取りを確定したときだけ実行されます。

はい。翻訳が完了すると、トグルボタンで結果パネルを検出された原文と翻訳文の間で切り替えられ、それぞれのバージョンに専用のコピーボタンがあります。これは、語学学習者がフレーズが言語間でどう対応するかを確認したり、翻訳を信頼する前に OCR が看板を正しく読み取ったか検証したりするのに役立ちます。

OCRの精度は文字セットの一致に依存するため、ソース言語のドロップダウンを英語のままにするのではなく、看板の実際の言語に設定してください。デフォルトがスタイル化された文字を誤読する場合は、エンジン1やエンジン2を試してください。エンジンによって装飾フォントや低コントラストの写真での強みが異なります。OCRの読み取りが悪いと、対象言語に関わらず翻訳も悪くなるため、翻訳のステップよりOCRのテキストを正しく取ることのほうが重要です。

「画像の言語」は、当社のOCRエンジンが読み取れるすべての文字体系に対応しており、選んだOCRエンジンによって約30言語に及びます。一方「翻訳先」は、翻訳バックエンドが対応する約20の出力言語という、より短いリストから選びます。つまり、対応するほぼすべての言語のテキストを撮影できますが、翻訳結果は「翻訳先」に表示される言語のいずれかにしか出力できません。

はい。検出テキストと翻訳テキストのどちらのボックスも編集できるので、切り替えボタンで現在表示されている方に直接修正を入力できます。コピーは常にその時点で表示中のテキストを取得しますが、Download .txt は原文側を編集中であっても常に翻訳テキスト版を保存します。原文の修正をダウンロードファイルに反映させたい場合は、先に翻訳ビューへ切り替えてください。

アップロードはPNG、JPG、WEBP、GIF、TIFF、BMP、HEIC、HEIFに対応しているため、iPhoneのネイティブなHEIC形式の写真もJPGに変換せずにそのまま使えます。どの形式を使う場合でも、最も正確に読み取るには、OCRを実行する前に画像の言語とOCRエンジンを写真内のテキストに合わせて設定してください。