💡 この記事の3行まとめ
- スマホで画面を撮って翻訳する方法は、撮影・転送・後片付けという3つの工程を抱えています。
- Macの画面をそのまま囲めば、その3つがまとめて消えます。変わるのは手間だけでなく、文字の画素そのものです。
- Mac専用の画面OCR翻訳『Zipp』は
⌃Sから0.3秒、Apple Visionによる端末内処理で画面画像の外部保存ゼロ。無料でダウンロード（登録不要）、1日15回まで使えます。
📌 この記事の対象読者
- Midjourneyの画面をスマホで撮って、写真アプリから翻訳している方
- 撮った写真がカメラロールに溜まっていくのが地味に気になっている方
- 乗り換えると具体的に何が良くなるのか、先に知ってから決めたい方
スマホ撮影は、思っているより多くの工程を抱えています
Midjourneyの英文を読むために、スマホでMacの画面を撮る。手軽で、特別な道具も要りません。実際、この方法で数年ぶんの作業をこなしている人もいます。ただし、この方法が抱えている工程の数は、あまり意識されていません。
一度、撮影から訳を読むまでを書き出してみます。スマホを取り出す → カメラを起動する → Macの画面に向ける → ピントを合わせる → 撮る → 写真アプリを開く → 該当の写真を選ぶ → 翻訳機能を呼び出す → 範囲を指定する → 訳を読む → 元のMacへ視線を戻す。11の動作です。
うち、翻訳に本質的なのは訳を読む部分だけ。残りは「材料を用意する」ための作業です。そして材料を用意する工程には、それぞれ固有の失敗があります。
傾き。手で持って撮る以上、画面は必ず少し傾きます。OCRは傾きに弱く、数度の傾きで行の途中が抜けたり、隣の行と混ざったりします。
手ぶれと映り込み。照明が画面に反射すると、その部分の文字が飛びます。暗い部屋ではシャッターが遅くなり、ぶれます。
モアレ。画面の画素とカメラの画素が干渉し、縞模様が出ます。細かい文字ほど崩れます。
端の欠け。画面全体を入れようとすると周囲が入り、文字に寄ると端が切れます。フレーミングのたびに判断が発生します。
転送。撮った写真をMac側で使うなら、AirDropやクラウド、メッセージ経由で送る必要があります。ここでファイル名が変わり、どれが最新か分からなくなります。
後片付け。撮った写真はカメラロールに残ります。仕事の画面が混ざっていると、共有時に見せる範囲を気にする必要も出てきます。
これらは1つひとつは小さい。しかし、1日に何十回も繰り返すと、確実に効いてきます。
解決策：撮る対象を「画面そのもの」に戻す
乗り換えと言うと大げさに聞こえますが、やることは単純です。Macの画面を、スマホという別のデバイスを経由せずに読む。そのために3つの工程を外します。
手順1：撮影という工程を外す
Zippでは⌃S（Control + S）を押し、読みたい範囲を矩形で囲みます。カメラを向ける代わりに、画面の上で範囲を指定する。これだけです。
ここで変わるのは手間だけではありません。入力される画素が変わります。撮影では、画面の画素がカメラのレンズを通り、センサーで再標本化され、圧縮されます。囲む方法では、画面に描画されている画素がそのまま文字認識に渡ります。傾きも、モアレも、映り込みも発生しません。
結果として、細かい文字の読み取りが安定します。設定パネルの小さい項目名、画像の下の短いラベル、--ar 16:9のような記号混じりの文字列。撮影だと崩れやすい部分が、そのまま読めます。
手順2：転送という工程を外す
撮った写真をMacへ送る必要がなくなります。AirDropを開く、クラウドの同期を待つ、自分宛てにメッセージを送る。これらの操作が丸ごと消えます。
これは時間の短縮であると同時に、参照の一元化でもあります。写真が複数デバイスに散らばると、「どの写真が最新か」「どの写真を翻訳したか」を管理する必要が出ます。Macの画面で完結していれば、参照する対象は常に1つです。
手順3：後片付けという工程を外す
囲んで読む方法は、状態を残しません。訳を読んだら閉じる。写真は撮られていないので、カメラロールは増えません。共有アルバムに入れる必要も、あとで削除する必要もありません。
地味ですが、この効果は蓄積します。1日30枚撮れば1か月で900枚。整理しないまま溜まった写真フォルダは、それ自体が探す時間を生みます。囲む方法なら、その在庫が発生しません。
Apple Visionによる処理はMacの中で完結し、画面画像の外部保存ゼロです。画面には制作中の画像や未公開の指示が入っていることがあります。それを撮影して外部サービスに渡す経路を、そもそも作らないで済みます。0.3秒で返るので、待ちの間も生まれません。
なお、各AIサービスの利用条件や画面の扱いは、それぞれの規約で定められています。本記事は画面に表示された文字を読む操作の話であり、各サービスの規約に従う前提です。
スマホ撮影と、Macの画面を直接囲む方法の比較
【入力の質】
従来：レンズと圧縮を経る。傾き・モアレが出る
Zipp：画面の画素をそのまま読む。歪みがない
【細かい文字】
従来：設定項目や記号が崩れやすい
Zipp：小さい項目名やパラメータも読める
【デバイスの往復】
従来：スマホとMacの間で視線と手が行き来する
Zipp：Macの画面の中で完結する
【転送】
従来：AirDrop・クラウド・メッセージが必要
Zipp：転送という工程が存在しない
【後片付け】
従来：写真がカメラロールに溜まる
Zipp：何も残らない。閉じるだけ
【無料枠の考え方】
従来：アプリごとに条件が異なる
Zipp：無料でダウンロード（登録不要）・1日15回まで
よくある質問（FAQ）
Q. スマホの方が向いている場面はありますか？ A. あります。Macの前にいないとき、紙の資料を読むとき、他の人の画面を見せてもらうときはスマホが適しています。乗り換えが向いているのは、自分のMacの画面を読む場面です。
Q. スマホの翻訳機能の精度は高いのでは？ A. 文字が正しく撮れていれば精度は高いです。問題はそこに至るまでの工程と、撮影時の傾き・反射・モアレです。入力が崩れれば、その後の精度は上がりません。
Q. 画面が大きくて囲みきれないときは？ A. 囲む範囲は「読む単位」で構いません。見出しと本文、項目名と説明のように、意味のまとまりごとに分けて囲めば十分です。全体を1回で収める必要はありません。
Q. 1日15回の枠で足りますか？ A. 撮影のたびに1回使うのではなく、読みたいまとまりごとに1回使う設計なので、撮影より少ない回数で済みます。枠は毎日回復します。
乗り換えて変わるのは、手間より先に「入力」です
スマホ撮影からの乗り換えを、面倒の削減として説明しました。もちろんそれも本当です。ですが実際に差が出るのは、文字がどれだけ正確に入ってくるかの部分です。
傾き、手ぶれ、反射、モアレ。撮影という工程は、必ず情報を落とします。落ちた情報は、あとから取り戻せません。画面の上で囲めば、その工程自体が存在しません。⌃Sを押し、範囲を囲み、0.3秒で返った訳を閉じる。写真は残らず、転送も要りません。まずは無料ダウンロードで、いま撮ろうとしていた画面をそのまま囲んでみてください。
▼ 無料でダウンロード（登録不要・1日15回まで）
zipp-mac.surge.sh