カメラロールのどこかに、レシートの写真、ホワイトボードに書かれたWi-Fiパスワード、または「覚えておくために撮った」駐車料金表などがあるはずです。iPhoneはこうした写真のテキストを実は読み取ることができ、それを検索することも可能です。予想以上にうまく機能することが多い一方で、使用する前に理解しておくべき失敗パターンもあります。

その使い方と、落とし穴について説明しましょう。

iPhoneで写真内のテキストを検索するには?

  1. **「写真」**アプリを開く
  2. 画面右下の虫眼鏡をタップする
  3. 写真に写っている単語を入力する — 航空会社の名前、店舗の看板、メールアドレス、ポスターに書かれた文字など
  4. 候補または検索キーをタップし、上にスワイプしてすべての結果を確認する

これだけです。iOS 15以降(iPhone XS、XR以降)では、iPhoneが写真内の印刷されたテキストを読み取り、それを「写真」検索に含めます。Appleによれば、メールアドレスや電話番号などのテキストも、日付や場所、キャプションと並んで検索対象になります。同じ単語をホーム画面の中央から下にスワイプして開くSpotlightに入力することもできます。Appleは、Spotlightも写真内のテキストを検索すると述べており、「写真」アプリを開かずに検索結果を得ることもできます。

何も見つからない場合は、同じ書類から別の単語を試してください — 通りの名前の代わりに店名、「請求書」の代わりに「invoice」など。検索は、iPhoneが読み取ることができた単語とだけ一致し、すべてのテキストを読み取るわけではありません。

iPhoneで写真からテキストをコピーするには?

検索は写真を見つけるためのもの。ライブテキスト機能は、写真に書かれている内容を実際に活用するためのものです。写真を開き、単語を長押ししてグラブポイントをドラッグし、必要な範囲を正確に選択してください——ノートのテキストのように動作します。そこから以下の操作ができます:

  • コピーをタップする(やっとそのホワイトボードのWi-Fiパスワードが取り出せます)か、すべてを選択する。
  • 翻訳をタップして翻訳するか、調べるをタップして調べる。
  • 写真右下のライブテキストボタンをタップして、すべてのテキストを一度にハイライトする。
  • テキストがハイライトされた状態で、電話番号をタップして発信するか、メールアドレスをタップしてメールを作成する。

ライブテキスト機能は、カメラアプリでリアルタイムで使用することもできます — 書類にカメラを向け、テキストの周りに黄色い枠が表示されたら同じボタンをタップするだけです。iPhone XS、iPhone XR以降でiOS 15以降が必要です。その仕組みについて興味があれば、数十年前からスキャナーが使ってきた同じ技術について、わかりやすく説明した記事があります:写真のテキストをソフトウェアがどのように読み取るのか。

なぜiPhoneは写真内のテキストを見つけられないのですか?

まず確認すべき設定はこちらです:設定 → 一般 → 言語と地域 → ライブテキストがオンになっているか。Appleによると、ライブテキストはすべての地域や言語で使えるわけではなく、対応していない言語のテキストはまったく読み取られません。

それ以外では、iPhoneは綺麗に印刷されたテキストが、正面から、良好な照明条件で撮影されている場合、本当に優れた読み取り性能を発揮します。問題は、実世界の書類がこのような条件で撮影されることはめったにないということです。

よく読める 見落とされやすい
印刷されたレシート、ラベル、看板 手書き文字(特に筆記体や走り書き)
正面から撮影されたテキスト 斜めから撮影、丸まったり、しわくちゃな紙
照度が高く、高コントラスト 反射、影、薄れた感熱紙のレシート
標準的なフォント 装飾的なフォント、密集した小さい文字
通常の写真 スクリーンショットのスクリーンショット、大きなぶれ

これらはどれも設定では直しようのない問題です。車の座席に斜めに置かれて、夕方の薄暗い中で撮影されたレシートは、単に読み取りにくいものです。それはスマートフォンにとっても、人間にとっても同じことです。書類が重要な場合は、フラットに、明るい環境で、フレーム全体に収まるように撮り直してください。今後の検索で感謝されます。(レシートはよくある悩みです。カメラロールに眠っているレシートを掘り起こすための完全なガイドがあります:iPhoneの写真からレシートを見つけるには。)

簡単な手動でのアップグレード方法として、キャプションを追加することもできます。どの写真でもスワイプアップし、キャプション欄に1行入力してください — 「暖房機の保証」、「母の保険証」など。Appleによれば、キャプションを付けると「検索」でその写真を見つけやすくなります。読み取りは不要です。手間がかかりますが、今すぐ機能して、何も費用がかかりません。

より深い問題:単語を覚えていなければならない

ここにはどんなカメラ撮影テクニックでも解決できない限界があります。「写真」検索は、入力した単語が、その正確な単語を含む写真を見つけるだけです。月や年で絞り込むこともでき、Apple Intelligence対応のiPhoneでは写真に写っているものを説明して検索することもできます。ですが、書類に何と書かれているかで見つけるには、依然としてその内容をすでに覚えている必要があります。

実際の人生は、単語をくれません。実際に覚えているのは:

  • 「去年秋のあのカフェのレシート」 — でも店の名前は覚えていない
  • 「配管工が渡してくれた見積書」 — 「見積書」ではなく「PROPOSAL」と書かれている
  • 「メガネの処方箋」 — 「OD」と「OS」と、気に留めたことのない医者の名前が書かれている

「写真」検索に「レシート」と入力すると、レシートという単語が印刷されていることを当てにすることになります — ですが、多くのレシートにはその単語は印刷されていません。検索は「いくら使った」には答えられず、覚えている内容と紙に書かれている内容のギャップを埋めることもできません。見つかるのは写真であって、答えではありません。そして記憶は単語ではなく、意味を保存しています。

検索ではなく、質問する

ページの単語と頭の中の質問の間のギャップ — これはまさにPaperlockが解決するために設計されたものです。Paperlock は、書類を非公開のFace ID対応ボルトに保管し、実際に読み取る iPhoneアプリです:それが何か、誰からのものか、日付、金額、さらには手書き文字まで。ですから、キーワードを推測するのではなく、平文で質問することができます — 「去年秋のあのカフェのレシートを見つけて」 — 「去年秋」のような相対的な日付が機能します。答えはソース書類が添付されて表示され、ボルトに答えがない場合は、作り話をするのではなく、そう言ってくれます。

また、発掘作業もしてくれます:許可を与えると、デバイス上でカメラロールをスキャンして、可能性のある書類を抽出し、承認するための候補を表示します — 元の写真は「写真」アプリで無傷のままです。その数の多さに、たいていの人は驚きます。カメラロールがすでに十分に優れているかどうかを検討している場合は、正直な並列比較があります:Paperlockとカメラロール 、また その仕組み はより完全な全体像を持っています。

簡潔版

組み込み機能を使用してください — 無料ですし、驚くほど機能します。「写真」アプリを開いて虫眼鏡をタップし、写真に確実に含まれている単語を検索してください。テキストを長押ししてライブテキスト機能で取り出してください。重要な書類は平らで、良好な照度で撮り直し、また見直す必要があるものはキャプションを付けてください。

そして、限界を知ってください:iPhoneは単語を見つけます。答えではありません。「3月頃のペットの医療請求書、X線料金が含まれているもの」という必要が生じた日、単語検索は沈黙します — 頭の中の質問は、ページには決して書かれていなかったからです。