카메라 롤 어딘가에는 영수증 사진, 화이트보드에 적힌 Wi-Fi 비밀번호, 또는 '나중에 기억하려고' 찍어 둔 주차 표지판 사진이 있을 겁니다. iPhone은 실제로 그런 사진의 텍스트를 읽고 검색하게 해줄 수 있습니다. 예상보다 자주 작동하지만, 의존하기 전에 이해할 가치가 있는 방식으로 실패하기도 합니다.

사용 방법과 한계가 있는 부분을 살펴봅시다.

텍스트 검색하기: 30초 버전

  1. 사진 앱을 엽니다.
  2. 검색(돋보기)을 탭합니다.
  3. 사진 속에 있는 단어를 입력합니다. "델타항공", "이케아", 식당 이름, 포스터의 글자 등 무엇이든요.
  4. 위치와 사람 검색 결과를 지나 실제로 이미지에서 읽은 단어가 있는 사진들을 찾습니다.

이게 전부입니다. iOS 15 이상에서는 iPhone이 사진에 있는 인쇄된 텍스트를 백그라운드에서 기기 안에서만 읽고 검색에 포함시킵니다. 또한 스포트라이트에 같은 단어를 입력할 수도 있습니다(홈 화면에서 아래로 스와이프). 사진 앱을 열지 않고도 검색 결과를 볼 수 있습니다.

아무것도 나오지 않으면 같은 문서에서 다른 단어를 시도해보세요. 거리 이름 대신 가게 이름, '청구서' 대신 '인보이스'처럼요. 검색은 iPhone이 읽은 단어하고만 일치하기 때문에 모든 텍스트를 읽지는 못합니다.

한 장의 사진에서 텍스트 꺼내기: Live Text

검색은 사진을 찾아주고, Live Text는 그 사진의 글을 사용하게 해줍니다. 어떤 사진이든 열고 텍스트를 누르고 있으면, 노트의 텍스트처럼 강조됩니다. 여기서 할 수 있는 것들:

  • 선택해서 복사하기 (그 화이트보드의 Wi-Fi 비밀번호를 드디어 복사할 수 있어요).
  • 전화번호를 탭해서 전화 걸기, 또는 주소를 탭해서 지도에서 열기.
  • 그 자리에서 번역하기.
  • 모서리의 작은 텍스트 프레임 버튼을 탭해서 전체 선택하기.

Live Text는 카메라 앱에서도 실시간으로 작동합니다. 문서에 카메라를 향하고 같은 버튼을 탭하면 됩니다. iPhone XS 이상의 기기와 iOS 15 이상이 필요합니다. 백그라운드에서 어떻게 작동하는지 궁금하다면, 사진 속 텍스트를 소프트웨어가 읽는 방법에 대한 쉬운 설명을 보세요.

잘 읽는 것들과 놓치는 것들

iPhone은 충분한 빛 속에서 깔끔한 인쇄 텍스트를 정면으로 촬영한 사진을 정말 잘 읽습니다. 문제는 현실의 문서들이 이런 조건을 거의 만족하지 않는다는 것입니다.

잘 읽음 놓침
인쇄된 영수증, 라벨, 표지판 손글씨, 특히 필기체나 휘갈김
정면에서 촬영한 텍스트 예각으로 촬영, 구겨지거나 말린 종이
충분한 빛과 높은 명암 반사광, 그림자, 바래진 감열지 영수증
표준 폰트 장식 폰트, 촘촘하고 작은 글씨
일반 사진 스크린샷의 스크린샷, 심한 흐릿함

이 중 어느 것도 설정으로 고칠 수 없는 문제입니다. 자동차 뒷좌석에서 황혼녘에 각도를 맞춰 촬영한 영수증은 휴대폰과 사람 모두에게 읽기 어렵습니다. 중요한 문서라면 평평하고 밝은 곳에서 프레임을 가득 채우도록 다시 촬영하세요. 나중에 검색할 때 감사할 겁니다. (영수증은 특히 문제가 많은데요. 카메라 롤에서 영수증을 찾는 완전한 방법이 있으니 필요하면 참고하세요.)

간단한 수동 해결책: 캡션을 추가하세요. 어떤 사진이든 위로 스와이프하고 한 줄을 입력하세요. '보일러 보증서' 또는 '엄마의 보험증'처럼요. 캡션은 영구적으로 검색 가능합니다. 읽기가 필요 없습니다. 번거롭지만 지금 바로 작동하고 비용이 없습니다.

더 깊은 문제: 단어를 기억해야 합니다

사진 검색에는 촬영 기술로도 고칠 수 없는 한계가 있습니다. 사진 검색은 입력한 단어를 포함한 사진 속 정확한 단어들을 찾습니다. 즉, 문서가 뭐라고 적혀 있었는지 기억할 때만 작동합니다.

현실은 그렇게 단어를 건네주지 않습니다. 실제로 기억하는 것은:

  • '지난 가을 그 카페에서 받은 영수증' — 하지만 카페 이름은 기억 안 남
  • '배관공이 준 견적서' — 그런데 '견적'이 아니라 '제안서'라고 쓰여 있음
  • '내 안경 처방전' — 'OD', 'OS', 그리고 전혀 눈여겨보지 않은 의사 이름이 적혀 있음

사진 검색에 '영수증'이라고 입력하면, 영수증이라는 단어가 인쇄된 사진을 얻을 겁니다. 대부분의 영수증에는 영수증이라는 단어가 없습니다. 검색은 '지난 가을', '얼마를 썼어', 당신이 기억하는 것과 종이에 적힌 것 사이의 간격을 좁혀 줄 수 없습니다. 단어 일치 도구일 뿐이고, 기억은 단어로 저장되지 않습니다. 의미로 저장됩니다.

검색 대신 질문하기

페이지의 단어와 당신 머릿속의 질문 사이의 간격. 이것이 정확히 Paperlock이 해결하도록 만들어진 것입니다. Paperlock은 iPhone 앱입니다(출시 예정). 당신의 문서를 개인 보관함에 보관하고 Face ID로 보호합니다. 각 문서를 실제로 읽습니다. 무엇인지, 누가 보냈는지, 날짜, 금액, 심지어 손글씨도요. 그러니까 키워드를 추측하는 대신 평문으로 질문할 수 있습니다. '지난 가을 그 카페에서 받은 영수증 찾아'라고 하면, '지난 가을'처럼 상대적인 날짜가 그냥 작동합니다. 답변은 출처 문서와 함께 옵니다. 보관함에 답이 없으면, 있지도 않은 답을 만들어내지 않고 그렇다고 말해줍니다.

또한 발굴을 대신 해줄 수도 있습니다. 허락을 받으면 카메라 롤을 기기 안에서 스캔해서, 문서로 보이는 것들을 골라내고 확인할 수 있도록 후보를 보여줍니다. 원본은 사진 앱에 그대로 남아 있습니다. 대부분의 사람들은 수백 장을 발견합니다. 카메라 롤이 이미 충분한지 고민 중이라면, Paperlock과 카메라 롤의 정직한 비교가 있고, 어떻게 작동하는지를 보면 더 큰 그림을 알 수 있습니다.

간단히 말해서

기본 기능을 사용하세요. 무료이고 생각보다 강력합니다. 사진에 분명히 있는 단어로 사진 검색을 하고, 누르고 있어서 Live Text로 텍스트를 꺼내고, 중요한 문서는 평평하게 밝은 곳에서 다시 촬영하고, 나중에 필요할 것들에는 캡션을 추가하세요.

하지만 한계를 알아두세요. iPhone은 단어를 찾습니다, 답을 찾는 것이 아닙니다. '3월쯤 받은 수의사 청구서, X-레이 비용이 있는 그것'을 원하는 날이 오면, 단어 검색은 손을 놓을 겁니다. 당신 머릿속의 질문은 종이에 쓰여 있지 않으니까요.