만화·웹툰 번역, AI가 초벌하고 사람이 다듬는 법 — 망가트랜슬레이트 기능과 한계

오픈팩트 생각

AI 만화 번역은 기계가 대사를 초벌로 옮기고, 사람이 말투·고유명사·효과음을 다듬는 분업 방식이 가장 현실적입니다. 번역 자체를 자동화하는 게 아니라, 반복되는 글자 인식과 말풍선 작업을 기계에 맡기고 품질은 사람이 책임지는 구조입니다.

만화·웹툰을 다른 언어로 옮기는 일은 손이 많이 갑니다. 대사를 지우고, 번역해 옮겨 적고, 글꼴과 위치를 맞춰야 합니다. AI는 이 중 '글자 찾기'와 '초벌 번역', '말풍선에 다시 얹기'를 빠르게 해 줍니다. 대신 농담, 의성어, 등장인물 말투 같은 섬세한 부분은 사람이 봐야 합니다.

이 글은 '만화 이미지를 AI로 번역할 때 일을 어떻게 나누나'를 푸는 실무 기사이며, 그 한 예로 망가트랜슬레이트를 살펴봅니다. 운영사(Ficory LLC) 제보를 계기로, 공개된 제품 페이지·이용 정책·API 문서를 오픈팩트가 직접 확인해 정리했습니다.

망가트랜슬레이트란 무엇인가

망가트랜슬레이트(MangaTranslate, mangatranslate.com)는 만화·웹툰 이미지와 PDF 속 대사를 인식해 다른 언어로 번역하고, 번역문을 말풍선에 다시 얹어 주는 온라인 서비스입니다. 운영사는 Ficory LLC입니다.

작동 방식은 세 갈래로 나뉩니다. 웹에서 바로 쓰는 서비스, 번역 결과를 손보는 온라인 편집기(스튜디오), 그리고 기존 작업에 연결하는 API입니다. 운영사는 브라우저 확장 프로그램과 모바일 앱 형태도 있다고 설명합니다.

쓰는 사람도 다양합니다. 만화·웹툰 독자와 언어 학습자, 창작자·번역가, 출판사와 현지화 스튜디오, 그리고 자기 작업 흐름에 번역 기능을 넣으려는 개발팀까지입니다. 공식 사이트는 지원 언어를 「100개 이상」이라고 적고 있습니다(사이트 표기 인용). 자세한 기능은 AI 만화 번역기 페이지에서 확인할 수 있습니다.

참고로, 도쿄대 스타트업 만트라(Mantra)도 18개 언어로 만화를 번역하는 AI 솔루션을 개발했다고 보도되는 등, 만화 AI 번역은 여러 곳이 뛰어드는 분야입니다.

핵심 기능

망가트랜슬레이트의 핵심 기능은 '글자 인식 → 초벌 번역 → 말풍선 재배치 → 후편집'을 한 곳에서 잇는 것입니다. 공식 사이트에서 확인한 기능을 표로 정리했습니다.

기능	하는 일
이미지·PDF 인식	JPG·JPEG·PNG·WEBP·AVIF, PDF 속 대사를 찾아 글상자로 잡습니다
초벌 번역	인식한 대사를 선택한 언어로 자동 번역합니다
말풍선 재배치	번역문을 원래 대사 자리에 다시 얹어 줍니다
일괄 번역	여러 장을 한 번에 처리합니다(요금제에 따라 100장 또는 200장)
번역 모델 선택	Manga·Ultra·EagleEye 3종 중 고릅니다(장당 1·2·1크레딧)
스튜디오(후편집)	번역문 수정, 텍스트 상자 이동, 글꼴·크기·색·외곽선 변경
API	작업을 접수하면 batch_id로 진행 상태를 조회하는 비동기 방식

입력 파일은 페이지당 최대 15MB이고, ZIP·TAR·TAR.GZ 압축 파일도 올릴 수 있습니다. 스튜디오는 「Photoshop과 유사한 온라인 작업 공간」이라고 소개되지만, 이는 편집 방식을 빗댄 표현일 뿐 Adobe와 제휴한 것은 아니라고 운영사가 명시했습니다.

사용 흐름

망가트랜슬레이트의 작업 흐름은 '권리 확인 → 초벌 → 후편집 → 연결'의 네 단계입니다. 이 순서는 다른 AI 만화 번역 작업에도 그대로 적용됩니다.

1. 원본 준비: 사용 권한이 있는 만화·웹툰 이미지나 PDF를 준비합니다. 여기서 권리 확인이 먼저입니다.
2. 초벌 번역: 한 장 또는 여러 장을 올려 자동 번역을 돌립니다. 번역 모델과 대상 언어를 고릅니다.
3. 후편집: 스튜디오에서 사람이 문맥·말투·고유명사·효과음을 검토하며 고칩니다. 글꼴과 위치도 다듬습니다.
4. 연결: 온라인에서 바로 읽거나, API로 기존 작업 흐름에 결과를 넘깁니다.

API는 이미지 여러 장이나 ZIP 1개를 올려 작업을 접수하면 batch_id가 돌아오고, 그 번호로 대기·처리 중·완료·실패·취소 상태를 조회합니다. 결과에는 번역 이미지 주소와 함께 글상자 좌표, 원문, 번역문, 색, 회전 각도, 손글씨 여부 같은 정보가 담깁니다. 재시도 때 중복 처리를 막는 Idempotency-Key 헤더를 요구합니다.

기대효과

가장 큰 효과는 반복 작업 시간을 줄이는 것입니다. 대사를 일일이 지우고 옮겨 적는 수작업을 기계가 대신하면, 사람은 품질 검토에 집중할 수 있습니다.

둘째, 일의 분업이 명확해집니다. 기계는 초벌과 글자 작업, 사람은 말투와 문맥을 맡으니 역할이 겹치지 않습니다.

셋째, 많은 양을 한 번에 다룰 수 있습니다. 일괄 번역과 API로 여러 화를 묶어 처리하면, 출판사나 스튜디오의 현지화 작업에 붙이기 쉽습니다. 다만 이는 작업을 빠르게 만드는 보조일 뿐, 번역 품질을 보장하는 것은 아닙니다.

장점과 단점

망가트랜슬레이트의 장점과 단점을 함께 봐야 합니다. 운영사도 자동 번역의 정확도나 작업 성과를 보장하지 않는다고 밝혔습니다.

장점	단점
글자 인식·초벌·말풍선 작업을 한 곳에서 처리	효과음·손글씨·세로쓰기는 자동 인식이 흔들리기 쉬움
스튜디오에서 번역문과 디자인을 직접 수정	말투·농담·고유명사는 사람 검토가 꼭 필요
여러 장 일괄 처리와 API 연동 가능	자동 번역 정확도를 운영사가 보장하지 않음
다양한 이미지 형식과 압축 파일 지원	원본 권리 확인은 전적으로 이용자 책임

단점은 대부분 '사람이 더 봐야 하는 지점'입니다. 특히 의성어·손글씨처럼 그림과 섞인 글자는 자동 인식이 약하므로, 이 부분은 후편집 비중을 높이는 것이 안전합니다.

이런 경우에 맞고, 이런 경우엔 맞지 않는다

AI 만화 번역은 '권리가 정리된 작업'에 맞고, '권리가 불분명한 공유'에는 맞지 않습니다. 상황마다 다릅니다.

• 잘 맞는 경우: 내 작품의 해외판을 만드는 창작자입니다. 권리를 가지고 있으니 바로 번역 단계로 갈 수 있습니다.
• 잘 맞는 경우: 출판사·스튜디오가 계약한 작품을 현지화할 때입니다. 다만 계약서의 번역·배포 범위를 먼저 확인해야 합니다.
• 맞는 경우: 혼자 읽거나 공부하려고 열람하는 개인 학습용입니다. 사적 이용 범위에 해당할 수 있습니다.
• 맞지 않는 경우: 남의 작품을 팬 번역해 공유하는 일입니다. 원저작권자 허락이 없으면 2차적저작물작성권 문제가 생깁니다.

저작권법 제5조는 번역물을 '2차적저작물'로 보호하되, 그 보호가 원저작자의 권리에 영향을 주지 않는다고 정합니다(국가법령정보센터). 제22조는 번역해 이용할 권리를 저작자가 가진다고 하므로, 남의 만화를 번역해 배포·게시하려면 원저작권자 허락이 필요합니다. 반면 제30조와 제36조는 공표된 저작물을 영리 목적 없이 개인·가정 범위에서 이용하는 경우, 그 저작물을 번역해 이용하는 것도 허용합니다. 즉 혼자 읽으려고 번역해 보는 것과, 번역본을 커뮤니티나 블로그에 올리는 것은 법적으로 다른 일입니다. 구체적 사안은 전문가 확인을 권합니다.

브랜드 콘텐츠를 자동화하는 다른 접근이 궁금하다면 클로드 콘텐츠 자동화 모임 글도 참고할 수 있습니다.

이렇게 확인하세요

도입 전에는 권리·입력·품질·연동을 순서대로 점검하세요. 아래 단계대로 확인하면 사고를 줄일 수 있습니다.

1. 권리부터 확인: 번역하려는 작품의 사용 권한이 있는지 봅니다. 계약서가 있다면 번역·배포 범위를 다시 읽습니다.
2. 입력 형식 점검: 가진 파일이 JPG·PNG·WEBP·PDF·ZIP 등 지원 형식인지, 페이지당 15MB를 넘지 않는지 확인합니다.
3. 샘플로 품질 확인: 한두 화를 먼저 번역해 효과음·손글씨·세로쓰기가 얼마나 잡히는지 봅니다.
4. 후편집 인력 배치: 말투·고유명사·농담을 검토할 사람을 정합니다. 자동 결과를 그대로 쓰지 않습니다.
5. 정책·요금 확인: 공식 허용 사용 정책과 요금 안내를 직접 봅니다. 요금은 바뀔 수 있어 사이트에서 최신 내용을 확인합니다.
6. API 연동 검토: 개발팀이 있다면 API 예시 문서로 batch_id·상태 조회·Idempotency-Key 방식을 확인합니다.