이 프로젝트에도 꽤 재밌는 스토리가 하나 있습니다. 제 친한 친구이자 동료인 Tobi가 인터넷에서 정말 멋진 만화를 발견했다며 제게 알려준 적이 있었죠. 그런데 그는 영어가 능숙하지 않아서 영어 팬 번역본을 겨우겨우 이해하고 있다며 좀 투덜거렸습니다. 내용을 파악하려고 일일이 스크린샷을 찍고, OCR을 돌리고, 말풍선 하나하나를 따로 번역해야 했거든요.
저는 이걸 챌린지로 받아들였습니다. "이걸 다르게 할 방법이 있을 텐데"라고 생각했죠. 그래서 상황을 좀 살펴봤더니, 그 만화는 그냥 여러 장의 이미지가 세로로 길게 붙어 있는 형태더라고요. 그래서 무료로 공개된 원본을 다운로드해서 OCR 소프트웨어를 돌렸습니다. 텍스트를 마킹하고, 말풍선을 기반으로 찾은 위치들도 같이 마킹했죠. 그러고 나서 기존 내용을 덮어씌우고 독일어 번역문을 집어넣었습니다.
하지만 여기서 끝내면 안 되죠. 이 모든 작업을 마친 뒤, 결국 저는 이 만화 전체에 목소리를 입혔습니다. AI를 여러 번 돌려서 스토리를 이해하게 했는데, 참고로 이건 제 로컬 환경에서 진행했습니다. 그러면 AI가 주요 등장인물인 화자들을 결정합니다. 아직 완벽하게 작동하는 건 아니지만, 충분히 괜찮은 수준이에요. 여기에 효과음(Sound-FX)을 깔고, 음악까지 얹어서 결국 이 만화 전체를 오디오로 만들거나 영상으로 변환했습니다. 어떻게 돌아가는지 보여드리기 위해 에피소드 하나를 첨부할게요.
자, 이제 일반적인 만화를 곁들여 볼 수 있는 영상으로 만드는 일종의 자동화 파이프라인이 생긴 셈입니다. 한번 보세요, 꽤 괜찮습니다. 그리고 Manga Factory의 프로그램 코드도 함께 공유해 드릴게요. 즐겁게 감상하시고, 늘 그렇듯 소스 코드는 마음껏 뜯어보고, 입맛에 맞게 수정해서 사용하셔도 좋습니다. 즐기세요!
아, 그리고 덧붙이자면: 그냥 영상만 만드는 걸로는 부족하더라고요. 제 T-Scale 네트워크를 통해 자동화된 플레이어까지 구축해서, 웹사이트에서 이 모든 걸 아주 멋지게 연속 재생할 수 있게 만들었습니다. 그냥 단순한 영상 파일 하나만 띡 올리는 건 지루하잖아요. 할 거면 제대로 해야죠.
Gallery



