대해서 상담하다.
AnimeRefiner?
AnimeRefiner는 애니메이션을 깔끔하게 고해상도화할 수 있는 AI입니다.
AnimeRefiner・변환샘플
고해상도화 예
AnimeRefiner가 도입된 실적
영화
HD → 4K
『映画妖怪ウォッチ♪ ケータとオレっちの出会い編だニャン♪ワ、ワタクシも～♪♪』
©LEVEL-5/妖怪ウォッチ♪プロジェクト・テレビ東京
HD → 4K
『劇場版 総集編 マジカパーティ』
©MAZICA PARTY PROJECT・TVO
AnimeRefiner의 특징
최첨단 AI 기술(Deep Learning)로 고해상도화
AnimeRefiner는 Deep Learning을 활용해, 종래의 화상을 길게 늘려 중간을 보간하는 변환(업컴버트) 기술로는 불가능했던, 고품질인 상태에서의 고해상도화가 가능합니다.고해상도화 AI'Photo Refiner'로 기른 독자적인 AI모델로 애니메이션을 가로 세로 4배의 사이즈로 고해상도화할 수 있습니다.저해상도 동영상과 고해상도 동영상의 특징을 대량 학습한 AI는 기존 기술과는 비교가 안 될 정도로 아름답게 애니메이션을 고해상도화할 수 있습니다.
1. 여러 종류의 노이즈 제거
2. AI가 추정해서 생성함으로써 가장자리를 날렵하게
3. 그늘도 예쁘게
기존 기술과의 비교
많은 변환(업컴버트) 기술은 동영상을 길게 늘여 중간을 보간하고 있습니다. 그 때문에 에지가 애매하거나, 노이즈가 그대로 확대되거나 합니다. AnimeRefiner에서는, 고화질의 영상에 있어야 할 상태를 학습하고 있기 때문에, 저해상도의 영상으로부터 고해상도의 영상을 만들어 낼 수 있습니다.
변환전의 애니메이션
기존 기술에서의 업 컨버트 예시
AnimeRefiner로 고해상도화
기존 기술로 고해상도화 하는 것보다 가장자리가 날렵하게 되어 있고 윤곽선이 매끄럽게 표현됩니다.
고해상도화 이외의 문제에도 대응
애니메이션이나 실사 영상으로 문제가 되는 2-3 풀다운에의 대응이나 인터레이스에의 대응도 실시할 수 있습니다. AnimeRefiner 에서는 Deep Learning (딥러닝) 나 Computer Vision(컴퓨터 비전) 등의 지견을 살려 이러한 문제에 대응할 수 있습니다.
2-3 풀다운
매초 24 컷으로 기록된 애니메이션을, 텔레비전 방송이나 VOD(비디오 온디멘드)등에서 이용되는 매초 30 프레임의 영상 신호로 변환하는 수법.
인터레이스 해제
일반적인 아날로그 TV 신호 또는 1080i 포맷의 HDTV 신호 등의 인터레이스 영상을 비인터레이스 형식으로 변환하는 과정.
자막과 영상을 분리한 고해상도화 처리
자막은 애니메이션을 제작한 후 합성되어 있기 때문에 자막과 영상에서 다르게 처리될 수 있습니다. 따라서 일차원적으로 처리하면 애니메이션을 예쁘게 만들 수 있지만 자막이 깔끔하지 않을 수 있습니다. 그래서 AnimeRefiner 에서는 자막은 자막만으로 처리하고 애니메이션은 애니메이션으로만 처리하여 나중에 합성함으로써 자막과 영상이 혼재하는 장면에 있어서도 예쁜 고해상도화를 실현할 수 있게 되었습니다.
다양한 색감으로 아웃풋 가능
원래의 애니메이션의 색감을 남긴 채 고해상도화하는 모드 부터, AI를 이용해 돋보이는 색감까지 여러 패턴으로 아웃풋 할 수 있는 모드를 추가했습니다.
고스펙 머신 불필요
하드웨어면에서는고성능의 GPU클러스터를 채용하고 소프트웨어면에서도 특허 출원중의 고속 추론 기술에 의해 고속 추론을 실현했습니다. 예를 들어 CG분야에서는 고품질 이미지를 얻기 위해서 기존에는 시간을 들여 자사의 머신으로 렌더링을 할 필요가 있었습니다. AnimeRefiner를 사용하면, 자신의 하드웨어를 움직이는 일 없이, 예쁜고 유창한 애니메이션 영상으로 변환할 수 있습니다.
다양한 파일 형식(입력) 지원 가능
Apple ProRes 422 나 H264, MPEG-4 를 시작으로 다양한 인코딩에 대응하고 있으므로, .mov나 .mp4, .mpeg 등의 여러가지 파일 형식을 고화질화하는 것이 가능합니다. 덧붙여 출력은 .mov를 기본으로 하면서, 요망에 따라 대응할 수 있습니다. 자세한 사항은 문의해 주십시오.
리마스터링 및 4K·8K애니메이션의 시간과 비용을 절감
과거의 애니메이션을 저비용· 빠르게 4K리마스터링화
애니메이션 리마스터 제작에는 매우 막대한 시간과 비용이 소요됩니다. 고해상도화하고 싶은 사이즈까지 늘인 후, 희미해져 버린 부분을 손으로 다시 그려 수복합니다. 영상 노이즈 등을 제거하면서 1프레임씩 깔끔하게 복원할 필요가 있습니다. AnimeRefiner라면 AI가 고해상도 애니메이션을 추측해 리머스터링을 합니다. 영상안에 있는 노이즈나 흐림등을 제거하고, 아름다운 리마스터판을 만드는 것이 가능합니다. 90%이상의 리마스터링 작업을 AI가 대체합니다.
4K애니메이션 제작의 부담 경감
4K텔레비전의 보급에 따른 4K컨텐츠의 수요도 높아지고 있습니다. 그러나 풀 HD사이즈에서 원화를 그리는 것과 비교하면 4K사이즈에서 원화를 그리는 것이 2배 이상의 작업 시간을 필요로 합니다. AnimeRefiner를 사용하면 HD사이즈로 그린 원화를 4K에 업 컨버트 한다는 새로운 제작 방법을 실현할 수 있습니다. 이에 저비용과 고속도로 4K·8K 같은 고화질인 애니메이션을 제작할 수 있습니다. 4K·8K애니메이션 제작 예산 절감 효과가 기대됩니다.
애니매이션 Milky Panic -twelve-의 관하여
Milky Panic -twelve-은 십이지동물들과 고양이족의 싸움을 서부극풍의 터치와 독특한 캐릭터로 그린 TOMASON의 오리지널 애니메이션입니다.
TOMASON는 【고향재생 일본의 옛날 이야기】시리즈를 시작해 VP나 CM, 플라네타륨 프로그램, 3DCG모델링, 확충 영상 컨텐츠의 시나리오로부터 음악, 음향 제작, 편집까지, 다방면에 걸친 활동을 계속 전개하는 애니메이션&CG스튜디오입니다. Milky Panic -twelve-에 관한 문의는 여기로 부탁드립니다.
또한 사이트 및 Youtube에 업 로드하고 있는 동영상은 AnimeRefiner의 고해상도화의 효과를 알기 쉽게 하기 위해서, FHD의 영상을 다운 컨버트 한 후에 AnimeRefiner의 고해상도화의 처리를 하고 있습니다.