달력

4

« 2024/4 »

  • 28
  • 29
  • 30
2021. 10. 4. 03:26

AI 를 이용한 4K UHD 업스케일링 기술 Studio2021. 10. 4. 03:26

 

현재 기존의 수작업에서

AI를 이용한 4K UHD 업스케일링 기술이 발전되고 있지만

게임분야나 디지탈 미디어를 이용한 분야에서는 비약적으로 발전하고 있다.

특히 AMD, Intel, nVdia 등에서 앞다투어 게임분야를 디지털 미디어를 중점적으로 4K 업스케일링과 관련하여 앞다투어 기술공개를 하고 있는 상황이다.

최근 헐리우드에서 기존의 기술을 바탕으로하여 AI를 이용한 작업이 활발히 진행되고 있다는 사실이 알려지면서 업계의 관심을 모으고 있다.  기존의 알려진 툴들을 적용시킨 결과와 수작업을 통한 결과물을 비교하여 왔고

몇가지 세부적인 기술을 바탕으로 AI를 이용한 기존의 영화 영상 소스를 이용하여 4K Upscaing 작업을 실지로 해 본 결과 괄목할만한 결과를 확인했다.

몇가지 보완점을 개선하기 위해 지속적으로 개발 업그레이드하여 현업에 적용할 수 있는 수준까지 끌어올리고 그 결과도 기존의 업스케일 수작업 수준 이상으로 간단하게 결과물을 얻을 수 있었다. 

단계적으로 현업에 적용시키고 있다.

장점은 확실히 속도다.

수작업으로 하는 작업에 비해 AI를 이용한 자동화 작업으로 작업과정을 단순화 시키고 마지막 확인 작업으로 마무리 지을 수 있게

워크플로어를 단순화 시킨다. 

이미지 확대, PIXEL, DeNoise, Sharpen, Mask, Adjust

송출단의 피드백을 참고하여 간혹 프레임 수를 늘리다보면 예기치 않은 이슈가 발생하기도 하지만 이 상황도 조금더 업그레이드를 하여 적절한 수준의 이미지와 영상 결과물을 도출하였다.

 

 

 

UHD 업스케일링 문의 : https://bit.ly/3bxAk6x

 

비대면 카톡 일대일 문의

카페 아이디 알려주시고 공지글 확인 http://cafe.naver.com/uefi/5128

open.kakao.com

 

:
Posted by Ritz®™
2019. 3. 11. 03:38

4K 시대를 넘어 8K 시대로 Studio2019. 3. 11. 03:38


이미 8K 미디어 시대로 조금씩 나아가고 있지만

:
Posted by Ritz®™
2016. 12. 5. 23:37

4K UHD TV 가 30만원대 Studio2016. 12. 5. 23:37


4K UHD TV 가 30만원대

30만원대 가격에 UHD TV를 살 수 있는데 어느 누가 멍청하게 Full HD TV를 사겠는 가?
우물안 개구리는 강과 바다를 보지 못한다.





흐르고 있지만 아직은 조용하다.

이 연구들을 완벽하게 마무리를 지었어야 했었지만
그럼에도 불구하고 파고들면 오래 걸리지 않는다.
길어봐야 6개월
시간만 남았다.





2016년 병신년이 그렇게 지나가고 있다.

:
Posted by Ritz®™
2016. 6. 8. 15:20

Beautiful Israel 4K UHD Stock Footage Studio2016. 6. 8. 15:20



Beautiful Israel 4K UHD Stock Footage












'Studio' 카테고리의 다른 글

Just prepare  (3) 2016.07.10
너의 목소리가 보여3 인간문화재 손녀 정소리 여러분  (1) 2016.07.08
The Last Mohican  (0) 2016.06.04
Lossy or Lossless?  (1) 2016.06.02
KOBA 2016  (1) 2016.05.29
:
Posted by Ritz®™
2016. 3. 27. 08:03

4K UHD 마스터링 시스템 Studio2016. 3. 27. 08:03



http://me2.do/5qiT7heH


이 글을 읽기전에 만약 당신이 Technical Specialist 가 아니라면 이글을 읽는 것을 중단해주기 바란다.

왜냐하면 이 글만큼은 컴퓨팅 시스템에 전혀 지식이 없는 사용자를 대상으로 쓴 글이 아니기 때문이다.  

충분히 이해하지 못한 어슬픈 판단으로 배가 산으로 가는 사례를 수없이 보았기 때문에, 특히 4K UHD분야에 특화되어, 가급적이면 당신 근처에 있는 Technical Specialist 와 충분한 상의를 하는 것을 권한다.




4K UHD 마스터링 작업은 많은 인내와 시간을 요하는 작업이다.

특히 현재로서는 DIT 분야만 1억여원의 비용이 소요되는 분야이기도 하다.


그동안 영화관계자들과 모 방송사의 멀티미디어 연구소에서 고심에 고심을 거듭하며 장비를 도입하고도 부족한 점을 인정하고 자문을 구해오고 있으니 말이다.


그동안의 Full HD급 시장에서 지녀왔든 패러다임은 이미 의미를 잃었음은 모 방송사의 멀티미디어 연구소 와 영화 제작업체에서 확인을 해준 사항이다.


심지어 아시안 게임을 UHD로 송출하며 수 많은 밤을 세웠다는 관련 팀장의 소해는 충분히 이해가 가고도 남음이 있었다.


하지만 어젯밤 그 답을 내놓을 수 있는 마지막 단계의 첫걸음이 진행되었다.

스토리지 장비는 구조를 조금 변경하여 성능을 높였고 효율적인 병렬처리를 위해 기존 장비를 개조하였다.

물론 기존 방송사에 이미 납품된 이력이 있는 신뢰성 있는 장비들임은 두 말할 필요가 없다.


게다가 워크스테이션 분야만 보아도 만족할 만한 수준의 장비로 설계되었음이 어제저녁에 확인되었다.

첫걸음이라 언급한 점은 아쉽게도 스토리지 장비 도입은 조금더 기다려야 할 듯 하다.

물론 이미 북미 세계최대의 클라우드 스토리지 장비 시스템에서 테스트는 완료되었고 설치만 남은 셈이다.


이제 그 첫걸음을 떼어 단계적으로 완성단계에 이르는 과정을 밟아야 하겠지만 지금껏 수 많은 국경을 넘나들며 진행해 왔던 수백억 아니 수조원 대의 프로젝트와 손색없을 정도로 시스템 설계(?)에 집중했으므로 결과는 자명하다.


그래서 2017년이 기다려진다.




사실 Full HD 급에서 돌아가던 멀쩡한 시스템도 4K UHD 그것도 압축코덱을 사용하여 트란스 코딩을 하는데도 하드웨어는 비명을 질러 댄다.

어차피 이런 사항을 인지하고 새로운 시스템을 업그레이드 내지는 도입하여 진화해가는 모 방송사의 멀티미디어 연구소 와 모 스튜디오가 현명하긴 하지만 그럼에도 불구하고 완벽하지 않기 때문에 이런 저런 사항에 대해 문의를 해오고 있는 것이다.


다음과 같은 로그는 어차피 일부분의 사항일 뿐이어서 마스터링 시스템들의 모든 부품과 소프트웨어 구조를 어느정도 완벽히 이해해야만 모 방송사의 멀티미디어 연구소 나 스튜디오의 단계까지는 이르게 될 것이다.


컴퓨터 하드웨어는 Full HD 시대의 마인드를 고수한다고 해서 

해결할 수 있는 사항이 아닌 것을 그들은 일찍 인식하였다.  

그들은 이미 2017년을 대비해 기존의 패러다임을 버리고 꾸준히 적절하게 진화해 나가고 있다.


그동안은 잘 되었는데,,,,,  이런 용어는 더 이상 의미가 없다는 걸 그들은 너무나 잘 알고 있기 때문이다.

과거의 패러다임을 가지고 있는 한 굳이 논쟁할 이유가 없다.  

잘 되어 왔던 대로 할 수 있다면 그대로 진행하면 되는 것을 굳이,,,,,,,,



이미 ICT는 한기업 혹은 회사내지 작은 규모 스튜디오의 핵심역량의 근간이 된지는 오래되었고 년단위의 예산이 배정되고 있음은 기본이다.

이를 위해 예산배정도 하지 않을 정도라면 더 이상 논의할 가치조차 없는 것이다.  

- 따라서 아래의 글들은 해당사항이 없으니 그냥 무시하시라. 

- 오로지 진화하고자 하는 회사와 인적자원에게만 해당되는 사항일 뿐이다. 



게다가 TV 쇼핑 업체에서도 이제 4K 시대를 고려하고 있다는 것이다.


개인적으로는 CG/VFX, Color Grading 그리고 송출단 코덱 분야는 반드시 하드웨어가 기본적으로 뒷받침을 해주어야 가능한 일이다.  

아니라는 생각을 가지고 있다면 아래 글들은 당신에게는 의미가 없으므로 그냥 지나치시라.



 



.


심지어 기본적인 파일 입출력마저도 힘들어 하는 상황이 된다.

당연한 애기지만 Full HD 작업시에는 발생하지 않았던 상황이 발생하는 것이다.




제일 두려운 건 Drop Frame 과 Black Frame이다. 

- 기존 Full HD 급 미디어 생성시의 기억은 잊어버리는 것이 적절하다.  

- 어차피 하드웨어가 뒤받침이 되어주지 않는 상황이라면 이 두가지 에러가 발생할 가능성은 항상 존재한다.  

- 기본적인 환경이 구축되어지지 않는 열악한 상황에서는 하나하나 점검하며 작업을 진행하는 수 밖에 없다.  

- 비록 압축코덱을 사용함에도 불구하고 발생한다. 

- 다행인건 4K RAW 데이타 작업이 아니라는 것이 그나마 위안이 되어 줄 것이다.

 



사실 이런 부분에 있어서는 윈도우즈 운영체제보다는 UNIX나 Linux 운영체제가 경험상 탁월하다는 것은 반도체 생산 자동화 공정 시스템에서 15만개의 센서 데이타를 받아들이는 작업시에 이미 충분히 겪었음이다.  

수 mm 초 간격으로 날아오는 데이타들은 이미 4K 데이타와는 비교가 되지 않을 정도의 양이었고 당시 슈퍼 컴퓨터를 이용했어도 해결하지 못했던 경험으로 충분하다.


그 데이타에 훨씬 못미치는 4K UHD 파일 크기임에도 불구하고 4K  Sequencil 한 데이타 사이즈는 나름대로의 처리로직이 있는 것이다.


당연한 애기지만 Full HD 작업시에는 발생하지 않았던 상황이 발생하는 것이다.


이외에도 Drop Frame 등등 Film TV 분야에서 가장 많이 사용되고 있는 솔루션들을 중심으로 해결해나가야 할 과제들이 이제 점점 더 명확해지고 이미 충분히 겪었다.


4K UHD 분야는 Load Balancing, Parallel Processing(?), GPU Expansion 등등의 기술이 복합접으로 적용되어진다.

4K UHD 미디어를 생산해내기 위한 필요조건을 요약하자면 다음과 같다.


I. 최소 10G 망의 네트웍에서 데이타 I/O속도가 최소 1.2Gb/s 정도의 속도가 나오는 스토리지 장비가 있어야 한다.

- 물론 4K RAW 데이타를 포기하고 압축코덱을 사용한다면 300MB/s의 성능의 스토리지에서도 밤샘을 해가며 작업은 가능하다.

- 4K RAW 영상 작업은 10G 망에서도 최종 마스터링 작업을 10시간 정도로 추산할 정도로 긴 시간이 소요된다.

- 그러하다고 10G 의 네트웍 망이 충분하다는 것은 절대 아니다. 

- 실은 이마저도 부족함을 모 방송사의 스튜디오와 멀티미디어 연구소 그리고 모 스튜디오등에서 이미 수없이 확인한 바 있다.


II. Mac OS X, Linux, UNIX 등의 운영체제, 특히 파일시스템에 능한 계약된 스페셜리스트가 있어야한다.

- 경험상 작업도중 수없이 블랙 프레임 드랍 프레임 현상이 발생하거나 심지어는 데이타를 통째로 날리는 경우가 많으므로 상황에 따라 즉각적인 조치를 취할 수 있는 경험있는 스페셜리스트가 계약되어 있는 것이 적절하다.  


- 기존 4K UHD 마스터링 작업시에 데이타 파일이 날아간 사례는 이미 다 알고 있는 사실이고 물론 몇 분 간격으로 시스템 크래쉬가 발생하는 현상은 이미 널리 알려졌고 또한 직접 분석하여 원인파악을 하고 해결하였기 때문에 나로서는 그닥 큰 이슈는 아니다. 하지만 그럼에도 불구하고 이런 종합적인 상태분석이 취약한 곳은 분명 존재하고 이를 극복하기 위한 방안이 마련되어 있어야 함음 두말할 필요가 없다.  

    

III. 만약 Color Grading 관련 시스템 이라면 Video RAM이 최소한 6G 이상이 장착된 GPU를 사용하는 것이 적절하다.

- 압축코덱을 이용하여 렌더링을 걸어도 20분 웹드라마라 할지라도 족히 2시간 30분 작업시간이 소요된다.


IV. 4K UHD 작업공정은 최초 작업부터 설계를 하고 진행되어야 한다.  현재는 CG/VFX 분야가 난감한 숙제로 남겨져 있다.  기본적으로 렌더링 팜이 필요로 되어진다.

- Update : 워크스테이션이 충분한 성능을 내어준다면 120 Frame 정도의 작업은 할만하다는 경험적인 데이타를 기록해 둔다.


이제 그 첫걸음을 떼어 단계적으로 완성단계에 이르는 과정을 밟아야 하겠지만 지금껏 수 많은 국경을 넘나들며 진행해 왔던 수백억 내지 수조원 대의 프로젝트에 비할바 업이 설계에 집중했으므로 결과는 자명하다.


드라마 분야만 본다면 현재까지 4K UHD 방송을 목적으로 만들어진 드라마는 프로듀사, 봉순이 사랑하면 죽는 여자, 당신을 주문합니다, 응답사 1988 등등이 있다.


그래서 2017년이 기다려진다.



사용할 수 있다는 것과 실제상황에서의 적용과는 항상 거리감이 있는 것을 깨달을 수는 있지만 극복할 방법을 찾을 수 있는 건 현재로서는 아직 타사에서는 경험해본 적이 없다.  심지어 방송3사에서 조차도,,,,

그래서 사전제작 애기가 나올 수 밖에 없는 상황이다.  하지만 이 장비를 이용하게 된다면,,, 답은 이미 나와 있다.  한번 더 S TV 쇼핑몰에 적용해 본 이후 

그 두가지를 다 실행해본 나는 행운아일땨름인가?












개네들에게는 권총 정도의 수준이었지만 나에게는 역시나,,,,


개인 휴대용은 팀원을 위해서라도 장비하고 있어야 했다.  사용할 일은 드물긴 했었지만,,,,,,

그나마 위안이 된건 가볍다는 거,,,,,,,








2KM 회피기동 6초 

한번은 피할 수 있지만 두번째 세번째는 역시나 어렵다.





1Km이내 3만개의 쇠구슬을 360도 방향으로 터뜨러 항공기를 찢어 버린다.  굳이 타격하지 않아도 된다는 장점 이외에도 무시무시한 핵탄두 탑재가 가능한 미쓸이다.





이건 노동 1호

시리아에서 쏘아올린 노동 1호에 아파트 두체가 완파 되어 내 동료들이 희생되었을 때도 난 울 수 없었다.


'Studio' 카테고리의 다른 글

NAB 2016 - 부가서비스 대전  (2) 2016.04.21
단 한번만이라도  (0) 2016.04.15
당신을 주문합니다 4K UHD 작업  (0) 2016.03.21
설현 with AOA (Seol Hyun)  (0) 2016.03.11
응답사 1988의 이면 이야기  (2) 2015.12.26
:
Posted by Ritz®™


봉순이 - 사랑하면 죽는 여자 4K UHD 웹드라마

역시나 류감독,,,, T T 


김유미, ‘사랑하면 죽는 여자 봉순이’ 캐스팅






:
Posted by Ritz®™
2015. 10. 8. 01:00

4K 생방송 - Live 4K Workflow Studio2015. 10. 8. 01:00


4K 생방송 - Live 4K Workflow



6


2KG


https://vimeo.com/74835683


2시간 9분 15초


https://vimeo.com/84302289



하 4K uhd 항공 촬영만해도 


https://store.3drobotics.com/products/solo-gimbal



쿼드콥트를 DIY로 만들면 충분히 경제성이 있다.

https://3drobotics.com/software/



슈퍼 앰불런스로 만들어 위급한 환자를 수송할 수 있다.






http://www.skydigita.com/en/ProductView.asp?id=9

'Studio' 카테고리의 다른 글

LG Ucloud 앱 서비스 중단  (0) 2015.10.13
마다가스카르 커피숍  (0) 2015.10.10
드라마나 현실이나  (0) 2015.09.28
Breaking Bad  (4) 2015.09.26
유일랍미(You"ll love me)  (6) 2015.09.02
:
Posted by Ritz®™
2015. 5. 11. 21:17

4K 드라마 방송을 위한 재정비 Studio2015. 5. 11. 21:17


4K 드라마 방송을 위한 재정비
한국에서
일본에서
그리고,,,,


모든 작업은 시스템 안정성을 기본적으로 고려한다.

기본적으로 각 카메라 기종에 적절한 칼라반영을 통하여 담당PD와 촬영감독의 의도를 충분히 반영한다.

- 4K 제작용이므로 색깔에 더더욱 민감해져버려서 이제는 제대로 된 색감을 반영해야 한다.
- 실제로 반영전과 반영후는 엄청난 차이가 난다.

1. HW 성능을 Maximizing

- 이건 IT 시스템이 아니라 Rich Media를 다루는 동영상 제작 시스템임을 끊임없이 고려한다.


2. OS X 와 윈도우즈 성능을 각각의 툴에 최적화하여 튜닝

- 시스템 안정성 고려

- 기존 운영체제 튜닝 방법으로 진행하다간 쌍코피 터진다.


3. 각 편집툴과 DI 툴의 최대성능을 위한 튜닝

- 최하 80FPS는 나와주어야 하고 최대 120FPS정도는 거뜬히 넘나들 수 있도록 카스터마이징 한다.

- 신기한 것이 거의 기가네트워크 망 디스크 성능 수치와 유사해서 기억하기 쉽다.

- AVID Media Composer/ISIS

- DaVinci Resolve

- PABLO

- Flame Assistant

- Flame

- FCP Studio

- FCPX

- Nuendo

- Logic X

- Nuke

- MAYA

- Etc



4. 언제나 그러하듯 최소한의 투자로 최대의 성능을 끌어내어야 한다. 


5. 스튜디오의 특수성을 고려한다. (NAS, ISIS, 1/10G Network Bandwidth, etc) 


​6. RAW 데이타를 이용하여 칼라그레이딩 하고 최종 방송분을 방송국에 전달한다.


* 하 컷이 빠진다.  편집진과 긴밀한 의사소통이 필요로 되어지고,,,,,  Round  Trip으로 해결되어야 할 사항이다. UHD RAW 데이타 분석과 편집소스 분석을 통해 해결해나가야만 한다.  완벽한 WORK FLOW를 위해서,,,,




:
Posted by Ritz®™