[TV]  말도 안되는 8K AI 업스케일링...그 딴게 없을 것 같지만. 있습니다.

요즘은 아무나 다 AI를 갖다 붙이는게 유행이다 보니 삼성이고 LG고 AI 라는 용어를 아무대나 갖다붙이는 것 같습니다.(실제로 얼마나 제대로 적용하는지는 의문이지만)

일단 gigiapixel ai for video같은 경우 실제로 딥러닝기반 업스케일처리를 위해서는 많은 시간을 필요로 합니다.

gigiapixel 페이지에 가니 다음처럼 설명이 되어 있네요

How long will it take to process a video?

Here is an example. On a PC with Nvidia GTX 1080. For a video from HD to 8K, it typically takes 3-4 seconds for each frame. If you upscale a video from SD to HD, it will take about 0.4 seconds for each frame.

네 보시는 것처럼 sd를 hd로 업스케일링 하는데도 각 프레임당 0.4초를 필요로 합니다.(gtx 1080으로도) 

 아마 여기 같은 경우 deep learing기반으로(아마 CNN 이겠죠?)  학습시킨 모델을 가지고 실제 영상들을  처리하겠지만 동영상을 실시간 추론(여기서는 업스케일링)  하는것이 엄청난 자원을 요구하는 작업이라 이 속도를 빠르게 하기위한 연구가 계속 이루어지고 있습니다.

저런 AI 업스케일 진짜 효과 확실합니다.
문제는 저게 실시간으로 돌아가려면 꽤나 좋은 gpu가 필요하다는 거죠.

주요 제작사들도 이런 AI에 많은 관심을 갖고 있습니다. 결국 언젠가는 최적화가 되고 원칩 솔루션으로 나와서 대형 8k tv에 적용겠죠.

그때가 되기 전에는 소스도 없고, 비싸고, 전기도 많이 먹고, 솔직히 8k는 장점이 없습니다.

좋은 정보 감사합니다.

언급하신 gigapixel AI 는 기본 가격이 100 불 정도 하며 (video Enhance AI의 경우 200 불), pc 기반에서 동작하는데 최적의 동작을 하려면 그래픽 카드 GTX 1080 이상, 10세대 인텔 cpu 혹은 AMD 라이젠 7 이상, 램 32기가 이상을 권고 합니다.

GTX 1080 의 경우 HD 에서 8K로 변환할 경우 프레임 당 4-5초 정도 소요된다고 하네요. (글을 쓰는 동안 위에 오디스님이 동일한 내용을 언급하셨네요.)

https://topazlabs.com/video-enhance-ai-users-guide/ 

이와 같이 전문적인 비디오 프로세싱을 원할 경우 별도의 장비를 통해 진행하는 것이 보편적인데, 이 경우 위와 같은 전용 SOC 가 아닌 소프트웨어적인 제품만을 사용하더라도 100만원 수준의 비용이 필요합니다. (8K 5분짜리 하나 작업하는데 24프레임이라고 하면 5 x 60 x 24 x 4 = 8시간 정도 걸리지 않나 싶습니다.)

그리고 좀 더 전문적인 실시간 8K 업스케일 제품의 경우 좀 더 많은 GPU와 컴퓨팅 파워가 필요한 것은 당연해 보입니다. (Nvidia 의 AI용 gpu나 클라우딩 컴퓨터 등..) 이런 작업을 특정 제조사가 큰 비용들이지 않고 TV 기판 내 작은 칩으로 실시간 구현했다면 칭찬받아 마땅해 보입니다만 TV가 해줄 수 있는 작업은 별도 패키지로 판매되는 제품들에 비해 제한적인 것은 어쩔 수 없어 보입니다.

요즘 업스케일링 기술이 좋아진건 맞는데 실시간으로 드라마틱한 효과는 힘들지 않나 싶습니다.

요즘 유행(?)하는 4K 업스케일링도 3080같은걸로도 오래걸리더라구여.

TV안에 들어가는 칩셋이 8K를 실시간으로 하기는 좀 시일이 걸릴듯 하네여.

 에프터 화면이  8k까진 아닌것같고

걍 영상을 좀더 선명하게 해주는것 같은데...

그게 대단한건가요?

원본소스가 좋은영상만 보면 별 필요없는거 아닌가요?

기술적인건 제가 모르고요 ㅎㅎ

영상에는 대표적인 어록이 있지요
"원판 불변의 법칙"
원 소스가 8k아닌 영상들을 이쁘게 구워 삶아 8k영상으로 표현한다면 그게 뛰어나고 좋은 화질인건지는... 글쎄요
저에겐 현재의 8k 업스케일링은 상술적인 코드로 밖에 해석되지 않네요

https://www.news1.kr/articles/?4212115

 기사내용 발췌

"아울러 포브스는 '최고의 8K TV' 부문도 발표했는데 여기에는 삼성전자의 'Q900TS' 모델이

 선정됐다. 이에 대해 포브스는 "합리적인 가격과 저해상도 제품(번역 오류 화질)에서 경험할 수

 없는 차원이 다른 화질을 제공하는 것이 강점"이라고 분석했다."

기사 내용이 사실이라면 삼성의 8K TV의 업스케일링 능력이 정말 탁월한가 보네요

"합리적인 가격과...."

가격만 조금만 더 합리적이라면 꼭 사용해보고 싶네요

제가 관련업계쪽 전문가분듷에게 귀동냥으로 들은 것은
영상 스케일링관련으로 ,NPU를 쓰기 시작했다는 내용이 있습니다. AI 스케일링 이라고 표기하는 것은 NPU를 쓰는 경우라고 생각됩니다.

콤마단위은 아니고 알고리즘방식으로 처리를 하는데, GPU보다 효율이 높다고 합니다.

쉽게 요즘Apple M1 ARM AP가
효율이 높다는 느낌으로 보시면 조금 이해가 될 수 있어보이네요

dvd를 풀HD로 업스케일링해서 볼 수 있는 기술이 제대로 구현된다면...
창고 속에 처박힌 dvd를 다시 꺼내 볼 수도 있겠네요
생각해 보니 완전 획기적인데요.

Rtx3080 겜할때 dlss적용된 게임은 진짜 업스케일링 기가막힙니다
그런거보면 업스케일링이 허구만은 아니죠