RT/DLSS/Sharpen 설명

RTX 50 시리즈 vs. RX 9000 시리즈

공지 40년치 ATI-AMD 하이엔드 GPU 컬렉션

FP32

4.1k

06-30
공지 포르자 호라이즌 6, 44종 그래픽카드 벤치마크

QUASARZONE

3.3k

05-22
공지 퀘이사존 규정(25.08.04)

퀘이사존

54k

11-08

11 RT/DLSS/Sharpen 설명 ReLU 16 7981 2020.11.14 20:16

<p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">앞서 귀찮은것도 있고, 직접적으로 본문글을 작성하는 경우는 적은편인데, 기술관련 댓글 다는 과정에서 난독에 지적질에 노벨상 드립까지 받고 기분이 업되서, 관련 정보를 정리한후 입을 싹 다물기로 결정하였습니다.</span></p><p><b style="font-weight:normal;" id="docs-internal-guid-3ee4b5dd-7fff-4db8-ba0d-1cd49b4f5e3a"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">RT & DLSS & Sharpen 기술들에 대하여 가끔 잘못 알고 있으신분들이 보입니다. 때문에 서로에게 도움이 되고자 관련 정보를 간략하게 작성해보았습니다. 이왕 제품에서 지원 무료 기술인데 잘 알고 쓰면 좋잖아요.</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">어디까지나 저 스스로 이해하고 있는 수준에서의 내용이기에, 잘못 이해하고 있는 부분이 있으면 바로 알려주시면 감사하며, 실사용이 아닌 발표자료들을 인용하여 작성되었기에, 실제 체감이랑은 다를수도 있습니다.</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">(저 징하게 글 못씁니다. 쓰고 봐도 못썼네요. 답이 없어요. )</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">각각에 대하여 가볍게 정의하자면 아래와 같습니다.</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">RT (RayTracing) : 빛이 물체 표면에 반사되는 경로를 추적하는 기법</span></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">Sharpen : 선명도를 향상시켜주는 필터 및 업스케일링 기법</span></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">DLSS (Deep Learning Super Sampling) : Deep Learning을 기반으로한 업스케일링 기법</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></p><p><b style="font-weight:normal;"><font style="color: rgb(255, 255, 255);"><br></font></b></p><p dir="ltr" style="line-height:1.38;margin-top:0pt;margin-bottom:0pt;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; text-decoration: none; vertical-align: baseline; white-space: pre-wrap; color: rgb(255, 255, 255);">RT (레이트레이싱) </span></p><p><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap; color: rgb(255, 255, 255);">말그대로 빛의 경로를 추적하는 기술입니다. 문제는 무수한 빛줄기를 추적하니 계산량이 많습니다. 때문에 실시간 처리가 어려웠는데, 여러 기법들과 HW의 도움으로 어느정도 해소된듯 싶습니다. </span></span></p><p><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></span></p><p><span style="color: rgb(255, 255, 255);"><iframe frameborder="0" src="//www.youtube.com/embed/dXbjmF--QVc" width="640" height="360" class="note-video-clip"></iframe><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap;"><br></span></span></span></p><p><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap; color: rgb(255, 255, 255);">위 영상은 엔비디아 사례는 아니고 인텔의 RT입니다면, 그림 설명이 잘되어있습니다. </span></span></p><p><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap; color: rgb(255, 255, 255);">세부적인 기술들은 다르겠지만, 큰 갈래는 다르지 않을까 싶어 올려봅니다.</span></span></p><p><span style="font-weight:normal;"><span style="font-size: 11pt; font-family: Arial; font-weight: 400; font-style: normal; font-variant: normal; white-space: pre-wrap; color: rgb(255, 255, 255);">(2:20 부터 보시면됩니다.)</span></span></p><p dir="ltr" style="margin-top: 0pt; margin-bottom: 0pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; line-height: 1.38; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><br></span></p><p dir="ltr" style="margin-top: 0pt; margin-bottom: 0pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; line-height: 1.38; font-family: NanumBarunGothic, sans-serif;"><span style="font-style: normal; font-variant: normal; font-weight: 400; font-size: 11pt; font-family: Arial; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="font-family: Arial; font-size: 11pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="font-family: Arial; font-size: 11pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);">Sharpen (샤픈필터)</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="font-family: Arial; font-size: 11pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><span style="font-family: Arial; font-size: 11pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap;">여기서부터 조오금 복잡해집니다. </span><span style="font-family: Arial; font-size: 11pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap;">보통 영상쪽에서 필터는 아래와 같은겁니다.</span></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/976ecb0d1bc237a69c5dccb97a6c0e46.jpg"></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);">보통 그림 상단처럼 미리 정의된 마스크가 있고, 이를 이미지에 적용하는겁니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);">샤픈 필터도 종류가 많습니다만, 지금 AMD랑 NVIDIA에서 이야기하는 Sharpen 필터는  <span style="font-family: NanumBarunGothic, sans-serif; font-size: 16px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">CAS (Contrast Adaptive Sharpen) 필터입니다. Contrast를 기반으로 위의 마스크가 매번 바뀌는게 특징입니다.</span></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="font-family: NanumBarunGothic, sans-serif; font-size: 16px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; color: rgb(255, 255, 255);"><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/e5a6f6abea27bf0500fed037e3572f1f.webp" style="width: 100%;"><span style="font-family: NanumBarunGothic, sans-serif; font-size: 16px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></span></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap; color: rgb(255, 255, 255);">확대해서 보면 꽤 잘나옵니다. </span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255); font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;">(75%는 샤픈 강도 설정입니다. 0%은 약하게 100% 강하게, 0%라고 적용X가 아닙니다.)</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/23b823aeea3460e2abb6dbd46a2df82f.jpeg" style="width: 100%;"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;"><br></span></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;">DLSS 1.0 과 비교해도 잘나옵니다.<br></span><br></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/8f776d0a164e21d364bed726e69fd4a5.webp" style="width: 100%;"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;"><br></span></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">문제는 자료중에 이런게 있습니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">왼쪽은 2160p 인데 오른쪽은 1440p 입니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">단순히 출력물이 2160p 1440p 라는 의미가 아니라, 1440p to 2160p로 업스케일링 한 결과입니다.</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">CAS는 단순 샤픈필터이기도 합니다만, 업스케일링도 됩니다.</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">1440p 결과물이랑 2160p 결과물이랑 큰차이가 나지 않습니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">그렇다면 이를 통해 FPS 이득을 얻을수 있죠.</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><img src="https://img2.quasarzone.com/editor/2020/11/14/20495d25a3ff6000ec1af7c40d525062.jpg" style="width: 100%;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">좀 옛날 자료로서 DLSS 1.0 과의 비교 자료입니다.<br>위 두개를 보시면, Sharpening vs Upscaling 을 보실 수 있는습니다.<br>전자는 2160p 출력물에 + CAS</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">후자는  1440p 출력물을 CAS로 업스케일링 한것으로 보시면됩니다. </p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">(정확히 1440p 인지는 모르겠습니다. 2160p 보다 작은것은 확실합니다.)</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">이렇듯 TAA(Native 4K + TAA)와 비교하면, DLSS 처럼 프레임 이득을 꽤 챙길 수 있습니다.</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">자세하게 코드가 궁금하시면 아래 링크를 가시면됩니다. 필터 자체는 꽤 단순합니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);"><a href="https://github.com/GPUOpen-Effects/FidelityFX-CAS/" target="_blank">https://github.com/GPUOpen-Effects/FidelityFX-CAS/</a><a href="https://github.com/GPUOpen-Effects/FidelityFX-CAS/" target="_blank"></a></span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(204, 204, 204); font-family: NanumBarunGothic, sans-serif; font-size: 16px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">코드 뜯어서 개인적으로 다른쪽에 사용중인데 일반적인 환경에서 멋지게 동작합니다.</span><br style="font-size: 16px; color: rgb(204, 204, 204);"></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">( 이거 처음 봤을때, 신기했던게 아직도 마스크 기반 영상처리로 이정도 성능을 뽑을수 있구나 감탄했습니다. )</p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><br></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">여기까지보면 다 좋습니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">문제는 CAS 결과가 좋아도, 결국 마스크 기반이거든요. 없던 패턴을 만들어내지는 못합니다. </span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">그래서 한계가 있습니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);">입력에 왜곡 및 노이즈가 있으면, 그거대로 선명하게 만들죠. 픽셀을 늘릴때 없는 패턴을 채워넣지도 못합니다.</span></p><p style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;"><span style="color: rgb(255, 255, 255);"><br></span></p><p dir="ltr" style="margin-top: 0pt; margin-bottom: 0pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; line-height: 1.38; font-family: NanumBarunGothic, sans-serif;"><span style="font-style: normal; font-variant: normal; font-weight: 400; font-size: 11pt; font-family: Arial; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></p><p dir="ltr" style="margin-top: 0pt; margin-bottom: 0pt; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; line-height: 1.38; font-family: NanumBarunGothic, sans-serif;"><span style="font-style: normal; font-variant: normal; font-weight: 400; font-size: 11pt; font-family: Arial; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></p><div><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);">DLSS (Deep Learning Super Sampling)입니다. SS (Super Sampling) 하는데 DL로 하는겁니다. 간단하죠.</span></div><div><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></div><div><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);">SS이다보니. 여기서 흔히 착각들을 많이 하십니다.</span></div><div><span style="color: rgb(255, 255, 255);">TAA 처럼 단순히 AA 해주는것도 아니고, 영상 디테일, 선명도를 향상시켜주는 알고리즘이 아닙니다.</span></div><div><span style="color: rgb(255, 255, 255);">해상도를 늘려주는거에요. 픽셀 자체를 늘립니다. 이 과정에서 부수적으로 AA도 되고, 디테일도 살아나며, 선명도가 증가합니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">초기 개발을 시작할 당시 컨셉은 모르겠어요. </span></div><div><span style="color: rgb(255, 255, 255);">결과적으로는 적은 연산량으로 고해상도 결과를 얻는 엔비디아로서는 이상적인 결과를 얻은거죠.</span></div><div><span style="color: rgb(255, 255, 255);">예를들어 2160p 게임을 60FPS 로 연산하는데는 100 + a (TAA 같은 옵션)의 연산량이 들어갑니다.</span></div><div><span style="color: rgb(255, 255, 255);">DLSS를 활용하면 1440p 연산후 DLSS로 2160p로 뻥튀기, 최종적으로 70 정도의 연산량이 들어갑니다. </span></div><div><span style="color: rgb(255, 255, 255);">재밌는건 전자보다 후자 디테일이 더 선명하다는거죠. CAS와 유사합니다./</span></div><div><span style="color: rgb(255, 255, 255);">이에 대한 부분은 2.0 에서 자세히 이야기하겠습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">세부 구조를 보자면,  <span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;">DL 기반으로 Game에 멋지게 적용한 사례다보니 내부 구조를 좀 보고 싶은데, 사실 못찾았습니다.  </span><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;">대략적인 정보와 알고있는것으로 유추하면 아래와 같습니다.</span></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">제가 알고 있기로는 DLSS 1.0 은 거창하지만 프레임 한장 한장에 대한 SR (Super Resolution) 입니다.</span></div><div><span style="color: rgb(255, 255, 255);">물론 세부적 적용은 크게 다를겁니다. </span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">SR이 무엇이냐. 아래와 같은겁니다.</span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/5c0e6e9bc203528480e86e6c29bf3b63.jpg" style="width: 50%;"></span></div><div><span style="color: rgb(255, 255, 255);">축약해서, 저해상도를 고해상도로 변환입니다. (보통 x2, x3, x4 이런식으로 키웁니다.)<br>( 보통 저해상도가 더 작다보니, 위처럼 옆으로 붙여 보이기 위해서 저해상도를 리사이징하는게 보통입니다. )</span></div><div><span style="color: rgb(255, 255, 255);">문제는 이건 한장한장에 대한 SR입니다. 다음 프레임 고려를 하지 않습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/6091a874b0307b804a5f3d35694ea6e8.jpg" style="width: 100%;"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">덕분에 왼쪽같은 노이즈 있는 프레임들에 꽤 취약하며, 왜곡이 심해요. 연산도 여전히 많아요.</span></div><div><span style="color: rgb(255, 255, 255);">위키 설명을 보면 DLSS 1.0은 기존 MSAA 및 TSAA 필터와 궁합이 최악이다 하는데, 이게다 SR 기반이라 그런거라고 생각합니다.</span></div><div><span style="color: rgb(255, 255, 255);">DLSS 1.0 초기에 품질은 품질대로 FPS도 더 안좋았던 이유가 있습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></div><div><span style="color: rgb(255, 255, 255);"><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap;">DLSS 2.0</span><br></span></div><div><span style="color: rgb(255, 255, 255);">이런저런 탈도 많던 DLSS 1.0 입니다만, 2.0부터 완전 환골탈태 했습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/abf580604d3224f5fd3204e28eb7e8a2.png" style="width: 100%;"><br></span></div><div><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap; color: rgb(255, 255, 255);"><br></span></div><div><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap; color: rgb(255, 255, 255);">얼마전 글에서 보셨던 사진입니다만, 디테일 및 FPS가 확 올라갔죠. 이외에도 많습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">엔비디아 GTC 2020 DLSS 발표 자료입니다.</span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/e9a0cb5b496c679df1c020f172bd5b16.jpeg"></span></div><div><span style="color: rgb(255, 255, 255);">각각의 최종 결과물은 1080p 해상도의 프레임입니다.</span></div><div><span style="color: rgb(255, 255, 255);">540p (DLSS 2.0) == 540p 결과를 DLSS 2.0 으로 1080P 로 뻥튀기로 생각하시면 됩니다.<br><br></span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/1f93fa9c0400eab14d0bdf34112b0a28.png"><span style="font-family: Arial; font-size: 14.6667px; white-space: pre-wrap;"><br></span></span></div><div><span style="color: rgb(255, 255, 255);">위와 동일합니다. 죄송하게도 32spp Ref는 모르겠습니다.</span></div><div><span style="color: rgb(255, 255, 255);">아무튼 위 자료를 믿자면 매우 훌륭합니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/789f795ac36874c9fbda3217f84fb981.png"><br></span></div><div><span style="color: rgb(255, 255, 255);">동일합니다. DLSS 2.0 결과가 더욱 선명합니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">이게 꽤 재미있는 결과입니다만..</span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/88bb965d4e78493ca4dcc0be4a3be59d.jpg" style="width: 100%;"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">두가지 새로운 용어가 나왔습니다. ESRGAN / BICUBIC</span></div><div><span style="color: rgb(255, 255, 255);">BICUBIC은 일반적인 영상처리에서의 리사이징 알고리즘입니다. 대충 가장 흔한겁니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">문제는 ESRGAN입니다. 이게 SR이거든요. 이쪽에서는 꽤 유명합니다.</span></div><div><img src="https://img2.quasarzone.com/editor/2020/11/14/9253be73b13552e61773d8f29121a8b8.jpg"><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255); font-family: NanumBarunGothic, sans-serif; font-size: 16px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400;">예전에 이슈였던 고전 Doom 업스케일 텍스쳐팩이 ESRGAN 결과물이거든요.</span><span style="color: rgb(255, 255, 255);"><br></span>링크 - <a href="https://www.doomworld.com/forum/topic/99021-doom-neural-upscale-2x-v-10/" target="_blank">Doom Neural Upscale 2X</a></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">아무튼 결과적으로 DLSS 2.0 이 더 좋습니다.</span></div><div><span style="color: rgb(255, 255, 255);">여러분은 이것만 알면됩니다. DLSS 2.0 이 더 좋다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">그런데 여기까진 반토막이고, 이후 실제 게임에 적용하기 위한 방법 및 이를 통해 랜더링 과정에서 일반적으로 발생하는 왜곡들을 효과적으로 잡는 방법까지 있는데, 이부분은 저도 이해가 부족하기 때문에 넘어가겠습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">그렇다면 품질만 좋지면 끝이냐, FPS 가 반토막나면 의미가 없습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/25c199c78c2ae914ad2bceddf859418e.jpeg" style="width: 100%;"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">훌륭하게도, 2160p 결과를 만듬에 있어서, 2160p 대신 1440p를 랜더링하고 DLSS로 뻥튀기하니까. </span></div><div><span style="color: rgb(255, 255, 255);">연산량이 짜잔 줄었습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><img src="https://img2.quasarzone.com/editor/2020/11/14/2471d7ffe5e348b75971047bdd3d63f6.webp"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">DLSS에는 3가지 옵션이 있습니다. </span></div><div><span style="color: rgb(255, 255, 255);">Performance / Balanced / Quality</span></div><div><span style="color: rgb(255, 255, 255);">각각은 알고리즘적 의미로 보자면 A 크기의 해상도를 출력해야할때</span></div><div><span style="color: rgb(255, 255, 255);">Performance = A/4 로 렌더링 후 x4 뻥튀기</span></div><div><span style="color: rgb(255, 255, 255);">Balanced        = A/3 로 렌더링 후 x3 뻥튀기</span></div><div><span style="color: rgb(255, 255, 255);">Quality            = A/2 로 렌더링 후 x2 뻥튀기</span></div><div><span style="color: rgb(255, 255, 255);">당연히 Quality가 가장 무겁고, 가장 예뻐야합니다. </span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><div style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 14.6667px; font-family: Arial; white-space: pre-wrap; color: rgb(255, 255, 255);">--------------------------------------------------------------------------</span></div><div style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 16px; font-family: NanumBarunGothic, sans-serif;"><span style="color: rgb(255, 255, 255);"><span style="font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; font-size: 14.6667px; font-family: Arial; white-space: pre-wrap;"><br></span><br></span></div></div><div><span style="color: rgb(255, 255, 255);">샤픈 필터랑 비교하자면, 필터들은 뭔짓을해도 없는것을 채워넣지는 못합니다. 어디까지나 잘 안보이는 디테일을 선명하게 해줄뿐입니다.</span></div><div><span style="color: rgb(255, 255, 255);">DLSS는 반대로 없는것도 채워넣을수 있습니다. 반대로 왜곡과 같은 노이즈도 만들수 있습니다. </span></div><div><span style="color: rgb(255, 255, 255);">1.0이 그 실패 사례입니다. 2.0은 그부분을 개선해냈습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">뭐 장단점들이 있겠지만, 그부분을 감안해도 현재 DLSS 2.X가 가장 훌륭한것 같습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">AMD 및 MS의 기술은 아직 본적이 없어서 말할수는 없으나, 1.5 수준은 충족하지 않을까 싶습니다.</span></div><div><span style="color: rgb(255, 255, 255);">1.0 은 당장에라도 할수 있겠지만, 단점이 너무 많고,</span></div><div><span style="color: rgb(255, 255, 255);">2.0 은 방법론은 이미 대충 공개 됬으니, 금방 따라갈수는 있겠지요. </span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><span style="font-family: Arial; font-size: 14.6667px; font-style: normal; font-variant-ligatures: normal; font-variant-caps: normal; font-weight: 400; white-space: pre-wrap;">--------------------------------------------------------------------------</span><br></span></div><div><span style="color: rgb(255, 255, 255);">이외에도 사실 작성해야하는 내용들이 많습니다만. 슬슬 귀찮아졌습니다.</span></div><div><span style="color: rgb(255, 255, 255);">이정도로도 일반적으로 제품 구매에 있어 필요한 정보로는 충분하구요.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">여러분은 아래만 기억하시면됩니다.</span></div><div><span style="color: rgb(255, 255, 255);">1. RT는 DLSS와는 직접적인 관계가 없다.</span></div><div><span style="color: rgb(255, 255, 255);">2. Sharpen 중에서 CAS 필터는 선명도 증가 및 프레임 개선 효과를 얻을수 있다.</span></div><div><span style="color: rgb(255, 255, 255);">3. DLSS : 오전근무만 하는 사람이 하루종일 일하는 사람이랑 비슷하거나 더 좋은 결과 내는거다.</span></div><div><span style="color: rgb(255, 255, 255);">4. DLSS 1.0 : 오전근무만 하는사람인데 일을 효율적으로 처리를 못하는데, 결과도 엉망이다.</span></div><div><span style="color: rgb(255, 255, 255);">5. DLSS 2.X : 일을 너무 잘한다. 오전중에 일을 다 끝내놨는데 120%를 해놨다. 다른일도 시켜보자.</span></div><div><span style="color: rgb(255, 255, 255);">6. DLSS 1.0 < Native < Sharpen << DLSS 2.X 정도로 이해하면됩니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">글 작성 초기에는 꿀꿀한 기분으로 작성중이였는데, 자료 정리하면서 머리속에서 다시 한번 정리할수 있는 기회였기에 도움이 되었습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">참 글 못썼습니다만. 도움이 되면 좋겠구요. 혹여 잘못 이해하고 있는 부분 있으면 부탁드리겠습니다.</span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);"><br></span></div><div><span style="color: rgb(255, 255, 255);">DLSS 2.0에 대해서 기술적으로 자세하게 알고싶으신분은 아래 영상 보시면됩니다.</span></div><div><span style="color: rgb(255, 255, 255);"><iframe frameborder="0" src="//www.youtube.com/embed/d5knHzv0IQE" width="640" height="360" class="note-video-clip"></iframe></span><br></div>

ReLU

행성: 슈퍼지구

포인트: 24,835 exp

작성물 댓글

모든회원 자기소개 펼치기

댓글: 16개

RTX 50 시리즈 vs. RX 9000 시리즈

공지 40년치 ATI-AMD 하이엔드 GPU 컬렉션

FP32

4.1k

06-30
공지 포르자 호라이즌 6, 44종 그래픽카드 벤치마크

QUASARZONE

3.3k

05-22
공지 퀘이사존 규정(25.08.04)

퀘이사존

54k

11-08

전체 질문 잡담 정보

추천	분류	제목	닉네임	조회수	날짜
0	질문	6900xt 제로팬 계속 껏다 켜졌다 하네요	lllKarmalll	28	29분 전
0	질문	5090 어마, 게임시 1500rpm시 하드디스크 소리 나시는분 있나요? 7	피아노의숲	94	1시간 전
0	사이다	지지대 설치 1	user_1138383	57	1시간 전
0	잡담	5080 amp 언더볼팅 0.875v 2820mhz +3000 정착	shane0	59	1시간 전
2	잡담	(뻘소리)DLSS RR에 관한 그분의 주장? 7	MouseSports	149	1시간 전
1	잡담	5090화스트랄 팔려고해도 4	하료쵸	233	2시간 전
0	질문	컴퓨터 as받고 발견한 결함 질문드려요 2	DDgE	141	3시간 전
1	잡담	이엠텍 미라클 5080 Crossbar 클럭 = 2415Mhz & 스틸노마드	KKM	105	4시간 전
1	사이다	5080 불칸 고주파인가요? 2	먼취	145	6시간 전
1	질문	그래픽카드 질문입니당 2	기러기라성	132	8시간 전
1	질문	9070XT 제로팬 끄는게 정석 맞나요? 1	babyface	231	9시간 전
0	질문	알리 5080 클릭나라 다나와없음 질문있습니다 6	볼트형어마줘용	207	10시간 전
1	잡담	9070xt 타이치 괜찮나요? 5	하료쵸	244	12시간 전
1	사이다	fhd 모니터인데 5070ti 5080 뭐가 좋을까요 6	user_794069	311	13시간 전
5	잡담	PT&RR 시 DLAA와 DLSS 성능은 화질 차이가 없을까? 38	MouseSports	662	13시간 전
1	질문	ZOTAC RTX 5080 AMP 슈플 조합이슈 질문 2	Aga	228	13시간 전
0	질문	아드레날린 설치하면 서브모니터 안됨 9	Kogod	157	13시간 전
5	잡담	기가바이트 9070XT 구입해서 사용해봤습니다. 5	조립분해하자	433	14시간 전
0	질문	그래픽카드 커넥터 핀전압 차이 질문 2	user_1145337	120	14시간 전
1	질문	아드레날린 필수인가요? 3	Kogod	181	14시간 전
0	질문	고수님들 좀 봐주세요^^;; 1080 타스점수 너무 낮음	인페르날	143	14시간 전
2	정보	프래그마타 4K 패스트레이싱 RR DLSS품질 VS DLSS성능 화질비교 33	산티산티	583	14시간 전
1	잡담	16핀 케이블 때문에 마닉 좋게 보이네요? 2	60지옥	193	14시간 전
2	질문	9070xt 퓨어 니트로 관련 질문 5	user_865021	204	15시간 전
2	사이다	이렇게 되면 GPU 무조건 바꿔야 하나요? 11	user_1097197	632	15시간 전
14	잡담	당근에서 글카 네고x 찔러보기x 칼 차단 한다는 분들.... 36	ROG매트릭스	1.7k	15시간 전
0	질문	[그래픽카드 12+4핀 케이블 질문] 케이스, 그래픽카드 케이블 간섭 3	user_1109014	125	16시간 전
0	질문	마블즈 스파이더맨 2 이거 맞나요?? ft 5090 4	user_1054849	246	16시간 전
0	질문	이거 코일와인?현상 인가요? 2	user_1149440	168	16시간 전
3	질문	5080 불칸과 아스트랄 고민 되는데요 ~ 4	리스너비	287	16시간 전