(SVP4) 3060으로 RIFE AI 실시간 프레임 보간하기

그래픽카드: 지포스 40 vs. 라데온 7000 그리고 인텔 A770 응??

공지 그래픽카드 게시판 블라인드 처리 방침 안내

퀘이사존

6k

12-14
공지 퀘이사존 전체 게시판 공통 규정(23.03.02)

퀘이사존

25.4k

11-08

40 (SVP4) 3060으로 RIFE AI 실시간 프레임 보간하기 마젤란행성 55 5346 2023.02.08 19:01

SVP4에 RIFE AI 관련 페이지를 보는데 전에는 없던 TensortRT를 이용한 실시간 보간 방법이 생겼더라고요.<img src="https://img2.quasarzone.com/editor/2023/02/08/951a0569109b019d60d68403fecbbb63.png" alt="퀘이사존" style="width: 100%;"> 작동 원리가 TensortRT를 이용해서 처음에 해당 영상 해상도와 관련된 캐시를 생성하여 이후 같은 해상도의 영상에서는 이미 만들어 놓은 캐시를 이용하여 GPU 부하를 줄이는 방법이더라고요. 사양도 제법 낮은 GPU로 된다고 써있길래 적용을 해봤는데 확실히 GPU 부하가 크게 줄어드는 모습을 보였습니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/4d930bf19b389bc26ea9d4b104867d0d.png" alt="퀘이사존"> <TensortRT Off><img src="https://img2.quasarzone.com/editor/2023/02/08/ecf0ba79ab5c94033ecaf16126f841d2.png" alt="퀘이사존"><TensortRT On> 보다시피 TensortRT 없이 실시간 보간을 할 때는 GPU 점유율이 80~90%까지 잡아먹었는데 TensortRT를 사용하니 점유율이 50%를 넘기지 않더군요. 그래서 이제 RIFE AI로 실시간 프레임 보간이 어느정도는 쓸 수 있게 되었다는 생각이 들어서 팟플레이어로 TensortRT 사용방법을 알려드리고자 이 글을 쓰게 되었습니다. 자세한 설치 방법은 <a href="https://quasarzone.com/bbs/qb_figure/views/161265" target="_blank" style="">이 글(링크)</a>을 참조해주시고 저는 TensortRT 적용하는 방법만 간락하게 쓰겠습니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/9d2c6a7e89a800249eeb6e4667a8557f.png" alt="퀘이사존" style="width: 50%;">우선 TensortRT는 VapourSynth 필터에서만 작동하기 때문에[VPS_64] Core for VapourSynth 64-bit [VPS_64][BETA] RIFE/TensortRT interpolation engine [DS_64][VPS_64] RIFE interpolation engine이 3가지를 설치하셔야합니다. 설치가 완료되면 SVP4 Pro를 실행하여 RIFE AI 프로필로 전환해주세요. <img src="https://img2.quasarzone.com/editor/2023/02/08/51e23e83da6adc8d1a797a67e4d9cd2c.png" alt="퀘이사존" style="width: 50%;">TensortRT를 설치하면 전에는 없던 Engine 옵션이 새롭게 추가되어있는데이걸 NVIDIA TensortRT로 전환해줍니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/a411ff23dcaaaa1629adb80d7318347c.png" alt="퀘이사존" style="width: 50%;">이렇게하고나면 상단에 프레임 관련만 건드려주셔도 되지만 옵션 중에 유용한 것도 있으니 바꿔보시는 것도 괜찮습니다.<ul><li>GPU threads - GPU 쓰레드 수를 늘리는 옵션입니다. 이왕이면 수가 많은게 처리속도가 빠를 것 같아서 전 최대치인 4로 늘려주었습니다. 참고로 4090은 굳이 3 이상으로 올릴 필요가 없다고 개발자가 써놓았네요. 과.. 과연 4090! </li></ul><ul><li>AI model - 4.4과 4.6을 선택할 수 있는데 둘의 차이점은 4.6쪽이 보간 품질이 더 좋은 대신 10~15% 더 느리고 4.4은 비디오 메모리 사용량이 적어서 4K 보간할 때 8GB 비램 GPU도 사용 가능하다고 하네요.</li></ul><ul><li>GPU device - 현재 장착된 GPU 디바이스를 선택하는 옵션입니다.</li></ul><ul><li>Performance boost - 해상도마다 별도의 캐시를 생성하는 작업을 하는 대신 성능을 5% 향상 시키고 메모리 사용량을 줄여주는 옵션입니다. 이게 무슨 소리냐면 이 옵션이 비활성화 상태일 때는 1920x1080 영상을 처음 실행하면 2560x1440 해상도 까지 커버되는 캐시를 생성시켜서 2560x1440이하 영상은 모두 이 캐시 파일로 실시간 보간을 하는데 반해 이 옵션을 활설화하면 각 해상도 마다 캐시 파일을 생성시키는 작업을 진행하게 됩니다. 즉 2560x1440 영상을 실행하면 2560x1440용 캐시를 1920x1080 영상을 실행하면 1920x1080용 캐시를 따로 만든다는 의미입니다. </li></ul><ul><li>Scene change threshold - 인접한 두 프레임 간에 장면 변화가 있는지 감지하여 프레임이 같거나 완전히 다르면 보간을 하지않는 걸 조절하는 옵션입니다. 값이 클수록 장면 변화를 감지 못할 때 보간 아티팩트(뭉개짐) 발생이 높아지고 낮을 수록 장면 변화를 감지할 때 스터터링(보간된 프레임 대신 반복된 프레임)이 발생할 확률이 높아집니다.</li></ul> 이제 SVP에서는 할 것은 전부 다 했으니 팟플레이어에서 해야할 설정을 합니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/f8da9fffc42c0de1552e349703d6347b.png" alt="퀘이사존" style="width: 50%;"> 내장 코덱/DXVA 설정에 들어가셔서  DXVA2 Copy-Back이 D3D11 자동이나 쓰고 있는 GPU로 설정이 되어있는지 확인을 합니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/394cf3314061dd6a4104c74296d841c9.png" alt="퀘이사존" style="width: 50%;"> 그러고선 전역 필터 우선 순위로 가셔서 시스템 코덱 추가로 VapourSynth 필터를 추가한 다음 최우선 사용으로 설정해주시면 팟플레이어에서의 설정도 끝이납니다. <img src="https://img2.quasarzone.com/editor/2023/02/08/bbf6f7a05de1e08f9e3647ccfeb898fd.png" alt="퀘이사존" style="width: 50%;"> 이제 아무 영상이나 실행시키면 처음에 위와 같이 CMD 창이 뜨면서 캐시를 생성하는 과정이 진행되니 창이 자동으로 닫힐 때까지 기다려 주세요. 생성된 캐시는 아래 경로에 11MB정도로 저장됩니다. C:\Users\사용자이름\AppData\Roaming\SVP4\cache\Program Files (x86)\SVP 4\rife\models\rife Performance boost를 만약 저처럼 키셨다면 해상도 별로 캐시를 만들어야 할테고 그게 아니면 1440p를 넘어가는 세로로된 해상도의 영상을 실행시키지 않는 한 캐시 생성을 추가로 하지는 않을겁니다. 만약 캐시 생성이 안된다면 Performance boost 키시는 걸 추천합니다.비디오 메모리가 발목을 잡는지 제대로 생성이 안되는 경우가 있습니다. 3080 10G는 1440p 넘어가는 영상에서 그러한 증세가 있네요. 그리고 만약에 RIFE AI 프로필이 실행이 되지 않고 기본 프로필이 우선적으로 실행된다면 저처럼 프로필 실행 조건 추가를 눌러서 팟플레이어가 켜질 때마다 작동되게 만들어 두시면 문제없이 작동할 겁니다.

마젤란행성

행성: 슈퍼지구

포인트: 18,274 exp

작성물 댓글

모든회원 자기소개 펼치기

댓글: 55개

그래픽카드: 지포스 40 vs. 라데온 7000 그리고 인텔 A770 응??

공지 그래픽카드 게시판 블라인드 처리 방침 안내

퀘이사존

6k

12-14
공지 퀘이사존 전체 게시판 공통 규정(23.03.02)

퀘이사존

25.4k

11-08

전체 질문 잡담 정보

추천	분류	제목	닉네임	조회수	날짜
0	질문	채굴 2060s 가격 문의	user_813897	3	15:35
0	질문	그래픽카드 전원케이블 질문드립니다.	user_820899	5	15:34
0	잡담	글카에 대한 현타..	마동타크	32	15:29
0	질문	13700 + 4080 에어로 타스점수 ,온도 괜찮을까요 ?? 1	서서잉	19	15:28
0	질문	그래픽카드 ARGB 연결선 문의드립니다. 1	user_820899	34	15:12
1	정보	타임스파이를 5950X / 4090으로 측정했을때 16쓰레드 제한한 경우	바람돌이777	41	14:51
0	사이다	3060ti이상 디아4 컷씬 프레임저하 없나요? 7	현장네고자제요	81	14:49
2	사이다	4090 이륙하고 싶은데 고민이 있습니다 6	이스넬프	169	14:32
2	잡담	ZOTAC 4080 볼베어링 소음 참 희안하네요 4	BlackDiamond	140	14:24
3	사이다	4070ti나 4080 사볼까 하는데 파워 650으로 어떨까요? 22	뚜루두	165	14:16
3	질문	피시방 3060ti 어떻게 생각하시나요? 12	내이름이뭐지	191	14:05
3	잡담	자꾸 생각이 나네요 4090 6	훌리몰리	155	14:04
2	잡담	결국 4090 질렀습니다 ㅠㅠ 6	깝태	196	13:59
2	정보	인텔 아크 770 사용후기 1	Yool	173	13:55
1	질문	갤럭시 그래픽카드 a/s관련 질문좀요~ 6	달넘는거부기	87	13:54
2	잡담	하급기도 엄청 쓸만하네요???.... 6	구름띠	241	13:45
1	잡담	사파이어 6700xt 고주파 땜에 겜을 못하겠음 ㅠㅠ 4	망구87	121	13:40
0	사이다	갤럭시 4090도 리비전 된건가요? 3	user_683293	185	13:24
1	질문	4090 구매하려는데 3	ENOsnow	156	13:08
0	질문	컬러풀 불칸은 원래 물량을 적게 푸나요? 2	에메스	134	13:07
0	질문	에프터버너 프레임 표기 문의 2	정당근이	64	13:03
0	질문	4090의 언더볼팅 사용 와트 정상적인지요? 7	fvcvv56	101	13:03
10	정보	조택 4080 amp 볼베어링 소음 동영상 입니다. 17	컴알못은나의숙명인가	341	12:57
0	사이다	컴맹 컴알못입니다.. 9	user_627990	120	12:30
3	사이다	3070ti 디아블로에디션 문의 7	논산딸기영농후계자	210	12:17
2	질문	3070알아보다가 rx6800으로 생각을 돌렸는데요... 6	user_818962	215	12:15
0	질문	게임 중 듀얼 모니터를 켜거나 끄면 다운이 됩니다	아일레	34	12:06
0	정보	6750xt와 시공의 폭풍 그리고 아드레날린 2	늑대처럼	97	12:01
9	잡담	4090fe가 도착했네요.. 9	Upgrade	732	11:45
1	질문	3070 중고 시세 문의드립니다. 7	user_817616	212	11:27