XeSS를 위한 Intel 프레임 생성 기술이 곧 출시될 수 있습니다: 게임 FPS를 향상하기 위한 프레임 추정 기능을 갖춘 ExtraSS
해외 매체 기사를 단순 번역한 것으로 오역이 있을 수 있으며 자세한 내용은 원문을 참고하시기 바랍니다.
XeSS를 위한 Intel 프레임 생성 기술이 곧 출시될 수 있습니다: 게임 FPS를 향상하기 위한 프레임 추정 기능을 갖춘 ExtraSS
인텔은 시드니에서 열린 SIGGRAPH Asia 2023에서 선보인 ExtraSS로 알려진 XeSS 프레임워크용 프레임 생성 기술을 선보이는 세 번째 주요 PC 플레이어가 될 수 있습니다.
Intel XeSS, ExtraSS 프레임 추정 기술을 통해 프레임 세대 대열에 합류하여 NVIDIA DLSS 3 및 AMD FSR 3과 경쟁
Intel의 XeSS 기술은 하드웨어에 구애받지 않는 업스케일링 기술입니다. 즉, NVIDIA 및 AMD의 GPU에서도 작동합니다. 또한 NVIDIA의 DLSS 업스케일링 기술과 비교할 수 있는 경우가 많으며 AMD의 FSR보다 앞서 있습니다. NVIDIA의 DLSS와 마찬가지로 Intel의 XeSS는 AI 가속기를 활용하여 다른 업스케일링 방법보다 더 나은 이미지 품질을 제공하며 그 결과는 현재 출시된 여러 XeSS 타이틀에서 확인할 수 있습니다. XeSS는 또한 오픈 소스 기술이므로 게임 내에서 쉽게 통합될 수 있으며 XeSS를 사용하는 거의 모든 게임은 FSR 및 DLSS와 같은 다른 업스케일링 방법도 지원합니다.
그러나 NVIDIA의 DLSS와 AMD의 FSR 기술은 보간 기술을 사용하여 프레임을 삽입하는 방식인 프레임 생성을 지원하여 더욱 확장되었습니다. 이는 좋은 이미지 품질을 유지하면서 FPS를 높이는 데 사용할 수 있습니다. NVIDIA의 프레임 생성 기술은 DLSS 3.5로 업데이트되어 이미지 품질을 더욱 향상시키고 있으며, AMD는 프레임 속도 문제를 해결하고 이전보다 더 높은 충실도를 제공하는 새로운 FSR 3.03 업데이트를 출시했습니다.
이는 지금까지 Intel XeSS가 부족한 영역 중 하나이지만 Intel은 ExtraSS로 알려진 XeSS의 확장 작업에 솔루션을 갖고 있는 것으로 보입니다. "ExtraSS: 공동 공간 슈퍼 샘플링 및 프레임 외삽을 위한 프레임워크" 프레젠테이션에서 Intel의 그래픽 연구 부사장인 Anton Kaplanyan과 기타 여러 저자는 프레임 생성에 사용할 프레임 외삽 아이디어를 제안합니다. 프레젠테이션에 대한 설명은 다음과 같습니다.
공간 슈퍼 샘플링과 프레임 외삽을 결합하여 실시간 렌더링 성능을 향상시키는 새로운 프레임워크인 ExtraSS를 소개합니다. 이러한 기술을 통합함으로써 우리의 접근 방식은 성능과 품질 간의 균형을 달성하여 일시적으로 안정적이고 고품질, 고해상도 결과를 생성합니다.
워핑에 대한 경량 모듈과 개선을 위한 ExtraSSNet을 활용하여 시공간 정보를 활용하고, 렌더링 선명도를 개선하고, 움직이는 음영을 정확하게 처리하고, 시간적으로 안정적인 결과를 생성합니다. 기존 렌더링 방법에 비해 계산 비용이 크게 절감되어 더 높은 프레임 속도와 앨리어스 없는 고해상도 결과를 얻을 수 있습니다.
언리얼 엔진을 사용한 평가는 기존의 개별 공간적 또는 시간적 슈퍼 샘플링 방법에 비해 우리 프레임워크가 향상된 렌더링 속도와 시각적 품질을 제공하는 이점을 보여줍니다. 시간적으로 안정적인 고품질 결과를 생성하는 기능을 통해 당사의 프레임워크는 실시간 렌더링 애플리케이션을 위한 새로운 가능성을 창출하여 다양한 영역에서 성능 및 사실적 렌더링의 경계를 발전시킵니다.
SIGGRAPH ASIA 2023을 통해
Intel의 XeSS "ExtraSS"에서 흥미로운 점은 사용되는 프레임 생성 기술이 "Frame Interpolation"이 아닌 "Frame Extrapolation"이라는 것입니다. NVIDIA의 DLSS 3 및 AMD FSR 3 모두 "프레임 보간"을 사용하여 특정 장면 내에서 프레임을 생성 및 삽입하여 더 높은 FPS를 제공한다는 것을 알고 있습니다. Interpolation과 Extrapolation 방법은 거의 동일하지만 BlurBusters에 따르면 주요 차이점은 생성된 프레임이 생성되는 방식에 있습니다.
NVIDIA DLSS Frame-Gen - 보간
AMD FSR Frame-Gen - 보간
Intel XeSS Frame-Gen - 추정?
보간 방법은 여러 샘플을 사용하여 삽입할 프레임의 근사치를 생성하는 반면, 외삽 방법은 입력 샘플의 경계를 넘어서는 정보를 사용하여 프레임의 근사치를 생성합니다. 외삽법은 신뢰성이 낮은 결과를 생성하고 더 많은 아티팩트를 추가할 수 있다고 명시되어 있지만 처음에는 보간법과 유사한 문제가 확인되었으므로 몇 가지 조정 및 최적화를 통해 XeSS "ExtraSS"는 더 높은 FPS로 좋은 품질을 제공하는 중간 지점을 찾을 수 있습니다. .
연구 논문 자체에서도 보간과 외삽의 차이점을 강조합니다. 프레임 보간은 더 나은 결과를 생성하지만 프레임을 생성할 때 대기 시간이 길어지므로 NVIDIA와 AMD가 원활한 프레임 생성 경험을 제공하는 데 필요한 Reflex 및 Anti-Lag와 같은 대기 시간 감소 기술을 보유하고 있습니다. 반면 외삽법은 대기 시간이 매우 길지는 않지만 새 프레임을 생성하는 데 필요한 핵심 정보가 부족하여 어려움을 겪습니다. XeSS "ExtraSS"는 이전 프레임 생성 방법에 비해 더 나은 품질을 생성하고 대기 시간을 줄이는 데 도움이 되는 새로운 워핑 방법을 사용하여 이 문제를 해결하는 것을 목표로 합니다.
프레임 외삽은 이전 프레임의 정보만 사용하여 프레임 속도를 높이는 또 다른 방법입니다. 리 등[2022] 이전 흐름을 기반으로 흐름을 예측한 후 현재 프레임을 다음 프레임으로 워핑하는 광학 흐름 기반 방법을 제안했습니다. ExtraNet [Guo et al .2021]은 신경망과 함께 폐색 모션 벡터를 사용하여 G-버퍼 정보로 폐색되지 않은 영역과 음영 변경을 처리합니다. 장면이 복잡해지고 가려진 영역에 인공물이 생성되면 그들의 방법은 실패합니다. 게다가 새로운 프레임만 생성하기 때문에 더 높은 해상도의 입력이 필요합니다. 우리는 효율적이고 높은 품질을 유지하면서 공간 슈퍼샘플링과 프레임 외삽을 함께 해결하기 위한 공동 프레임워크를 제안한 최초의 기업입니다.
보간과 외삽
보간 방법은 이러한 기술을 사용하더라도 여전히 대기 시간이 더 깁니다. 프레임 외삽법은 지연 시간이 짧지만 입력 프레임의 정보가 부족하여 가려진 영역을 처리하는 데 어려움이 있습니다. 우리의 방법은 이전 프레임 생성 방법보다 더 나은 품질을 갖고 보간 기반 방법에 비해 대기 시간이 짧은 프레임을 추정하기 위해 경량 흐름 모델을 갖춘 새로운 워핑 방법을 제안합니다.
Intel 연구 논문(ExtraSS: 공동 공간 슈퍼 샘플링 및 프레임 추정을 위한 프레임워크)
아래에서는 SSAA, TAA, 신경 렌더링 프레임워크(예: ExtraNet 및 IFRnet)와 같은 다른 앨리어싱 기술에 대한 Intel의 XeSS "ExtraSS" 프레임 추정 방법 간의 몇 가지 비교를 확인할 수도 있습니다.
일부 렌더링 시간 성능 테스트에서 Intel은 NVIDIA GeForce RTX 3090 GPU와 AMD Ryzen 9 5950X CPU를 실행하는 시스템을 선보였습니다. RTX 3090 GPU는 또한 동일한 Intel XeSS 프레임 생성(외삽) 방법을 실행했습니다. 이는 이것이 AMD의 FSR 3 외에 두 번째 프레임 생성 기술이 되어 Intel의 개방적 의지를 다시 한 번 보여주는 모든 공급업체에 대한 지원을 제공한다는 것을 의미합니다. -소스 친화적.
Intel이 게임용 프레임 생성 기술도 개발하고 있다는 것은 PC 게임 부문에 있어서 좋은 소식입니다. 아직까지는 기술이 도입되려면 시간이 좀 걸릴 것으로 보이지만 2024년에는 더 많은 소식을 들을 수 있을 것 같습니다. XeSS에서 보았듯이 다른 제품에 비해 늦었지만 품질이나 지원 측면에서는 좋았습니다. 기다린 보람이 있군. 따라서 Intel이 자체 XeSS "ExtraSS" 프레임 생성 기술을 도입하면 우리는 놀랄 수도 있습니다. 우리는 그것을 기대하고 있습니다.
