DLSS | Stackhub

定義

DLSS（Deep Learning Super Sampling）は、NVIDIAが開発した画像解像度向上技術である。低解像度でレンダリングされた映像を、深層学習モデルを用いて高解像度へアップスケーリングし、出力する仕組みを持つ。

背景

近年のグラフィックス処理において、高解像度化と高フレームレート化の両立は計算負荷の増大を招く。従来の空間的アップスケーリング手法では、画素情報の不足によりジャギーやぼやけが発生する課題があった。これに対し、AIを活用した推論処理により、時間的・空間的な情報を補完する手法としてDLSSが導入された。

技術的仕組みと構造

DLSSは、NVIDIAのGPUに搭載されたTensorコアを利用して動作する。そのプロセスは以下の通りである。

低解像度でのレンダリング：GPUは本来の出力解像度よりも低い解像度でフレームを生成する。
データ収集：レンダリングされた低解像度フレームに加え、前フレームのデータやモーションベクトル（物体の移動情報）を収集する。
深層学習モデルによる推論：学習済みのニューラルネットワークが、収集したデータをもとに高解像度フレームを再構築する。
出力：再構築された高解像度画像がディスプレイへ出力される。

このモデルは、スーパーコンピュータを用いたオフライン学習によって構築されており、特定のゲームエンジンやグラフィックスAPIに依存せず、ドライバとハードウェアの連携によって最適化される。

具体例

DLSSには複数のバージョンが存在し、それぞれ機能が拡張されている。DLSS 2では、時間的フィードバックを用いた高精細な再構築が実現された。DLSS 3では、フレーム生成（Frame Generation）技術が追加され、AIが中間フレームを生成することでフレームレートを向上させる。DLSS 3.5では、レイトレーシングのノイズ除去をAIが行うRay Reconstructionが導入された。

IT業界における重要性

DLSSは、ハードウェアの物理的な演算能力の限界をソフトウェアとAIの推論によって補完する技術として位置付けられる。リアルタイムレンダリングにおける計算コストの最適化を可能にし、高負荷なグラフィックス処理を必要とするゲーム開発や、メタバース、デジタルツインといったリアルタイム3Dコンテンツの普及において重要な役割を担っている。また、GPUの演算リソースをAI推論に割り当てるという設計思想は、近年のAIコンピューティングの発展と密接に関連している。