Install NVIDIA Container Toolkit

インストール

頻繁にバージョンが変わるため，公式サイトが最強

# Configure the repository
$ curl -fsSL https://nvidia.github.io/libnvidia-container/gpgkey | sudo gpg --dearmor -o /usr/share/keyrings/nvidia-container-toolkit-keyring.gpg \
  && curl -s -L https://nvidia.github.io/libnvidia-container/stable/deb/nvidia-container-toolkit.list | \
    sed 's#deb https://#deb [signed-by=/usr/share/keyrings/nvidia-container-toolkit-keyring.gpg] https://#g' | \
    sudo tee /etc/apt/sources.list.d/nvidia-container-toolkit.list \
  && \
    sudo apt-get update

# Install the NVIDIA Container Toolkit packages:
$ sudo apt-get install -y nvidia-container-toolkit

# Configure the container runtime by using the nvidia-ctk comman
$ sudo nvidia-ctk runtime configure --runtime=docker

# Restart the Docker Daemon
$ sudo systemctl restart docker

GPUが使えるかチェック

コンテナ内で nvidia-smi が実行できれば完了

# Run a sample CUDA container
$ sudo docker run --rm --runtime=nvidia --gpus all ubuntu nvidia-smi