docker

DCGM Exporter を用いた Kubernetes における NVIDIA GPU 監視環境の構築

Prometheus & Grafana と DCGM-Exporter を使って NVIDIA GPU を監視するシステムを Kubernetes 上に構築します.

TopoLVMによるPVC-basedなRook/Ceph with Pod Topology Spread Constraints

はじめに 前提条件 TopoLVMの導入 TopoLVMとは TopoLVM準備 topolvm-schedulerの導入 K8sクラスタの構築 共通事前準備 Control Plane Node Node topolvmのデプロイ 事前準備 helm3 kustomize デプロイ Rook/Cephのデプロイ 事前準備 デプロイ CephFSのデプロ…

kube-vipを用いたHA Kubernetes Clusterの構築

kube-vipを用いてK8s HA構成を作成し,DeepLearning環境を構築します.

GitLab Container RegistryをKubernetesで使う

はじめに 準備 新規プロジェクトの作成 Secretリソースの作成 デプロイトークンの発行 Secretリソースの作成 Secretリソースの利用 補足(Dockerでの使用方法) はじめに 以前GitLab Runner on Kubernetesに敗北した話 - てんぜんの生存日誌でお話したように…

Jupyter Lab on Kubernetesでの深層学習環境の構築

はじめに 前回までのお話 Ingress Nginx Ingressとは マニフェストの準備 デプロイ Jupyter-Lab Jupyterとは コンテナイメージの作成 マニフェストの準備 デプロイ L7ルーティング 概要 マニフェストの準備 デプロイ アクセス確認 おわりに はじめに 今回はj…

Kubernetesにおけるデータのバックアップ

はじめに CronJobとは 実装 フルバックアップの実装 Persistent Volumeの準備 バックアップ処理用Dockerイメージの作成 フルバックアップ処理用CronJobの実装 差分バックアップ処理用CronJobの実装 今回使用する差分バックアップ マニフェストの準備とデプロ…

Private Docker Registry(プライベートレジストリ) on Kubernetes

はじめに Persistent Volumeの作成 Private Docker Registryデプロイ Private Docker Registry Frontendのデプロイ Ingress Nginx Controller Ingress Nginx Controllerとは Ingressリソースの実装 おわりに はじめに 以前下記の記事でdockerを用いて作成し…

GitLab Runner on Kubernetesに敗北した話

はじめに 前提条件 Helmのインストール GitLabの設定変更 Ingressリソース LoadBalancerの実装 Gitlabのデプロイ 本題 補足 おわりに はじめに 本ブログを開設以来実装の成功事例ばかり紹介してきましたが,今回は初の失敗したお話です. 今回,図1のようなK…

DockerのDNSについて

はじめに DockerにおけるDNS DNSの設定 おわりに はじめに 本ブログ以下の記事でubuntuにおいてdnsの設定がそのままではコンテナ内部から名前解決ができないためホストOS側のDNSを書き換える操作をしました. しかし,最近になってせっかくコンテナを使ってい…

Rook-Cephfs + Nvidia Driver vs てんぜん

はじめに Rookとは 準備 Kernel Imageの変更 Nvidia Driverの更新 時間調整 Rook・Cephの設定 デプロイ PVとしての使用 Ceph DashBoard トラブルシューティング おわりに はじめに RookだらけのAdvent Calenderに一通り目を通して面白そうだと思い やってみ…

Kubernetes(k8s) v1.16とNvidia-Docker2を用いたマルチノードDeepLearning環境の構築 Part2

この記事は近畿大学 Advent Calendar 2019 - Qiita 24日目の記事です. はじめに Strageリソース Volume Persistent Volume 準備 Persistent Volumeの作成 metadata.labels spec.capacity.storage spec.accessModes spec.persistentVolumeReclaimPolicy spec…

Kubernetes(k8s) v1.16とNvidia-Docker2を用いたマルチノードDeepLearning環境の構築

この記事は近畿大学 Advent Calendar 2019 - Qiita3日目の記事です. はじめに Kubernetes・Nvidia-Docker2・NVIDIA-device-plugin-for-Kubernetes Kubernetes Nvidia-Docker2 NVIDIA-device-plugin-for-Kubernetes Kubernetes環境の構築 Step01[全Node共通…

Private Docker Registry(プライベートレジストリ)の構築

はじめに 作成したDockerイメージのリポジトリとして有名なのはDocker hubがあります.しかしネットワークが制限されている場所では使用することが難しかったり,パブリックリポジトリとプライベートリポジトリがありますが無料会員の場合プライベートリポジ…