Mercurial > hg > Papers > 2020 > mk-sigiot
view paper/mk-wm-back.tex @ 14:650cac660dd1
update tex
author | Ken Miyahira <e175733@ie.u-ryukyu.ac.jp> |
---|---|
date | Thu, 06 Aug 2020 19:35:05 +0900 |
parents | ef6f19e8ec75 |
children |
line wrap: on
line source
%% %% 研究報告用スイッチ %% [techrep] %% %% 欧文表記無しのスイッチ(etitle,eabstractは任意) %% [noauthor] %% %\documentclass[submit,techrep]{ipsj} \documentclass[submit,techrep,noauthor]{ipsj} \usepackage[dvips,dvipdfmx]{graphicx} \usepackage{latexsym} \usepackage{listings} \lstset{ language=C, tabsize=2, frame=single, basicstyle={\tt\footnotesize}, % identifierstyle={\footnotesize}, % commentstyle={\footnotesize\itshape}, % keywordstyle={\footnotesize\ttfamily}, % ndkeywordstyle={\footnotesize\ttfamily}, % stringstyle={\footnotesize\ttfamily}, breaklines=true, captionpos=b, columns=[l]{fullflexible}, % xrightmargin=0zw, % xleftmargin=1zw, % aboveskip=1zw, numberstyle={\scriptsize}, % stepnumber=1, numbersep=0.5zw, % lineskip=-0.5ex, } \usepackage{caption} \def\Underline{\setbox0\hbox\bgroup\let\\\endUnderline} \def\endUnderline{\vphantom{y}\egroup\smash{\underline{\box0}}\\} \def\|{\verb|} % %\setcounter{巻数}{59}%vol59=2018 %\setcounter{号数}{10} %\setcounter{page}{1} \renewcommand{\lstlistingname}{Code} \begin{document} \title{情報工学科演習用のコンテナ技術を用いた新規サービスの設計・実装} %\etitle{How to Prepare Your Paper for IPSJ SIG Technical Report \\ (version 2018/10/29)} \affiliate{KIE}{琉球大学大学院理工学研究科情報工学専攻} \affiliate{IE}{琉球大学工学部工学科知能情報コース} \author{宮平 賢}{Miyahira Ken}{IE}[mk@cr.ie.u-ryukyu.ac.jp] \author{河野 真治}{Shinji Kono}{IE}[kono@ie.u-ryukyu.ac.jp] \begin{abstract} IT技術を学ぶ時の学習環境の 1つとして, OS 上の隔離された環境を構築する技術であるコンテナがある. これらはローカルに設置された計算機, あるいはクラウド上に作られる. 作成されるコンテナは学生, あるいは教員側から適切に管理するシステムが必要となる. 管理システムはマルチユーザで動作するのは当然として, 利用者や管理者に適したUI, sudo権限で動作するコンテナへの対処などが含まれる. 学生の演習には, Webサービスの実装や人工知能の学習などがある. そのため, 気軽に開発環境やテスト環境などを用意できる利用のしやすさが重要である. 本稿ではコンテナ管理ソフトウェアである Docker, Singularity を用いた新規 Web サービスの設計・実装を行う. \end{abstract} \maketitle \section{はじめに} 情報通信技術の普及に伴い学生が学ぶ学習環境が必要となる。その学習環境として VM や コンテナにより, 手軽に開発し試せる技術が普及している。 だが, 手元の PC 上で VM や コンテナを立ち上げ, 開発を行うことはできるが, VM や コンテナの使用には高性能 PC や 有料のクラウドサービスが必要になる場合がある。 この大きな負担を学生に負わせない仕組みが必要である。\par 琉球大学工学部工学科知能情報コースでは, 希望の学生に学科のブレードサーバから仮想環境を貸出すサービスを行なっている。貸出をする VM のデフォルトのスペックでは 不足場合要望に応じてスペックの変更を行なっている。だが, 貸出サービスでは GPU を利用した処理環境を提供することができない。 %だが, 貸出サービスでは近年盛んに行われている人工知能の研究に必要な環境を提供することができない。 GPU が搭載されている PC は研究室によっては用意されているが, 研究室に所属していない学生は利用することができない。そのため, 新たな仕組みが必要である。\par 学科のブレードサーバに搭載される GPU は VM の貸出サービスでは利用することができないため, コンテナ技術を利用する。 コンテナ管理ソフトウェアである Docker では NVIDIA Container Toolkit である nvidia-docker を利用することで, 複数のコンテナで GPU を使用することができる。 Docker では基本的に root 権限で動作する。また一般ユーザが docker コマンドを使用するには docker グループに追加する必要がある。 そのため Docker をマルチユーザで使用すると, 他ユーザのコンテナへアクセスできるなどセキュリティの問題がある。\par そこで, 本論文では, Docker と マルチユーザ環境で利用しやすい Linux コンテナである Singularity を利用したコンテナ貸出サービスを提案する。 このコンテナ貸出サービスでは, Web コンソールからコンテナの操作を行うことで他ユーザのコンテナへの操作をさせない。また, 先行研究の課題でもあったデータの永続化を Singularity で, 外部リポジトリの利用を Docker の操作を API で提供することで利用によるで解消する。 \section{Docker} Docker とは Docker, Inc. が開発した Linux コンテナ管理ソフトウェアであり, 2013年にオープンソースのプロジェクトとして公開された。 Docker ではコンテナを実行するだけでなく, コンテナイメージの作成 \section{Singularity} Singularity とは, Berkeley Lab が開発した Linux コンテナであり, オープンソースソフトウェアで提供されている。 Singularity には他のコンテナランタイムとは異なるセキュリティ機能がある。Singularity はコンテナを作成時にコンテナ内にUID及びGID情報を動的に書き込み, ユーザの権限を引き継ぐ。 そのため, ユーザが非特権ユーザの場合コンテナ内でも非特権ユーザとして動作する。また, Singularity は他のユーザのコンテナを操作することができないためマルチユーザ環境で安全に使用できる。 Singularity のコンテナではデフォルトで \$HOME, /tmp, /proc, /sys, /dev がマウントされる。そのため, ユーザがコンテナ内にファイルをコピーする手間を省くことができる。 \section{GitLab} GitLab とは, GitLab.Inc. が開発した Gitリポジトリマネージャーであり, オープンソースソフトウェアで提供されている。 GitLab には無償版の GitLab Community Edition (以下GitLab CE) と 有償版の GitLab Enterprise Edition (以下GitLab EE) がある。 本コースでは GitLab CE を運用している。本研究では GitLab CE に統合されいている CI/CD 機能を利用する。 \section{関連研究} 本サービスに関連した研究として, Docker をラップし複数のユーザで利用することを目的とした ie-docker, Kubernetes を利用した教育用コンテナ貸出を目的とした, digdog がある。 この 2 つの研究について軽く概要を説明する。 \subsection{ie-docker} ie-docker とは Docker をラップし複数のユーザで利用することのできるコンテナ管理ツールである。 利用する学生は ssh でブレードサーバへ接続し, ie-docker を使用してコンテナを操作することができる。 ie-docker は UID 及び GID 情報を取得し他のユーザのコンテナを操作させない。 またユーザが使える docker の機能を制限する。表\ref{tb:ie-docker}が ie-docker の機能である。 \begin{table}[htb] \begin{center} \caption{ie-docker のコマンド} \begin{tabular}{c|l} \hline ps & 起動中のコンテナの一覧を表示する \\ \hline run & コンテナを作成する \\ \hline start & コンテナを起動する \\ \hline stop & コンテナを停止する \\ \hline attach & 起動しているコンテナに attach する \\ \hline cp & コンテナにファイルを送信する \\ \hline rm & コンテナを削除する \\ \hline \end{tabular} \label{tb:ie-docker} \end{center} \end{table} \subsection{digdog} digdog とは Kubernetes を利用したコンテナ貸出サービスである。 学生は Dockerfile を GitLab CI/CD を利用して GitLab Registry に Docker イメージを登録する。 コンテナを利用するには学科アカウントを使用して Web サービスへログインし, 登録したイメージでコンテナを作成することができる。 また学生の Namespace が作成される。RBAC を用いたリソース操作のアクセス制御を行なっており, 学生は Kubernetes コマンドである kubectl コマンドで Pod の操作を行うことができる。 RBAC で許可されているリソース操作は表\ref{tb:digdog}である。 \begin{table}[htb] \begin{center} \caption{kubectl のコマンド} \begin{tabular}{c|l} \hline get & Pod の一覧を表示する \\ \hline log & Pod の Log を表示する \\ \hline exec & Pod にアクセスする \\ \hline \end{tabular} \label{tb:digdog} \end{center} \end{table} \section{WhaleMountain} 本サービスの構成を図\ref{fig:wm}に示す。本サービスは digdog を参考にして作られた コンテナ貸出を行う Web サービスである。 学生は学科アカウントを使用して Web サービスへログインし, コンテナの作成や操作を行うことができる。 また, GitLab CI/CD を使用し学生が作成した Dockerfile を GitLab へ Push することで, 学生が自由に Docker イメージを作成することもできる。 作成した Docker イメージは他の学生に共有できる。また学生は他の学生が作成したコンテナやイメージを操作することはできない。 WhaleMountain が提供するサービスは以下である。 \begin{itemize} \item GitLab CI/CD Token の更新 \item Docker Image の削除 \item Singularity Image のダウンロード \item Docker コンテナの作成, 操作 \item Kubernetes Pods の作成 \end{itemize} \begin{figure}[tb] \begin{center} \includegraphics[width=80mm]{Images/whalemountain.pdf} \end{center} \caption{システム構成} \label{fig:wm} \end{figure} \section{WhaleMountain と他ツールとの比較} 関連研究である ie-docker と digdog との比較を行う。 \subsection{ie-docker と比較} ie-docker では学生が自由に Docker イメージを作成することができない。またコンテナで使用できる Docker イメージも制限される。 WhaleMountain の Docker コンテナでは学生がコンテナの log の確認することができない。また ie-docker の attach と比べ WhaleMountain では, コンテナに接続するのではなく, コンテナでコマンドを実行し出力を表示するため, ファイルの編集などを行うことができない。そのため, WhaleMountain では, Docker コンテナだけでなく Kubernetes の Pods を作成することができる。 Kubernetes で作成した Pods に対して 学生は kubectl コマンドで操作ができる。 \subsection{digdog と比較} WhaleMountain は digdog を参考にして作られたため, 基本構成は似ている。だが, digdog はコンテナ作成に学生が作成した Docker イメージのみに制限されている。 また, GitLab CI/CD の CI で Dockerfile を build する際に利用する GitLab Runner が共有される。そのため複数の学生が同時に Dockerfile を build することができない。 WhaleMountain では コンテナ作成で Docker イメージに制限をかけないため Docker Hub に登録されている Docker イメージも利用できる。 また, 学生用のGitLab Runner を Token の設定時に用意するため, 複数の学生が同時に Dockerfile を build することができる。 %\begin{lstlisting}[frame=lrbt,label=src:example,caption={コード書き方例}] %package main %import "fmt" %func main() { % fmt.Println("Hello, World!!") %} %\end{lstlisting} \section{今後の課題} \section{まとめ} \nocite{*} \bibliographystyle{ipsjunsrt} \bibliography{mk-wm} \end{document}