1
|
1 \chapter{TreeVNC について}
|
|
2
|
|
3
|
|
4 \section{RFBプロトコル}
|
|
5 RFB(remote frame buffer)プロトコル\cite{rfbProtocol}とは、自身の画面を送信し、ネットワーク越しに他者の画面に表示するプロトコルである。
|
|
6 ユーザが居る側をRFBクライアント側と呼び、Framebufferへの更新が行われる側はRFBサーバと呼ぶ。
|
|
7 Framebufferとは、メモリ上に置かれた画像データのことである。
|
3
|
8 RFBプロトコルでは、最初にプロトコルバージョンの確認や認証が行われる。
|
|
9 その後、クライアントに向けてFramebufferの大きさやデスクトップに付けられた名前などが含まれている初期メッセージが送信される。
|
|
10 RFBサーバ側はFramebufferの更新が行われるたびに、RFBクライアントに対してFramebufferの変更部分だけを送信する。
|
|
11 更にRFBクライアントのFramebufferUpdateRequestが来るとそれに答え返信する。
|
1
|
12 RFBプロトコルは、描画データに使われるエンコードが多数用意されており、また独自のエンコードを実装することもできるプロトコルである。
|
|
13
|
|
14
|
|
15 \section{TightVNC}
|
|
16 TightVNC(Tight Virtual Network Computing)\cite{tightvnc}はJavaを用いて作成されたRFBプロトコルのクライアントである。
|
|
17 本研究で作成したTreeVNCはTightVNCを元に作成されている。
|
|
18
|
|
19
|
3
|
20 \section{多人数で VNC を使用するときの問題点}
|
|
21 多人数で従来の VNC を使用する際、1つのコンピュータに多人数が同時につながり、
|
|
22 処理が集中してしまい、性能が大幅に落ちてしまうという問題が生じる。
|
|
23
|
|
24 ゼミ等の画面配信者が頻繁に切り替わる場合、
|
|
25 配信者が替わる度にアプリケーションを終了し、接続をし直さないといけないという問題がある。
|
|
26
|
|
27
|
1
|
28 \newpage
|
|
29
|
3
|
30
|
|
31 \section{TreeVNC の構造}
|
|
32 多人数で VNC を用いるために、クライアントの接続がサーバに一極集中してしまう問題を解決する。
|
|
33 そのために、 TreeVNC はサーバへ接続しに来たクライアントをバイナリツリー状に接続する(図\ref{fig:tree})。
|
|
34 バイナリツリーなら、各nodeに最大2台分のクライアントしか接続されない。
|
|
35 $N$台のクライアントが接続しに来た場合、画面配信の画像データをコピーする回数は、
|
8
|
36 従来の VNC ではサーバ側で$N$回する必要があるが、TreeVNCでは各 node が2回ずつコピーするだけで済む。
|
|
37 TreeVNC は、root への負荷を各 node に分散することにより、処理性能が向上している。
|
3
|
38
|
|
39 \begin{figure}[htpd]
|
|
40 \begin{center}
|
|
41 \includegraphics[scale=0.4]{./images/chapter2/TreeVNC.pdf}
|
|
42 \end{center}
|
|
43 \caption{構成される木構造}
|
|
44 \label{fig:tree}
|
|
45 \end{figure}
|
|
46
|
|
47
|
8
|
48 \section{Multicast や Broadcast を用いたVNC}
|
|
49
|
|
50 Multicast とは、
|
|
51 同一ネットワーク内でマルチキャストアドレスを持っている端末に対してデータを送信することである。
|
|
52 Broadcast とは、
|
|
53 同一ネットワーク上の全ての端末に対してデータを送信することである。
|
|
54 どちらの通信方法も、root からのデータ送信は1回でよく、
|
|
55 1度送信するとデータの複製はルータが行う。
|
|
56
|
|
57 VNC を Multicast や Broadcast の通信方法を用いて実装すると、
|
|
58 画像データの送信が1度で済み、負荷分散のために木構造を形成する必要もなくなる。
|
|
59
|
|
60 しかし、これらの通信方法でのパケットの扱いには
|
|
61 \begin{itemize}
|
|
62 \item 送信可能なパケットのブロックサイズが 64000byte までであると決まっている
|
|
63 \item パケットが途中で消失してしまっても特定することができない
|
|
64 \end{itemize}
|
|
65 といった性質がある。
|
|
66
|
|
67 \newpage
|
|
68
|
|
69 VNC でこれらの通信方法を用いて実装する場合、
|
|
70 パケットの扱いの性質を乗り越えなければならない。
|
|
71
|
|
72 送信可能なパケットのサイズが決まっているので、
|
|
73 画面データは 64000byte 以下に分割し送信しなければならない。
|
|
74 しかし、現在の TreeVNC で用いている方法では、
|
|
75 データ分割の処理には時間がかかってしまう。
|
|
76
|
|
77 パケットの消失を検知するためには、
|
|
78 各パケットに対してシリアル番号を振り分ける。
|
|
79 パケットを受信した node 側で、
|
|
80 シリアル番号が連番で届いているのかどうかを調べれば検知することが可能である。
|
|
81 もし届いていなかった場合は、root に対して再送要求を送信すれば良い。
|
|
82 しかし、Multicast や Broadcast 通信ではパケットロス率が高かった。
|
|
83
|
|
84 これらの通信方法を用いての VNC の実装にはもう少し工夫が必要である。
|
|
85
|
|
86
|
|
87
|
3
|
88 \section{node 間で行われるメッセージ通信}
|
1
|
89 RFBプロトコルで提供されているメッセージに加え、 TreeVNC 独自のメッセージを使用している。
|
|
90 TreeVNC で使用されるメッセージの一覧を表\ref{tb:message}に示す。
|
|
91
|
3
|
92
|
1
|
93 \begin{table*}[htb]
|
|
94 \scriptsize
|
|
95 \begin{tabular}{|l|l|l|} \hline
|
|
96 通信経路 & message & 説明 \\ \hline \hline
|
|
97 & FIND\_ROOT & 子node接続時にrootを探す。 \\ \cline{2-3}
|
|
98 send direct message & WHERE\_TO\_CONNECT & どのnodeに接続すれば良いかを聞く。 \\ \cline{2-3}
|
|
99 (child to root) & LOST\_PARENT & 親nodeの接続が切れた時にrootに知らせる。 \\ \hline
|
|
100
|
|
101 & FIND\_ROOT\_REPLY & FIND\_ROOTへの返信。 \\ \cline{2-3}
|
|
102 send direct message & CONNECT\_TO & nodeとnodeの接続をする。 \\ \cline{2-3}
|
|
103 (root to child) & CONNECT\_TO\_AS\_LEADER & 左子nodeとして、nodeとnodeの接続をする。 \\ \hline
|
|
104
|
|
105 message down tree & FRAMEBUFFER\_UPDATE & 画面の差分の画像データ。EncodingTypeを持っている。\\ \cline{2-3}
|
|
106 (root to child) & CHECK\_DELAY & 通信の遅延を測定するmessage。 \\ \hline
|
|
107
|
|
108 message up tree & CHECK\_DELAY\_REPLY & CHECK\_DELAYへの返信。 \\ \cline{2-3}
|
|
109 (child to root) & SERVER\_CHANGE\_REQUEST & 画面切り替えのリクエスト。 \\ \hline
|
|
110
|
|
111 & FRAMEBUFFER\_UPDATE\_REPLY & FRAMEBUFFER\_UPDATEのリクエスト。 \\ \cline{2-3}
|
|
112 send message & SET\_PIXEL\_FORMAT & pixel値の設定。 \\ \cline{2-3}
|
|
113 (root to VNCServer) & SET\_ENCODINGS & pixelデータのencodeTypeの設定。 \\ \cline{2-3}
|
|
114 & KEY\_EVENT & キーボードからのイベント。 \\ \cline{2-3}
|
|
115 & POINTER\_EVENT & ポインタからのイベント。 \\ \cline{2-3}
|
|
116 & CLIENT\_CUT\_TEXT & テキストのカットバッファを持った際のmessage。 \\ \hline
|
|
117
|
|
118 & FRAMEBUFFER\_UPDATE & 大本の画面の差分の画像データ。EncodingTypeを持っている。 \\ \cline{2-3}
|
|
119 send message & SET\_COLOR\_MAP\_ENTRIES & 指定されているpixel値にマップするRGB値。 \\ \cline{2-3}
|
|
120 (VNCServer to root) & BELL & ビープ音を鳴らす。 \\ \cline{2-3}
|
|
121 & SERVER\_CUT\_TEXT & サーバがテキストのカットバッファを持った際のmessage。 \\ \hline
|
|
122 \end{tabular}
|
|
123 \caption{通信経路とmessage一覧}
|
|
124 \label{tb:message}
|
|
125 \end{table*}
|
|
126
|
8
|
127
|
|
128 図\ref{fig:message}は、
|
|
129 TreeVNC で node が root に接続し、画像データを受信するまでのメッセージ通信の様子である。
|
|
130
|
1
|
131
|
|
132
|
|
133 \newpage
|
|
134
|
|
135
|
8
|
136 \begin{figure}[htbp]
|
|
137 \begin{center}
|
|
138 \begin{tabular}{c}
|
|
139
|
|
140 \begin{minipage}{0.5\hsize}
|
|
141 \begin{center}
|
|
142 \includegraphics[width=67mm]{./images/chapter2/message.pdf}
|
|
143 \end{center}
|
|
144 \caption{node 間で行われるメッセージ通信}
|
|
145 \label{fig:message}
|
|
146 \end{minipage}
|
|
147
|
|
148 \begin{minipage}{0.5\hsize}
|
|
149 \begin{itemize}
|
|
150 \item nodeはMulticast通信でrootに対してFIND\_ROOTを送信する(1:findRoot())
|
|
151 \item rootが受信し、FIND\_ROOT\_REPLYを送信する(2:findRootReplay())
|
|
152 \item node側でどのrootに接続するか選択するパネルが表示される
|
|
153 \item nodeはパネルでrootを選択し、接続先を要求するWHERE\_TO\_CONNECTを送信する(3:whereToConnect())
|
|
154 \item 受信したrootはnodeの接続先をCONNECT\_TOで送信する(4:connectTo)
|
|
155 \item nodeはrootの指定した接続先に接続する
|
|
156 \item root・node間の接続が確立後、rootからnodeに対して定期的に画像データFRAME\_BUFFER\_UPDATEを送信する(4:framebufferUpdate())
|
|
157 \end{itemize}
|
|
158 \end{minipage}
|
|
159
|
|
160 \end{tabular}
|
|
161 \end{center}
|
|
162 \end{figure}
|
3
|
163
|
8
|
164
|
|
165
|
|
166 \section{配信画面切り替え}
|
|
167 ゼミ等では参加者が順々に発表を行う度に、画面の切り替えが必要となる。
|
|
168 ゼミを円滑に進めるために、この画面の切り替えをスムーズに行う必要がある。
|
|
169
|
|
170 プロジェクタを使用する場合、ケーブルの抜き差しを行わないとならない。
|
|
171 その際に、ディスプレイの解像度の設定をし直す、
|
|
172 接続不良が起こる等の煩わしい問題が生じることがある。
|
|
173
|
|
174 従来のVNCを使用する場合、
|
|
175 画面の切り替えの度に一旦VNCを終了し、発表者のVNCServerへと再接続を行う必要がある。
|
|
176
|
|
177 TreeVNC は、これらの配信者の切り替えの度に生じる問題を解決している。
|
|
178 TreeVNC を立ち上げることで、ケーブルを使用せずに手元のPCに発表者の画面を表示させることができる。
|
|
179 画面の切り替えは、ユーザがVNCSeverへの再接続を行うことなく、切り替えた発表者の画面を取得することができる。
|
|
180
|
|
181 \newpage
|
|
182
|
|
183 TreeVNC の root は配信者の VNCServer と通信を行っており、
|
3
|
184 VNCServer から画面データを受信し、そのデータを node へと送信している。
|
8
|
185 画面切り替え用の share button が押されると、
|
3
|
186 root は share button を押したクライアントの VNCServer と新しく通信をし直す。
|
8
|
187 これにより、配信者切り替えのために VNC を終了し、再接続する必要がなくなる。
|
3
|
188
|
8
|
189 しかし、配信者が変わることで起きる画面サイズの違いや、
|
|
190 マルチディスプレイ全体を表示してしまうことがあるので、
|
|
191 それを解決する必要がある。
|
3
|
192
|
|
193
|
|
194 \section{MulticastQueue}
|
|
195 配信側の画面が更新されると、 VNCServer から画像データが framebufferUpdate として送られてくる。
|
|
196 TreeVNC は、画像の更新を複数の node に同時に伝えるため、
|
|
197 MulticastQueue という Queue に画像データを格納する。
|
|
198
|
8
|
199 各 node は MulticastQueue からデータを取得するスレッドを持つ。
|
|
200 node それぞれがデータを取得するため、
|
|
201 MulticastQueue は複数のスレッドから使用される。
|
|
202
|
3
|
203 MulticastQueue は、CountDownLatch を用いている。
|
|
204 java.util.concurrent.CountDownLatch とは、
|
|
205 java の並列用に用意された API で、他のスレッドで実行中の操作が完了するまで、
|
|
206 複数のスレッドを待機させることのできるクラスである。
|
|
207 スレッドを解放するカウントを設定することができ、
|
|
208 カウントが 0 になるまで await メソッドでスレッドをブロックすることができる。
|
|
209
|
|
210 TreeVNC では、それぞれの画像データにカウントが追加され、
|
|
211 カウントが 0 になると、その画像データは消される。
|
|
212 親 node が接続されている子 node の数だけカウントを設定する。
|
|
213 子 node が画像データを pull すると、そのカウントが減る。
|
|
214 全ての子 node が画像データを pull するとカウントが 0 になり、画像データが消される。
|
|
215
|
8
|
216 node が MulticastQueue からデータを取得せずに、
|
|
217 Queue にデータが溜まり続け、メモリのオーバーフローが起こる場合がある。
|
|
218 この問題を避けるために、Timeout用のスレッドを用意している。
|
|
219 ある一定時間データが取得されなければ、Timeout を検知し、
|
|
220 取得されなかったデータが全てpollされるという仕組みである。
|
|
221
|
|
222
|
1
|
223
|
|
224
|
3
|
225
|
|
226
|
1
|
227
|
|
228
|
3
|
229 %\section{オプション一覧}
|
|
230 %${\mathchar`-}$${\mathchar`-}$
|
|
231 %
|
|
232 %\begin{table*}[htb]
|
|
233 %\begin{center}
|
|
234 % \begin{tabular}{|l|l|} \hline
|
|
235 % オプション & 説明 \\ \hline \hline
|
|
236 % -p & a\\ \hline
|
|
237 % -d & a\\ \hline
|
|
238 % ${\mathchar`-}$${\mathchar`-}$cui & a\\ \hline
|
|
239 % -v & a\\ \hline
|
|
240 % -version & a\\ \hline
|
|
241 % -ns & a\\ \hline
|
|
242 % ${\mathchar`-}$${\mathchar`-}$fixSize & a\\ \hline
|
|
243 % ${\mathchar`-}$${\mathchar`-}$filterSingleDisplay & a\\ \hline
|
|
244 % ${\mathchar`-}$${\mathchar`-}$width & a\\ \hline
|
|
245 % ${\mathchar`-}$${\mathchar`-}$height & a\\ \hline
|
|
246 % ${\mathchar`-}$${\mathchar`-}$host & a\\ \hline
|
|
247 % ${\mathchar`-}$${\mathchar`-}$showTree & a\\ \hline
|
|
248 % ${\mathchar`-}$${\mathchar`-}$checkDelay & a\\ \hline
|
|
249 % ${\mathchar`-}$${\mathchar`-}$addSerialNum & a\\ \hline
|
|
250 % ${\mathchar`-}$${\mathchar`-}$logFile & a\\ \hline
|
|
251 % \end{tabular}
|
|
252 % \caption{オプション一覧}
|
|
253 % \label{tb:option}
|
|
254 %\end{center}
|
|
255 %\end{table*}
|