WEKO3
アイテム
中継ノードにおけるXMLデータへの並列ストリーミング処理に関する研究
https://doi.org/10.18997/00003990
https://doi.org/10.18997/000039903d98c508-9875-40ae-9484-542bfbd782b1
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
|
|
|
| アイテムタイプ | 学位論文 = Thesis or Dissertation(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2014-04-28 | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_db06 | |||||||||
| 資源タイプ | doctoral thesis | |||||||||
| タイトル | ||||||||||
| タイトル | 中継ノードにおけるXMLデータへの並列ストリーミング処理に関する研究 | |||||||||
| 言語 | ja | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| 著者 |
浦谷, 芳幸
× 浦谷, 芳幸
|
|||||||||
| 抄録 | ||||||||||
| 内容記述タイプ | Abstract | |||||||||
| 内容記述 | XML文書のネットワーク上での中間処理のモデルとして,PASS(PrefixAutomata SyStem)-Node[1] が提案されている.PASS-Node では,ネットワークアプリケーションにおいて,従来は送信先の計算機(サーバ)で行われていたXML文書への文法チェック処理の一部または全てを,各種Web アプリケーションにおける共通の前処理として,送信先の計算機からネットワーク中に配置される中継ノードへオフロードする.このような処理のオフロードにより,最悪の処理時間の低減とサービスを利用するユーザに対してスループット等のサービスの向上が見込める.オフロードにより,送信先の計算機の処理負荷が軽減され,その分より多くのクライアントからの要求に応えられるようになるためである.さらに送信先の計算機では,サービスにとってより本質的な処理のみに専念することができる.このボトルネックの解消により,最悪の処理時間については改善される一方,中継ノードでの処理時間とオフロードによるオーバヘッドが生じ,最良の処理時間は増加する.そこで合わせて並列処理手法を採用することで,最良処理時間の低減を図る.しかしPASS-Node においては,XML文書へのオフロード手法について,数式を用いた理論的な定義と,試験実装を用いたオフロード機能の確認のみしか行われておらず,XML 文書へのネットワーク上での中間処理技術を実現する上での課題が残されていた.そこで本論文では,PASS-Node で残されていた課題を解決することに取り組む.まず,このような並列アプリケーションに必要な機能要素の洗い出しとシステム設計を行い,XML文書への並列ストリーミング処理を行うアプリケーションを実装した.このアプリケーションは,XML 文書への文法チェックの一部または全てを,中継ノードの配置に応じて,パイプライン並列またはデータ分割並列で任意の中継ノードに割り当てることが可能であり,データの送信先となるノードでは,XML 文書全体にわたって検査済みの結果を得ることができる.このアプリケーションを実環境にて稼働させ,本実装によるXML文書への並列ストリーミング処理のオフロードがうまく行われていること及びPASS-Node の実現可能性を示した.そしてこのアプリケーションを用いて,XML文書への並列ストリーミング処理の基本的な特性の評価と,より実際的な環境を想定した場合の評価として実データに基づくXML文書への処理及び実環境と仮想環境における処理特性の比較を行った.さらに,中間処理に必須のデータ蓄積用のバッファに着目し,その改良を行った.加えて,本研究で得られた知見を元に,最も効率的だと思われる構成でXML文書への並列ストリーミング処理を評価し,処理を行う中継ノードの数と処理時間,処理のオフロードの効果を議論した.近年,ネットワークアプリケーションの重要性が増しており,クラウド・コンピューティングなどの計算機資源を用いたサービス提供や計算手法が広く用いられるようになっている.このようなネットワークアプリケーションのために,ネットワークインフラ自体が高度な処理機能を持つ高機能ネットワークの必要性が議論されるようになってきている.高機能ネットワークでは,アプリケーションに即した処理が提供され,例えば,コンテンツの内容に関するフィルタリング処理,異なるWeb サービスの連携のためのデータ変換・加工・集約処理,データ転送量を減らす圧縮・伸張処理,不正アクセスの検知,フロー制御,エラー検知と訂正,統計情報の収集といったものが考えられる.通信のフィルタリングやデータの圧縮は,データの送信元に近い位置でその機能を提供することが有効である.また不正アクセスの検知等必ず提供されなければならないセキュリティ対策機能や複数のWeb サービスの連携機能等,種々のアプリケーションに共通して利用可能な機能をネットワークそのものがまとめて提供することにより,送信先の計算機においては処理の一部をネットワークに移譲できる.これにより,送信先の計算機では処理負荷が軽減され,本来行いたい重要な処理のみに注力できるようになるため,コスト・機能・性能面で有用である.さらにクライアント側においては,スループット等のサービスの向上といった利点を得ることができる.またネットワークインフラを保有する回線事業者にとっては,現在単なるインフラに留まっているネットワークに付加価値を持たせ,処理機能提供による新たな利益を得る機会が生まれる.さらに,本研究で評価の題材とするXML文書は,汎用性に優れているが内部に構造を持つデータ形式である.そのため,適切なデータの分割が為されずデータの欠損が起こった場合,処理を進めることができなくなるため,本質的に単純なデータ分割による並列処理には不向きである.このような並列処理の難しいXML文書を題材とすることで,本研究で得られた知見を,より並列処理の易しい他のデータ形式への処理に対しても適用でき,データを送信元の計算機(クライアント)から送信先の計算機(サーバ)へと送り,送信先の計算機にて処理を行うようなアプリケーションへの成果の応用が期待できる. | |||||||||
| 目次 | ||||||||||
| 内容記述タイプ | TableOfContents | |||||||||
| 内容記述 | 第1章 はじめに||第2章 中継ノードで行うストリーミング並列処理||第3章 評価実験環境構成||第4章 XML文書へのストリーミングデータ処理の基本特性の評価||第5章 より実際的な環境を想定した特性の評価||第6章 処理ノードにおけるバッファ性能の改善||第7章 関連研究||第8章 単体の処理ノードのみ/複数の処理ノードでのストリーミング並列処理の比較||第9章 おわりに | |||||||||
| 備考 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 九州工業大学博士学位論文 学位記番号:情工博甲第284号 学位授与年月日:平成25年12月26日 | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 並列分散処理 | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | ストリーミング処理 | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | XML文書 | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | タスクスケジューリング | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 高機能ネットワーク | |||||||||
| アドバイザー | ||||||||||
| 八杉, 昌宏 | ||||||||||
| 学位授与番号 | ||||||||||
| 学位授与番号 | 甲第284号 | |||||||||
| 学位名 | ||||||||||
| 学位名 | 博士(情報工学) | |||||||||
| 学位授与年月日 | ||||||||||
| 学位授与年月日 | 2013-12-26 | |||||||||
| 学位授与機関 | ||||||||||
| 学位授与機関識別子Scheme | kakenhi | |||||||||
| 学位授与機関識別子 | 17104 | |||||||||
| 学位授与機関名 | 九州工業大学 | |||||||||
| 学位授与年度 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 平成25年度 | |||||||||
| 出版タイプ | ||||||||||
| 出版タイプ | VoR | |||||||||
| 出版タイプResource | http://purl.org/coar/version/c_970fb48d4fbd8a85 | |||||||||
| アクセス権 | ||||||||||
| アクセス権 | open access | |||||||||
| アクセス権URI | http://purl.org/coar/access_right/c_abf2 | |||||||||
| ID登録 | ||||||||||
| ID登録 | 10.18997/00003990 | |||||||||
| ID登録タイプ | JaLC | |||||||||