氏名 : 後藤 航 (281267120)
所属 : 河口研
題目 : 大規模データの蓄積・管理のためのフレームワークとその可視化
概要 :
近年，インターネットの発展やクラウド環境の普及，センサ技術の進化やモバイル端末の普及により，多様なデータが取得可能になり，
これらの分析や利用に注目が高まっている．しかし，センサ数の増大やサンプリングレートの細粒度化により，データが大規模化し，
その管理手法の考慮が必要となる．
従来の手法では，データベースに保存している．しかし，スキーマを事前に決める必要があるためデータ形式の柔軟性が低く，
データにアクセスする方法がある程度限られており，様々なシステムでデータを利用する際の試行錯誤が困難である．
また，大量アクセスによる負荷も考えられる．
本研究ではシェルスクリプトとファイルシステムのみで全てのデータを管理するシステムを提案する．
シェルは記述の自由度が高いため，短期間で様々な試行錯誤が可能であり，データ種別・形式の変更に対応できる．
さらに，ファイルでデータを管理しているため，データの分割管理やバックアップが容易であり，データ更新時の負荷が少なく，
データ容量の圧迫が少ない．また可視化にはJavaScriptを用いた.
また，本フレームワークを用いたシステムを実装し、その実用性を確認した．
目次に戻る