大容量データアップロード（Box の例）

Chapter４(マニュアル一部抜粋)

 クラウドサーバでのフォルダ設計
これまでグループサーバや個人用途のPCに保存されていたデータを共有サーバに保管する時にはフォルダ設計が必要です。組織に合わせアクセス権限も設定するため慎重に行わなければなりません。


クラウドサーバーを活用する上で、これまでの個別サーバやPCのデータをそのままコピーする運用は望ましくありません。予め効率的にファイルを整理し、格納場所や共有形態の見直しについて検討することを推奨します。

データの共有による情報活用の向上を図る事は、クラウドサーバー導入の大きな目的の一つであり、これを実現するために行うアップロードは貴重な機会です。アップロードの際は充分な検討時間を設け、ルールを明確にする事が重要です。
特に個人PCには共有すべきデータが多く含まれるケースが多く、なおかつ多くのコピーをそれぞれが所持していることから、この機会に「コピーをみんなが持つ」体制から「単一の情報を適切なアクセス権の管理の元で参照する」体制にする事が求められます。「みんなが持つ」体制の欠点の最たるものに、だれの持っているコピーが最新版かが不明となり、みんなが異なるバージョンを所有してしまう事や、コピーの数分だけ社内ストレージを無駄に浪費している問題があげられます。
初期のアップロード作業ではPCやサーバーからの「コピー」だけでなく、Data Migration Boxの同期機能を活用する事で分散されたコピーの単一化も行う事が可能です。クラウドサーバー上でのバージョン管理機能も有効な手段です。
クラウドサーバの「個人フォルダー」の保存データは極力少なくし、個人のアイデアを練るためのメモや外部の参考データに絞るなどのルール化が必要になります。社内データ漏洩を防止するためにも、情報は組織の共有財産との意識を高め、組織データには必要なアクセス権設定とアクセスの履歴を残す仕組みを考慮し、そのためにも最適なフォルダー構成は重要なカギとなります。 

PCまたはローカルサーバ（場合によってはこれまで利用していたクラウドサーバ）から新たなクラウドサーバにデータをアップロードする時の見積りに影響する要素
⚫ データ量（データ量合計とファイル数）
⚫ アップロードに関連する機器の能力
⚫ PCの能力（ネット送信速度、ファイル読み込み速度、PCの処理速度） 
⚫ ネットワーク（帯域幅、遅延）
⚫ クラウドサーバの能力（ネット受信速度、受入れ処理速度）

参考データ（Boxへの 100ＭＢデータをファイルの大きさ、数を変えてアップロードした例）

この結果ではアップロード時間に一番大きな影響を与えたのは、データ量ではなくファイル数でした。これは上記の機器の能力の内、クラウドサーバの能力でありその中でも受入れ処理の時間だと推測できます。クラウドサーバでのファイル単位に行われる受入れ処理（伝送上のコードエラー検出、格納時のテーブル作成などが考えられます）の時間がネットワーク速度などに比較し多くの時間を要している事が伺えます。Data Migration Boxにデータ格納を行う時にも見られる現象でクラウドサーバの受入れ処理の変更やサーバ機器の能力向上などで変化する可能性もあります。

なお、100Mb1ファイルで時間が掛かっているのはチャンクドアップロードが実行されたためと考えられます。

（この例はあくまでもジャングル社内のPC環境とネットワーク環境を使用しアップロードを行った際のデータであり、環境の変化により結果は異なるものとなります。）

ファイル送信を行う時には1ファイルを送信すると、受信側からの「正常受信・格納完了」信号を待ち、その後次のファイル送信を開始するという順番で処理が行われます。この信号を一定時間受信しない場合は同じファイルの再送信処理を行います。ファイル送信終了から「正常受信・格納完了」信号を送信側が受け取るまでの時間が受信側の「受入れ処理の時間」になります。

上記の結果から、初期アップロードなど大量データのアップロード時間の短縮を図るためには、クラウドサーバのデータ受入れ処理を複数活用し、いかに多くの並列処理を実行できるようにするかがポイントになります。
並列処理を行うにはいくつかの方法があるので、以下に紹介します。なお、初期のアップロード時はクラウドサーバのフォルダーが空ですので、コピー処理ではなく同期処理を行っても「比較」処理に時間が掛からない為、コピー処理とほぼ同じ時間でのアップロード処理が期待できます。
「PC」と表記しますが、ローカルのサーバーにData Migration Boxをインストールしている場合はそのサーバーと読み替えて下さい。
なお、ご利用中のネットワーク速度がネックとなるケースについては、別途改善策の検討が必要です。

　使用PC＆Data Migration Boxライセンス：1
　Boxアカウント：１ユーザー
Data Migration Boxで同時アップロード数を設定できます。Box側の処理で仮想複数ポートを利用するため、Boxでは上限を「５」に設定しています。Data Migration Box処理にPCのより多くの能力を使う事になります。Data Migration Boxで利用帯域幅の上限を設定している場合は、同時アップロードの合計が制限以内になるよう自動処理されます。Data Migration Box設定は Chapter４の使用環境の設定を参照して下さい。同時アップロード数、同時ダウンロード数が設定できます。
同時に通信障害などでファイル送信が中断された際のリトライ回数を設定して下さい。ここで設定した回数をリトライして正常受信信号が受け取れない場合は、通信エラーとして処理を中断します。 

　使用PC＆Data Migration Boxライセンス：１ 
　Boxアカウント：複数ユーザー
複数のBoxアカウントを取得し、Box側へ並列でアップロードします。Boxの処理資源がユーザーアカウント数分利用できるので、アップロード速度の向上が見込まれます。Data Migration BoxのUI同期処理で複数のBoxアカウントを登録し、複数の同期処理をスケジューラで登録したり、複数のコマンドラインで同時処理を実行する事が可能になります。

　使用PC＆Data Migration Boxライセンス：複数
　Box アカウント：複数ユーザー 
Data Migration Boxのライセンスを複数取得して同時に利用する形態です。複数台のPC、または社内ファイルサーバからのアップロードなどが考えられます。Boxの受入れ処理速度だけでなく、PC処理能力がネックになるようなケースで有効です。ネットワーク帯域は各PC処理量の合計分使用される事を考慮する必要があります。