ONION

ONION(Osaka university Next-generation Infrastructure for Open research and open InnovatioN)とは、SQUIDと連携しているデータ集約基盤です。SQUIDのファイルシステムEXAScaler、WEBストレージサービスONION-file、オブジェクトストレージ ONION-objectで構成されています。
ONIONを活用することで、利用者のみなさまの環境とスーパーコンピュータ間のデータ移動が簡単になります。また、SQUIDやOCTOPUSのアカウントを持っていない海外や企業の共同研究者の方と即座に計算結果を共有する、スマートフォンからデータ操作をするといったことができるなど、様々な利用方法が考えられます。もちろん、研究室の研究データの保存・共有などにもお使いいただけます。
 

以下の論文にて導入背景やシステム構成、機能の詳細について説明しています。是非ご参照ください。
大阪大学のデータ集約基盤ONION
 

利用のお申し込み

EXAScalerおよびONION-fileはSQUIDの一部として提供しています。お申し込み方法はこちらのページをご参照ください。
ONION-objectはSQUIDとは別にお申し込みが必要となります。サービス概要や利用のご相談・お申し込みは、こちらのページをご参照ください。

※SQUIDおよびONION-objectの利用料金はこちらをご参照ください。なお、ONION-objectは「ONION(オブジェクトストレージ)」と表記しております。

 

システム構成

EXAScaler

EXAScalerはLustreをベースとするDDN製の並列ファイルシステムです。
 
以下の操作が可能です。
・データの保存、閲覧、移動、削除
・SQUID計算ノードからのデータ入出力
・SFTP、S3に対応したクライアントソフトからのデータアクセス

実効容量(HDD) 20 PB
実効容量(NVMe) 1.2 PB
最大合計inode数 約 88 億個
最大想定実効スループット(HDD) 160 GB/s 以上
最大想定実効スループット(NVMe) Write : 160 GB/s 以上
Read : 180 GB/s 以上

 

ONION-file

ONION-fileはNextcloudで提供されるストレージサービスです。
WEBブラウザを通して全ての操作・設定が可能です。初期状態ではEXAScaler上のSQUID home領域のみが連携されていますが、WebDAV、SFTP、S3に対応した任意の外部ストレージを連携可能です。(例えばOCTOPUSのwork領域、後述のONION-objectも連携可能です)
 
連携したストレージに対しては、WEBブラウザから以下の操作が可能です。
・データの保存、閲覧、移動、削除
・アクセス用URLを発行し、SQUIDやONIONを使用していない方に対してデータを公開する、あるいはデータを置いてもらう

 

ONION-object

ONION-objectはCloudian製のHyperStoreで提供されるオブジェクトストレージです。
SQUIDやOCTOPUSと独立したAWS S3互換のオブジェクトストレージとなっており、外部のクラウドや、S3 対応ストレージとの相互のデータ交換を容易に行うことができます。サービス概要や利用のご相談・お申し込みは、こちらのページをご参照ください。

 
以下の操作が可能です。
・データの保存、閲覧、移動、削除
・S3 APIでのオブジェクト・バケット操作(一部はWEBブラウザからの操作にも対応しています)

実効容量 950 TiB
※順次拡張予定
データ保護方式 イレイジャー・コーディング※
(データチャンク:4+パリティチャンク:2)

※イレイジャー・コーディングとは

  • データを4KB単位のブロックサイズに分割し保存します。ONION-objectでは4つのデータチャンクと2つのパリティチャンクに保存します。
  • 大きなデータを容量効率良く保存するアーカイブ用途に向いています。
  • 符号化処理を毎回行うため、更新が頻発する利用には不向きです。

 

注意事項

    SQUIDに合わせて試験導入中のONION-objectは、サイバーメディアセンターの教職員およびSQUIDの運用ベンダである日本電気株式会社が細心の注意のもと運用を行なっております。しかし、本センターではファイルシステムのバックアップを行なっておりませんので、システムの障害、不慮の事故、天災等により、データが失われる可能性があります。その際、本センターでは責任を負いかねますので、必要なファイルについてはご自身でバックアップをお願いいたします。また、本システムは、大学での予算措置がなされない場合2026年4月末でサービス終了予定となっており、更新の計画は未定です。

 

利用方法

下記ページをご覧ください。
ONIONの利用方法

 

Gallery

  

 

広報物

紹介ポスター
紹介パンフレット
稼働中のシステム

SQUID

稼働状況:定常運転
稼働開始:2021年5月6日
総理論演算性能:16.591PFLOPS
総ノード数:1,5 ...[read more]

OCTOPUS

稼働状況:定常運転
稼働開始:2017年11月6日
総理論演算性能:1.463PFLOPS
総ノード数:319 ...[read more]

ONION

稼働状況:定常運転
稼働開始:2021年5月6日
実効容量:21.8 PB ...[read more]