Lustre (ファイルシステム)
Lustre (ラスター) は、一般に大規模のクラスターコンピューティング・スーパーコンピュータで使用されている分散ファイルシステムである。Lustreという名前はLinuxとClusterのかばん語になっている[3]。LustreはGNU GPL v2の下で公開されており、小規模のワークグループのためのクラスタから大規模なマルチロケーションのクラスタに及ぶ広い範囲のコンピュータクラスタに対して、ハイパフォーマンスなファイルシステムを提供する。
| Lustre | |
|---|---|
| 導入 | 2003年12月 (Linux) |
| 構造 | |
| ディレクトリ | ハッシュテーブル |
| 限度 | |
| 最大ファイル サイズ |
3.2 PiB (ext4) 16 EiB (ZFS) |
| 最大ファイル名長 | 255バイト |
| 最大ボリューム サイズ |
100 PiB (実装上) 16 EiB (理論上) |
| ファイル名の文字 | NUL と '/' と隠しファイル ('.' と '..') 以外の全ての文字 |
| 特徴 | |
| タイムスタンプ | 変更、属性変更、アクセス、削除、作成 |
| 日付範囲 |
264ビット (ext4) 234ビット (ZFS) |
| 日付分解能 | 1秒 |
| フォーク | なし |
| パーミッション | POSIX、ACL、SELinux |
| 透過的圧縮 | あり (ZFS) |
| 透過的暗号化 | あり (ネットワーク) |
| 重複排除 | あり (ZFS) |
| 対応OS | Linux |
| 初版 | 2003年12月16日[1] |
|---|---|
| 最新版 |
2.14.0
/ 2021年1月31日[2] |
| リポジトリ | |
| プログラミング 言語 | C言語 |
| 対応OS | Linux |
| サポート状況 | 開発中 |
| 種別 | 分散ファイルシステム |
| ライセンス | GNU GPL v2 |
| 公式サイト |
lustre |
Lustreファイルシステムは高い性能を持ち、ライセンスがオープンであるため、スーパーコンピュータでしばしば利用されている。2005年6月以降、常にトップ10の少なくとも半分のスーパーコンピュータで使用されており、世界の最も高速なスーパーコンピュータシステム100のうちの60以上で採用されている[4][5][6]。この中には、2014年にTOP500にランクインした世界第2位と第3位のスーパーコンピュータである、TitanやSequoiaが含まれる[7][8]。2018年6月の上位10位では、第1位のSummitや第7位のTitanなどで利用されている[9][10]。
Lustreは、クライアントノード数は数万台、サーバ数は数百台、サーバに搭載されるストレージ総容量は数十PB、合計I/Oスループット1TB/s以上の規模の、複数の大規模コンピュータクラスタに組み込むことが可能な、スケーラブルなファイルシステムである[11][12]。そのため、Lustreファイルシステムは、気象学、シミューレーション、石油・ガス資源、生命科学、interactive media、金融などの分野で採用されることが多い[13]。
概要
歴史
- 2003年12月、Lustre 1.0.0がリリースされた。
脚注
- “Lustre 1.0 released” (2003年12月17日). 2018年7月3日閲覧。
- “Release 2.14.0”. 2021年12月3日閲覧。
- “Lustre Home”. 2001年3月31日時点のオリジナルよりアーカイブ。2013年9月23日閲覧。
- “Lustre File System, Version 2.4 Released”. Open Scalable File Systems. 2014年10月18日閲覧。
- “Open-source Lustre gets supercomputing nod”. 2014年10月18日閲覧。
- “Xyratex Captures Oracle’s Lustre”. HPCWire. 2014年10月18日閲覧。
- “Titan System Overview”. Oak Ridge National Laboratory. 2013年9月19日閲覧。
- Brian Behlendorf. “ZFS on Linux for Lustre”. Lawrence Livermore National Laboratory. 2014年10月31日時点のオリジナルよりアーカイブ。2014年10月18日閲覧。
- “File Systems: Data Storage & Transfers”. Oak Ridge National Laboratory. 2018年7月3日閲覧。
- “File Systems: Data Storage & Transfers”. Oak Ridge National Laboratory. 2018年7月3日閲覧。
- “Spider Center-Wide File System”. Oak Ridge Leadership Computing Facility. 2012年2月2日閲覧。
- “Rock-Hard Lustre: Trends in Scalability and Quality”. Nathan Rutman, Xyratex. 2012年2月2日閲覧。
- Lustre File System presentation, November 2007 - YouTube By Peter Braam, November 10, 2007
関連項目
This article is issued from Wikipedia. The text is licensed under Creative Commons - Attribution - Sharealike. Additional terms may apply for the media files.