HP Moonshot の各ノードには SSD が 480GB しか搭載されていないので、外部のストレージ (Intel SSD910 200G x 8 = 1.6TB & NETGEAR NAS 20TB)を NFS で接続してみました。実際に計算する際には各ノードの SSD に事前にコピーしないと性能が低下してしまいますが、とりあえず大規模データを扱えるようになりました。
[fujisawa@cal01 ~]$ df
ファイルシス 1K-ブロック 使用 使用可 使用% マウント位置
/dev/sda3 451732984 18354840 433378144 5% /
devtmpfs 16347516 0 16347516 0% /dev
tmpfs 16353208 0 16353208 0% /dev/shm
tmpfs 16353208 205096 16148112 2% /run
tmpfs 16353208 0 16353208 0% /sys/fs/cgroup
/dev/sda1 507200 98968 408232 20% /boot
ssd910:/data2 1562123264 1239631872 322491392 80% /mnt/data2
nas1:/data/NFS_NAS 19510833920 549149696 18960826368 3% /mnt/nas1
[fujisawa@cal01 ~]$ df -H
ファイルシス サイズ 使用 残り 使用% マウント位置
/dev/sda3 463G 19G 444G 5% /
devtmpfs 17G 0 17G 0% /dev
tmpfs 17G 0 17G 0% /dev/shm
tmpfs 17G 211M 17G 2% /run
tmpfs 17G 0 17G 0% /sys/fs/cgroup
/dev/sda1 520M 102M 419M 20% /boot
ssd910:/data2 1.6T 1.3T 331G 80% /mnt/data2
nas1:/data/NFS_NAS 20T 563G 20T 3% /mnt/nas1
◯ HP ProLiant m710 サーバーカートリッジ (45カートリッジ)
プロセッサー Intel® Xeon® E3-1284L v3(1.8-3.2GHz/8コア/6MB/47W)
キャッシュメモリ 6MB共有Level 3
メモリ タイプ HP 32GB(4x8GB)PC3L-12800(DDR3-1600)SODIMM低電圧メモリ
ネットワークコントローラー Mellanox Connect-X3 Pro デュアル10GbE NIC。RDMA over Converged Ethernet(RoCE)をサポート
最大内蔵ストレージ (Moonshotサーバーあたり) M.2 2280ソリッドステートデバイス 480GB
[fujisawa@cal01 ~]$ df
ファイルシス 1K-ブロック 使用 使用可 使用% マウント位置
/dev/sda3 451732984 18354840 433378144 5% /
devtmpfs 16347516 0 16347516 0% /dev
tmpfs 16353208 0 16353208 0% /dev/shm
tmpfs 16353208 205096 16148112 2% /run
tmpfs 16353208 0 16353208 0% /sys/fs/cgroup
/dev/sda1 507200 98968 408232 20% /boot
ssd910:/data2 1562123264 1239631872 322491392 80% /mnt/data2
nas1:/data/NFS_NAS 19510833920 549149696 18960826368 3% /mnt/nas1
[fujisawa@cal01 ~]$ df -H
ファイルシス サイズ 使用 残り 使用% マウント位置
/dev/sda3 463G 19G 444G 5% /
devtmpfs 17G 0 17G 0% /dev
tmpfs 17G 0 17G 0% /dev/shm
tmpfs 17G 211M 17G 2% /run
tmpfs 17G 0 17G 0% /sys/fs/cgroup
/dev/sda1 520M 102M 419M 20% /boot
ssd910:/data2 1.6T 1.3T 331G 80% /mnt/data2
nas1:/data/NFS_NAS 20T 563G 20T 3% /mnt/nas1
◯ HP ProLiant m710 サーバーカートリッジ (45カートリッジ)
プロセッサー Intel® Xeon® E3-1284L v3(1.8-3.2GHz/8コア/6MB/47W)
キャッシュメモリ 6MB共有Level 3
メモリ タイプ HP 32GB(4x8GB)PC3L-12800(DDR3-1600)SODIMM低電圧メモリ
ネットワークコントローラー Mellanox Connect-X3 Pro デュアル10GbE NIC。RDMA over Converged Ethernet(RoCE)をサポート
最大内蔵ストレージ (Moonshotサーバーあたり) M.2 2280ソリッドステートデバイス 480GB