自作クラスタ計算機:nfsの基本設定
Differences
This shows you the differences between two versions of the page.
| Both sides previous revisionPrevious revisionNext revision | Previous revision | ||
| 自作クラスタ計算機:nfsの基本設定 [2020/06/30 18:15] – [概要] koudai | 自作クラスタ計算機:nfsの基本設定 [2026/05/11 15:36] (current) – [トラブルシューティング] koudai | ||
|---|---|---|---|
| Line 4: | Line 4: | ||
| * そこで、ファイルは1つのファイルサーバに集約して置いておき、各計算ノードは計算のたびにそこからファイルを読み込むようにします | * そこで、ファイルは1つのファイルサーバに集約して置いておき、各計算ノードは計算のたびにそこからファイルを読み込むようにします | ||
| * 分散ファイルシステムの一つであるNetwork File System (NFS)を利用します | * 分散ファイルシステムの一つであるNetwork File System (NFS)を利用します | ||
| - | * ファイルサーバとして管理ノード（IPアドレス: | + | * ファイルサーバとして管理ノード（IPアドレス: |
| ====== 設定手順 ====== | ====== 設定手順 ====== | ||
| - | ===== ヘッドノード ===== | + | ===== 管理ノード ===== |
| - NFSのファイルサーバ用のパッケージをインストールします< | - NFSのファイルサーバ用のパッケージをインストールします< | ||
| Line 17: | Line 17: | ||
| $ sudo vi / | $ sudo vi / | ||
| </ | </ | ||
| - | /home 192.168.0.0/ | + | /home 192.168.0.0/ |
| - | /usr/local 192.168.0.0/ | + | /opt 192.168.0.0/ |
| - | /opt 192.168.0.0/ | + | |
| </ | </ | ||
| * ここでは次のディレクトリを共有します | * ここでは次のディレクトリを共有します | ||
| * /home/ ... ホーム・ディレクトリ | * /home/ ... ホーム・ディレクトリ | ||
| - | * /usr/local/ ... 各種ライブラリがインストールされるディレクトリ | ||
| * /opt/ ... 各種ソフトウェアがインストールされるディレクトリ | * /opt/ ... 各種ソフトウェアがインストールされるディレクトリ | ||
| * オプションの意味は次の通りです | * オプションの意味は次の通りです | ||
| * rw ... ファイルの読み書き (read-and-write) が可能。設定しなければ ro (read-only)となり、ファイルの書き換えができない | * rw ... ファイルの読み書き (read-and-write) が可能。設定しなければ ro (read-only)となり、ファイルの書き換えができない | ||
| - | * async ... 非同期書き込み。設定しなければ sync (同期) になり、クライアントでファイルの書き換えが実行されたときはファイルサーバのファイルもその都度書き換わるが、パフォーマンスが落ちる。ただし、同期前にクライアントがシャットダウンするなどした場合、ファイルの情報は完全に失われる。 | + | * async ... 非同期書き込み。設定しなければ sync (同期) になり、クライアントでファイルの書き換えが実行されたときはファイルサーバのファイルもその都度書き換わるが、パフォーマンスが落ちる。ただし、同期前にクライアントがシャットダウンするなどした場合、ファイルの情報は完全に失われる（そういう状況はあまり発生しないと思います）。 |
| + | * no_subtree_check ... サブツリーチェックを無効化。サブツリーチェックとは、エクスポートしたディレクトリの中にあるファイルを読み込む際に、そのファイルが本当にそのディレクトリに存在するかをチェックすること。これをなくすと動作が少し早くなる。エクスポートつけておくのが推奨 | ||
| + | - （UFWを使用している場合）NFS用のポートを開放します< | ||
| + | $ sudo ufw allow from 192.168.0.0/ | ||
| + | </ | ||
| - NFSサーバを再起動します< | - NFSサーバを再起動します< | ||
| $ sudo systemctl restart nfs-kernel-server | $ sudo systemctl restart nfs-kernel-server | ||
| Line 35: | Line 37: | ||
| ===== 計算ノード ===== | ===== 計算ノード ===== | ||
| - | すべての計算ノードで作業する必要があります | + | すべての計算ノードで作業する必要があります。 |
| + | 管理ノードからSSHでつないで作業しましょう。 | ||
| - NFSのクライアント用のパッケージをインストールします< | - NFSのクライアント用のパッケージをインストールします< | ||
| $ sudo apt install nfs-common | $ sudo apt install nfs-common | ||
| </ | </ | ||
| - | - 同期するディレクトリを指定します< | + | - ファイルサーバーのIPアドレスと同期するディレクトリを指定します< |
| $ sudo vi / | $ sudo vi / | ||
| # | # | ||
| 192.168.0.1:/ | 192.168.0.1:/ | ||
| - | 192.168.0.1:/ | ||
| 192.168.0.1:/ | 192.168.0.1:/ | ||
| </ | </ | ||
| Line 56: | Line 58: | ||
| （略） | （略） | ||
| 192.168.0.1:/ | 192.168.0.1:/ | ||
| - | 192.168.0.1:/ | ||
| 192.168.0.1:/ | 192.168.0.1:/ | ||
| </ | </ | ||
| Line 65: | Line 66: | ||
| </ | </ | ||
| + | |||
| + | ==== トラブルシューティング ==== | ||
| + | |||
| + | === 起動時に自動マウントされない === | ||
| + | |||
| + | （自分の環境では未解決です） | ||
| + | |||
| + | ネットワークよりも先にNFSが立ち上がると、このようなことがおきます。 | ||
| + | / | ||
| + | （起動後に sudo mount -a と手動でコマンドを打てばマウントされます） | ||
| + | |||
| + | == _netdevを使ってみる == | ||
| + | |||
| + | <file - fstab> | ||
| + | 192.168.0.1:/ | ||
| + | 192.168.0.1:/ | ||
| + | </ | ||
| + | * _netdev: ネットワークからマウントすることを明示 | ||
| + | * nofail: エラーが出ても起動を続行 | ||
| + | |||
| + | * 参考：https:// | ||
| + | |||
| + | 自分の環境では解決しませんでした。 | ||
| + | |||
| + | == systemdのautomountを使ってみる == | ||
| + | |||
| + | 当該のディレクトリの初回アクセス時にマウントするように設定します。 | ||
| + | <file - fstab> | ||
| + | 192.168.0.1:/ | ||
| + | 192.168.0.1:/ | ||
| + | </ | ||
| + | |||
| + | 自分の環境だと/ | ||
自作クラスタ計算機/nfsの基本設定.1593508503.txt.gz · Last modified: 2021/06/27 21:58 (external edit)