リグの安定運用のための cron

こんにちはドリ助です。
私のリグには７枚の玄人志向の GPU が刺さっているのですが、７枚中１枚の GPU が外れの GPU らしく、たまに確認するとその１枚だけ動いていないことがあります。再起動するとまたちゃんと動くので、壊れているというわけではないのですが、当たり外れはどうにもならないですね。
ただ、このままだと毎日リグがちゃんと動いているのを確認して、動いていないときは再起動をかけてあげないと６枚で動かしている時間が長くなり、思った通りの運用ができません。
また、毎日リグを確認して動いているかどうか確かめるのは正直面倒です。理想は GPU が一枚動かなくなったのを検知したら、勝手に再起動して復旧するのが理想です。
ただまぁそこまでするのも大変そうだったので、１日１回勝手に再起動してくれれば１日５分ほど動いていない時間ができますが、ほぼ７枚フルで動くかなと思い、１日１回再起動するように設定することにします。

cron について

１日１回なんかしてほしいというものを探していたら、cron というものを見つけたのでこれで設定することにします。

以下は引用です

cron とは

cron とは、ジョブ（スクリプト）を自動実行するためのデーモンプロセスです。そして、Linux システムの管理を行なう場合、ログのローテートや、バックアップなど、定期的に自動実行したいジョブが数多くあります。特に、バックアップなどは、システムへの負荷が大きいため、通常は、ユーザからのアクセスが少ない、深夜や早朝に行なわれます。

このように、定期的に実行されるジョブは、crond というデーモンによって、自動的に行なうように管理することができます。そこで、今回は、cron の設定を行なうために必要なコマンドや、設定ファイルについて説明していきたいと思います。

cron の設定方法

１日１回再起動すればいいと考えていましたが、minestop というコマンドを使えばリグ自体を再起動しなくても GPU のみを再起動すできるようなので一日一回 minestop コマンドが動くようにします。

以下のコマンドを打って cron のエディタを開きます。

# crontab -e

cron の設定は以下のように書けばいいので

分 時 日 月 曜日 <実行コマンド>

実際に書く内容は以下になります。

0 10 * * * minestop

この意味は毎日 10 時に minestop コマンドを実行するという意味です。

これで無事毎日 10 時に再起動するようになりました。 実際にこれを使って運用を始めましたが、たまに確認しても大体の時間フルで動いているようです。たまに６枚になっているようですが、次の日には復活してるようなので許容範囲かなと。

以上です。

ビデオカードの配置について

こんにちはドリ助です。
暑い日が続いていますが、皆さまいかがお過ごしでしょうか？

ウチではリグが元気に熱を発しており、リグの置いてある部屋は蒸し風呂状態です。ウチでは排熱にお金をかけてないので、リグのためにエアコンなどはつけていません。サーキュレーターのみで排熱をしています。

ところで、たまに他のリグの写真をみるのですが、なぜかビデオカードを一直線にキレイに並べていることが多いように思います。こんな感じで。

１列 x６枚

これだと隣のビデオカードの熱や熱風が隣のビデオカードに伝わって排熱の邪魔になってしまうのではないんかな？と思います。

私のように小規模じゃないからスペースが足りないとかエアコンつけるから関係ないわ〜など理由があるのかもしれません。

またちゃんとラックがあってファンをつける場合、近くにあった方が効率よく排熱できるのかもしれません。

ただ、そうでない場合はビデオカードは離して置いてある方が温度が上がらないように思います。

ウチのリグは以前は1列に並べていたのですが、今では縦に2列にしてビデオカード同士の、間隔を広げています。

2 列 x 3 枚

これだと部屋は蒸し風呂状態ですが、なんとか70℃は行かないで安定しています。夏はこれで乗り切ろうかと思っています。秋が来れば逆に暖房機器として大助かり！早く秋が来て欲しいですね。


以前の1列のときにビデオカード同士の間に手を入れたときの熱風の暑いこと暑いこと。この熱で風呂でもわかせんかなと思ってしまいます。

こんなのとか
積層型熱電変換素子（開発中） | 村田製作所

こんなのが
蓄電・発電機器：熱源に「貼るだけ」で発電するシート、積水化学が2018年度に製品化へ

早く実用化されたら面白いですね。