k1dc0のDAQ入力側(Myricom)カードを２枚構成に変更する検討

YamaT-san, Nakagaki-san, Ikeda

概要
IPC Glitchの発生がいくつか報告されている。
この問題の対処案の１つとして、ネットワークカードを増やしてデータ転送を改善して不具合が解決するかを試す。

方法として、k1dc0のdaqデータの入力はMyricomネットワークカードを使っている。
現状は、１枚カードがインストールされている。
カード枚数を２枚にした時に改善するか検証を行う。

手順
1. 新しいPCにMyricomカードを２枚インストールしたk1dc0を作成して、ラック(C1:25,26)へ設置した。
2. オリジナルのk1dc0とは独立した新しいケーブルで接続した。
しかし、DAQのIn側のネットワークスイッチの光端子が１ポートしか開いていない。
そのため、全てが完全に独立したケーブルにすることができなかった。
我々は、daqの入力側についてはオリジナルの光ケーブルを抜いて、新しいk1dc0のケーブルを接続した。
3.オリジナルのk1dc0のHDDをコピーして、新しいk1dc0で立ち上げた。
4.新しいPCで/etc/coonf.d/local.startのIntelNICの設定をeth3->eth4へ変更した。
　あとはmyri1のrx-usecを1に設定する行を追加した。
5.再起動後に、mx_streamを再起動してdaqが正しく動くかを確認する。

結果
・mx_streamが0xbadのままで正常に通信できなかった。
確認したところ、Myricomカードの１枚目はネットワークと接続されたが、もう1枚のLEDが付かずLink down状態であった。
ケーブルを抜き差ししてみたが改善が見られなかった。

復旧作業をする時間がないので、今回の作業はここまでとした。
オリジナルのk1dc0に接続を戻して、復旧をさせた。

---
Investigate changing the k1dc0 DAQ input side (Myricom) card to a two-card setup.

YamaT-san, Nakagaki-san, Ikeda

Summary
There have been several reports of IPC glitches.
As a possible solution to this problem, we are going to increase the number of network cards to improve data transfer and see if the glitch can be resolved.

As a method, we are using a Myricom network card to input the daq data for k1dc0.
Currently, one card is installed.
Verify if it improves when the number of cards is increased to two.

Procedure
1. create a k1dc0 with two Myricom cards installed on a new PC and install it in the rack (C1:25,26) .
2. connected with a new cable independent of the original k1dc0.
However, only one port of the optical terminal of the network switch on the In side of the DAQ is empty.
Therefore, it was not possible to make all the cables completely independent.
We unplugged the original optical cable for the In side of k1dc0 and connected a new k1dc0 cable.
3. We copied the original k1dc0 HDD and started it up on the new k1dc0.
4. On the new PC, I changed the IntelNIC setting in /etc/coonf.d/local.start to eth3->eth4.
　I also added a line to set rx-usec of myri1 to 1.
5. After reboot, restart mx_stream and check if daq works correctly.

Result
mx_stream remained at 0xbad and could not communicate properly.
We checked and found that the first Myricom card was connected to the network, but the LED on the other card did not come on and it was in a Link down state.
We tried unplugging and plugging cables, but there was no improvement.

Since there was no time to do the restoration work, I decided to finish the work this time.
I restored the connection to the original k1dc0 and restored it.