Differences between revisions 20 and 21

Check list for real time system

Simple check list

medmに数字が出て、その数字が変化しているか? [How to check]
- 症状: 数字が出ない
  - 原因: epics IOCが立ち上がっていない。 [解決策]
  - 原因: mbufが走っていないためepics IOCが起動できない。 [解決策]
  - 原因: caRepeaterが起動していない。 [解決策]
- 症状: 数字が出ても0のまま動かない
  - 原因: burtが0のままである。[解決策]
  - 原因: real time moduleが走っていない。
dataviewerで現在、及び過去のデータが見えるか? [How to check]
- 症状: diagguiではデータが見えるのに、dataviewerでは
```
Error in obtaining chan info.
Connecting....connect(); errno=111
```
  というメッセージが出て、channel名が出てこない:
  - 原因: dataviewerのバージョンがRTSのバージョンに比べて古い、もしくはLinuxのカーネルとバージョンがあっていない->RTSのバージョンに一致したdataviewerをビルドしてインストールする。[How to install]
- 症状: channel名が出てこない:
  - 原因: real time moduleが走っていない。
  - 原因: awgtpmanが走っていない。[解決策]
- 症状: 現在のデータも過去のデータも見えない:
  - 原因: real time moduleが走っていない。
  - 原因: ndsが動いていない。[解決策]
- 症状: 現在のデータは見えるが、過去のデータが見えない:
  - 原因: daqdが動いていない。[解決策]
- 症状: 過去のデータは見えるが、現在のデータが見えない:
  - 原因: DAQ networkのどこかが切れている。
diaggui(DTT)で現在、及び過去のデータが見えるか? [How to check]
- 症状: channel名が出てこない:
  - 原因: real time moduleが走っていない。
  - 原因: awgtpmanが走っていない。[解決策]
- 症状: synchronization errorがでる:
  - 原因: real time PCの計算機自身の時間と、real time software上の時間がずれてしまっている。->real time PCを再起動。
- 症状: time outになってしまう:
  - 原因: real time PCとdiagguiを走らせているclient PCの内部時間がずれている。->client PCのntpが動いていているか確認。時刻を合わせる。
- 症状: 現在のデータも過去のデータも見えない:
  - 原因: real time moduleが走っていない。
  - 原因: ndsが動いていない。[解決策]
- 症状: 現在のデータは見えるが、過去のデータが見えない:
  - 原因: daqdが動いていない。[解決策]
- 症状: 過去のデータは見えるが、現在のデータが見えない:
  - 原因: DAQ networkのどこかが切れている。

上記項目がおかしい場合、まず試すこと

mbufは動いているか?
```
controls@standalone ~ $ lsmod
Module                  Size  Used by
k1vex                9455730  0
k1x01                9198550  1 k1vex
mbuf                    7317  10 k1vex,k1x01
```
とmbufが動いていて、モジュールとしてIOCとRT modelが走っているか?
- mbufは/etc/rc.localから呼び出されている。
- RT model等は/opt/rtcds/kamioka/k1/scripts/startk1vex等から呼び出されている(startスクリプトの一例)。これをたどっていくと、何が起動されているかが分かる。ここも参照するといい。

epics caRepeater及びepics IOCが走っているか?

controls@standalone ~ $ ps -ef | grep epics
controls  5045     1  0 14:38 ?        00:00:00 /opt/rtapps/epics/base/bin/linux-x86_64/caRepeater
controls  5085     1  0 14:38 ?        00:00:01 ./k1x01epics k1x01epicsK1.cmd
controls  5189     1  4 14:38 ?        00:00:10 ./k1vexepics k1vexepicsK1.cmd

caRepeaterは/etc/rc.localから呼び出されている。
それぞれのモデルのepics IOCは、それぞれのモデルのstartスクリプトから起動されている。
log(example): /opt/rtcds/kamioka/k1/target/k1vex/k1vexepics/iocK1.log

burtは1になっているか?
- medmで/opt/rtcds/kamioka/k1/medm/k1x01/K1X01_GDS_TP.adlや/opt/rtcds/kamioka/k1/medm/k1vex/K1VEX_GDS_TP.adlを開いて「BURT」のところが緑になっているか確認する。

WatchdogがOFFになっていないか?
- /opt/rtcds/kamioka/k1/medm/k1vex/K1VIS_ETMX_F0.adlを開いて、右下のWatchdogがONになっていることを確認。

awgtpmanは走っているか?

controls@standalone ~ $ ps -ef | grep awg
root      5159     1  0 14:38 ?        00:00:12 /opt/rtcds/kamioka/k1/target/gds/bin/awgtpman -s k1x01 -4 -l /opt/rtcds/kamioka/k1/target/gds/awgtpman_logs/k1x01.log
root      5280     1  0 14:39 ?        00:00:12 /opt/rtcds/kamioka/k1/target/gds/bin/awgtpman -s k1vex -l /opt/rtcds/kamioka/k1/target/gds/awgtpman_logs/k1vex.log

それぞれのモデルのawgtpmanは、それぞれのモデルのstartスクリプトから起動されている。
log: /opt/rtcds/kamioka/k1/target/gds/awgtpman_logs/k1vex.log

ndsは走っているか?

controls@standalone ~ $ ps -ef | grep nds
controls  5534     1  0 14:39 ?        00:00:00 su controls -c /opt/rtcds/kamioka/k1/target/fb/nds /opt/rtcds/kamioka/k1/target/fb/pipe
controls  5539  5534  0 14:39 ?        00:00:00 /opt/rtcds/kamioka/k1/target/fb/nds /opt/rtcds/kamioka/k1/target/fb/pipe

ndsは/etc/inittabから呼び出されている

controls@standalone ~ $ tail -n 2 /etc/inittab
fb:2345:respawn:/opt/rtcds/kamioka/k1/target/fb/start_daqd.inittab
nds:2345:respawn:/opt/rtcds/kamioka/k1/target/fb/start_nds.inittab

log: /opt/rtcds/kamioka/k1/target/fb/logs/nds.log (通常問題なく起動するとログには何も記述されない)

daqdは走っているか?

controls@standalone ~ $ ps -ef | grep daqd
controls 20077     1  0 16:42 ?        00:00:00 su controls -c /opt/rtcds/kamioka/k1/target/fb/daqd -c /opt/rtcds/kamioka/k1/target/fb/daqdrc
controls 20081 20077  3 16:42 ?        00:00:00 /opt/rtcds/kamioka/k1/target/fb/daqd -c /opt/rtcds/kamioka/k1/target/fb/daqdrc

daqdは/etc/inittabから呼び出されている

controls@standalone ~ $ tail -n 2 /etc/inittab
fb:2345:respawn:/opt/rtcds/kamioka/k1/target/fb/start_daqd.inittab
nds:2345:respawn:/opt/rtcds/kamioka/k1/target/fb/start_nds.inittab

log: /opt/rtcds/kamioka/k1/target/fb/logs/daqd.log
daqdが走っているかどうかの確認方法の一つは/frames以下にfame dataが書き込まれているかどうかを見ることである。

/framesいかがいっぱいになっていないか?
- dfコマンドで/dev/sdc1の空き容量をチェック。

More check list

ezcaコマンド群は問題なく動くか?
BURTは裏できちんと動いていて、epicsの変化を記録しているか?
Conlogは作動しているか?
CPU meterの値は十分小さいか?

Model building test

Client Workstation上でMatlabが立ち上がるか?
modelをbuildできるか?
再起動で問題なく動くか?

動作の挙動がおかしい

RTSの動作が重い、medmの各K1XXX_GDS_TP.adlの「CYC/USR」の左の数字が黄色または赤になっている:
- 原因: データ保存用HDDがいっぱいになっている。 [解決策]

KAGRA/Subgroups/DGS/Manual/CheckList (last edited 2016-11-14 14:38:02 by TakahiroYamamoto)

-  ⇤ ← Revision 20 as of 2013-06-10 11:51:14 → 
  Size: 7194
  Editor: OsamuMiyakawa
  Comment:
+   ← Revision 21 as of 2013-06-10 12:24:01 → ⇥
  Size: 8207
  Editor: OsamuMiyakawa
  Comment:
-Deletions are marked like this.
+Additions are marked like this.
 Line 6:
-  * 数字が出ない:
   * epics IOCが立ち上がっていない。
   * mbufが走っていないためepics IOCが起動できない。
   * caRepeaterが起動していない。
  * 数字が出ても0のまま動かない:
   * burtが0のままである。
   * real time moduleが走っていない。
+  * 症状: 数字が出ない
   * 原因: epics IOCが立ち上がっていない。 [[#epics|[解決策] ]]
   * 原因: mbufが走っていないためepics IOCが起動できない。 [[#mbuf|[解決策] ]]
   * 原因: caRepeaterが起動していない。 [[#epics|[解決策] ]]
  * 症状: 数字が出ても0のまま動かない
   * 原因: burtが0のままである。[[#burt|[解決策] ]]
   * 原因: real time moduleが走っていない。
 Line 15:
-  * diagguiではデータが見えるのに、dataviewerでは{{{
+  * 症状: diagguiではデータが見えるのに、dataviewerでは{{{
 Line 19:
-   * dataviewerのバージョンがRTSのバージョンに比べて古い、もしくはLinuxのカーネルとバージョンがあっていない->RTSのバージョンに一致したdataviewerをビルドしてインストールする。[[KAGRA/Subgroups/DGS/RTPC/WS#dv|[How to install] ]]
  * channel名が出てこない:
   * real time moduleが走っていない。
   * awgtpmanが走っていない。
  * 現在のデータも過去のデータも見えない:
   * real time moduleが走っていない。
   * ndsが動いていない。
  * 現在のデータは見えるが、過去のデータが見えない:
   * daqdが動いていない。
  * 過去のデータは見えるが、現在のデータが見えない:
   * DAQ networkのどこかが切れている。
+   * 原因: dataviewerのバージョンがRTSのバージョンに比べて古い、もしくはLinuxのカーネルとバージョンがあっていない->RTSのバージョンに一致したdataviewerをビルドしてインストールする。[[KAGRA/Subgroups/DGS/RTPC/WS#dv|[How to install] ]]
  * 症状: channel名が出てこない:
   * 原因: real time moduleが走っていない。
   * 原因: awgtpmanが走っていない。[[#awg|[解決策] ]]
  * 症状: 現在のデータも過去のデータも見えない:
   * 原因: real time moduleが走っていない。
   * 原因: ndsが動いていない。[[#nds|[解決策] ]]
  * 症状: 現在のデータは見えるが、過去のデータが見えない:
   * 原因: daqdが動いていない。[[#daqd|[解決策] ]]
  * 症状: 過去のデータは見えるが、現在のデータが見えない:
   * 原因: DAQ networkのどこかが切れている。
 Line 32:
-  * channel名が出てこない:
   * real time moduleが走っていない。
   * awgtpmanが走っていない。
  * synchronization errorがでる:
   * real time PCの計算機自身の時間と、real time software上の時間がずれてしまっている。->real time PCを再起動。
  * time outになってしまう:
   * real time PCとdiagguiを走らせているclient PCの内部時間がずれている。->client PCのntpが動いていているか確認。時刻を合わせる。
  * 現在のデータも過去のデータも見えない:
   * real time moduleが走っていない。
   * ndsが動いていない。
  * 現在のデータは見えるが、過去のデータが見えない:
   * daqdが動いていない。
  * 過去のデータは見えるが、現在のデータが見えない:
   * DAQ networkのどこかが切れている。
+  * 症状: channel名が出てこない:
   * 原因: real time moduleが走っていない。
   * 原因: awgtpmanが走っていない。[[#awg|[解決策] ]]
  * 症状: synchronization errorがでる:
   * 原因: real time PCの計算機自身の時間と、real time software上の時間がずれてしまっている。->real time PCを再起動。
  * 症状: time outになってしまう:
   * 原因: real time PCとdiagguiを走らせているclient PCの内部時間がずれている。->client PCのntpが動いていているか確認。時刻を合わせる。
  * 症状: 現在のデータも過去のデータも見えない:
   * 原因: real time moduleが走っていない。
   * 原因: ndsが動いていない。[[#nds|[解決策] ]]
  * 症状: 現在のデータは見えるが、過去のデータが見えない:
   * 原因: daqdが動いていない。[[#daqd|[解決策] ]]
  * 症状: 過去のデータは見えるが、現在のデータが見えない:
   * 原因: DAQ networkのどこかが切れている。
 Line 49:
+<<Anchor(mbuf)>>
-Line 60:
+Line 61:
+<<Anchor(epics)>>
-Line 71:
+Line 72:
+<<Anchor(burt)>>
-Line 74:
+Line 76:
+<<Anchor(WatchDog)>>
-Line 77:
+Line 80:
+<<Anchor(awg)>>
-Line 87:
+Line 90:
+<<Anchor(nds)>>
-Line 100:
+Line 104:
+<<Anchor(daqd)>>
-Line 114:
+Line 119:
+<<Anchor(frames)>>
 * /framesいかがいっぱいになっていないか?
  * dfコマンドで/dev/sdc1の空き容量をチェック。
-Line 129:
+Line 136:
+== 動作の挙動がおかしい ==

 * RTSの動作が重い、medmの各K1XXX_GDS_TP.adlの「CYC/USR」の左の数字が黄色または赤になっている:
  * 原因: データ保存用HDDがいっぱいになっている。 [[#frames|[解決策] ]]