Differences between revisions 80 and 83 (spanning 3 versions)
⇤ ← Revision 80 as of 2019-11-26 11:44:40 →
Size: 7921
Editor: shoichi.oshino
Comment:
← Revision 83 as of 2020-01-19 04:57:28 → ⇥
Size: 8666
Editor: TakahiroYamamoto
Comment:
Deletions are marked like this. Additions are marked like this.
Line 18: Line 18:
|| 2019-12-02 || Replace 18V power tap || IOO, IOO1 || [[http://klog.icrr.u-tokyo.ac.jp/osl/?r=11924|11924]] ||
Line 89: Line 90:
 * RCG 3.4 アップデート === RTFE ===
 * RCG 3.5.1 アップデート (試験完了)
Line 91: Line 93:
 * k1pr0をk1pr3に変える。
 * k1iooをk1ioo0に変える。
Line 92: Line 96:
  * timingの取得関連のbug fix
 * Timing update		    * timingの取得関連のbug fix
 * Timing update (FPGA)
 * Dolphin Gen2化
 * BIOの枚数制限
=== DAQ ===
 * DAQ 3.5.1 アップデート (試験完了)
 * Debian DAQ (試験完了)
 * Frame dataの64秒化。
=== Client ===
 * コントロールルームのLDAP化
   * EPICS gwとMatlabのライセンスが問題
 * k1ctr
   * 環境の共通化
     * LDAPアカウントが有効化されればライブラリが勝手に変更されることはなくなる
   * PXEboot化 (Docker, Ansible, etc.?)
=== Servers ===
Line 95: Line 113:
  * [someday] セキュリティ関連のyum update
      * yum installは完了 (2019/10/23)
      * 再起動が必要		    * [someday] セキュリティ関連のyum update
     * yum installは完了 (2019/10/23)
     * 再起動が必要
Line 99: Line 117:
  * [someday] guardian version update
  * Duncanに古すぎと言われた
  * Jamieがapt-getで入れられるようにリポジトリ整備をしてくれるらしい
      * LLOに行った時Jamieに聞いてくる		    * [someday] guardian version update
     * Duncanに古すぎと言われた
     * Jamieがapt-getで入れられるようにリポジトリ整備をしてくれるらしい
     * LLOに行った時Jamieに聞いてくる
   * 坑内に移動
 * k1script
   * Debian version update
   * 負荷分散(2台目?)
 * k1cam
   * V2以降に交換
     * cam0が1UでCPU使用率高い
     * Hyper Threadingありの方が多分良い
=== Hardware ===
Line 104: Line 131:
   * 中のADC/DACとかのS番号確認
   * 新バージョンの検討
Line 105: Line 134:
  * 4つのTMだけでOK?
  * 8chを一枚追加でチャンネル増加。		   * 4つのTMだけでOK?
  * 8chを一枚追加でチャンネル増加。
Line 109: Line 138:
  * 現在50台程度、PDが真空層内に入るとさらに必要。
 * Dolphin Gen2化
 * コントロールルームのLDAP化
  * EPICS gwとMatlabのライセンスが問題
 * k1ctr環境の共通化
  * LDAPアカウントが有効化されればライブラリが勝手に変更されることはなくなる
 * k1pr0をk1pr3に変える。		    * 現在50台程度、PDが真空層内に入るとさらに必要。
Line 126: Line 149:
 * k1ctr PXEboot化
 * Frame dataの64秒化。
 * BIOの枚数制限
Line 130: Line 150:
  * PEMのケーブルがグチャグチャ。
  * PEMの回路がむき出しになっているのが多い。-> プラスチックケースになったが金属のほうがいい。
  * Type Bpがラックごとに中身の配置が違う。
  * コイルドライバーの隙間を開ける。

 		   * PEMのケーブルがグチャグチャ。
    * PEMの回路がむき出しになっているのが多い。-> プラスチックケースになったが金属のほうがいい。
   * Type Bpがラックごとに中身の配置が違う。
   * 温度問題
     * コイルドライバーの隙間を開ける。 
     * IMC 2nd rack, IOO 3rd rack, ALS 3rd rackがあった方がいい

To do List

Contents

  1. To do List
  2. O3 run
  3. Weekly Maintenance (every Wednesday)
    1. Log
    2. RT model/Front-Endを止めたい作業
    3. daqd/DAQ計算機を止めたい作業
    4. 基幹部分(gate, boot, nfs...)を止めたい作業
    5. Workstationを止めたい作業
    6. 全停止に近い作業
  4. 短期To doリスト
  5. 長期 To do list
  6. Trouble shooting
  7. To do list (O3 to O4)
      1. RTFE
      2. DAQ
      3. Client
      4. Servers
      5. Hardware
  8. To buy
    1. 検討中

O3 run

#

Item

ER 6/8

ER 7/13

Plan

State

Plan

State

1

Replace RTFE to faster one

3 PC

3/3

4 PC

4/4

2

Replace power supply of IO chassis from ATX AC-DC to stable DC-DC

2 IO chassis

1/2

3

Add BIO, ADC, DAC cards to IO chassis

4 IO chassis

3/4

4

Recording time of one frame file change to 64 seconds

-

-

5

Add 20TB storage to frame writer

-

-

2

2/2

Weekly Maintenance (every Wednesday)

Log

Date

Task

Requirement

klog

2019-12-02

Replace 18V power tap

IOO, IOO1

11924

2019-11-25

Replace storage of k1tw1, DC power supply at ETMX, Rebuild k1test0 model

ETMX

11739

2019-11-18

Network survey

2019-11-11

Replace k1fw1, DC power supply, Remove DAC from k1test0

k1fw1, k1test0, k1prm

11209

2019-10-28

Backup system disk

11458

2019-10-21

Backup system disk

11132

2019-10-07

Replace RTFE

Type-B, Type-Bp

10854

2019-09-30

Backup system disk

10771

2019-09-23

Add memory to workstation

10663

2019-09-16

Remove EPICS gateway

10536

2019-09-02

Replace k1dc0, copy trend data from SSD on k1tw1 to HDD on k1nds1

10259

2019-08-26

Replace memory of k1dc0, remove broken memory module from k1fw0, copy trend data from SSD to HDD

10123

2019-08-19

Replace k1dc0, Replace RTFE of k1ioo1, Add BIO card to k1als0

Type-B, Type-Bp

10029

2019-08-05

Add BIO cards to k1ioo1, Replace RTFE and DC power supply for IO chassis of k1prm

Type-B, Type-Bp

9806

2019-07-31

Add BIO cards to k1ioo1, Replace DC power supply for circuits of k1pr0, k1pr2, Replace k1dc0

Type-B, Type-Bp

9727

2019-07-24

Add BIO cards to k1als0, Replace RTFE of k1pr0, k1pr2

Type-B, Type-Bp

9623

2019-07-17

Replace DC power supply for IO chassis (SRM, SR3)

Type-B, Type-Bp

9544

2019-07-10

Replace DC power supply for circuits (SRM, SR3)

2019-06-26

Replace DC power supply for circuits

9357

2019-06-19

Replace RTFE

k1bs, k1sr3

9281

2019-06-12

Replace RTFE

k1bs, k1srm

9218

2019-06-05

Add cards

9104

2019-05-29

Replace RTFE

9006

2019-05-22

Power supply

8937

2019-05-15

Add cards

8879

2019-04-24

Replace RTFE

8731

2019-04-03

Replace RTFE

8549

RT model/Front-Endを止めたい作業

  • 特になし

daqd/DAQ計算機を止めたい作業

  • k1tw0,1
    • O3前にSSD追加
      • 1系統ずつ止めれば最低限データは残る
      • 現在k1tw1が90%超

  • k1tw0, k1bcst0

    • BIOS時間の設定確認

      • klog10134参照

      • 今はntpdateで無理やり合わせたけど、再起動時にまたずれる可能性あり
      • 時刻を合わせたあと、これら2台のdaqdが落ちる頻度が減った気がする
      • 2019.10.21 k1tw0 設定完了

基幹部分(gate, boot, nfs...)を止めたい作業

  • 特になし

Workstationを止めたい作業

  • コントロールルームのネットワークスイッチ数珠つなぎの解決

全停止に近い作業

  • 特になし

短期To doリスト

長期 To do list

  • raid構築
  • bugzilla
  • 消費電力管理

Trouble shooting

  • k1omc0 のカーネルパニック
    • ファンの電源接続

  • k1fw0が度々再起動する dc0をv4に変えて以降は安定

  • IOPモデルを止めると0xbad
  • k1bsのDolphinカードが起動時に不具合を起こす

To do list (O3 to O4)

RTFE

  • RCG 3.5.1 アップデート (試験完了)
  • Debian RTFE
  • k1pr0をk1pr3に変える。
  • k1iooをk1ioo0に変える。
  • ADC firm update
    • timingの取得関連のbug fix
  • Timing update (FPGA)
  • Dolphin Gen2化
  • BIOの枚数制限

DAQ

  • DAQ 3.5.1 アップデート (試験完了)
  • Debian DAQ (試験完了)
  • Frame dataの64秒化。

Client

  • コントロールルームのLDAP化
    • EPICS gwとMatlabのライセンスが問題
  • k1ctr
    • 環境の共通化
      • LDAPアカウントが有効化されればライブラリが勝手に変更されることはなくなる
    • PXEboot化 (Docker, Ansible, etc.?)

Servers

  • k1gate -> 山本

    • [someday] セキュリティ関連のyum update
      • yum installは完了 (2019/10/23)
      • 再起動が必要
  • k1grd0
    • [someday] guardian version update
      • Duncanに古すぎと言われた
      • Jamieがapt-getで入れられるようにリポジトリ整備をしてくれるらしい
      • LLOに行った時Jamieに聞いてくる
    • 坑内に移動
  • k1script
    • Debian version update
    • 負荷分散(2台目?)
  • k1cam
    • V2以降に交換
      • cam0が1UでCPU使用率高い
      • Hyper Threadingありの方が多分良い

Hardware

  • IO chassis
    • 中のADC/DACとかのS番号確認
    • 新バージョンの検討
  • 20bit DAC
    • 4つのTMだけでOK?
    • 8chを一枚追加でチャンネル増加。
  • AA/AI
  • Whitening
    • 現在50台程度、PDが真空層内に入るとさらに必要。
  • ネットワーク再構築
    • 10GB化
    • ネットワークスイッチの管理用IPアドレス確認
    • EPICSが重い
    • pico専用のネットワークにする
      • カメラと同じ構成にする
    • CDS adminネットワーク作成
    • コントロールルームのネットワーク配線見直し
      • スイッチが数珠繋ぎになっているのを直す
    • 光ケーブルの追加、両エンドへ行く3kmの話
  • rack関連
    • PEMのケーブルがグチャグチャ。

      • PEMの回路がむき出しになっているのが多い。-> プラスチックケースになったが金属のほうがいい。

    • Type Bpがラックごとに中身の配置が違う。
    • 温度問題
      • コイルドライバーの隙間を開ける。
      • IMC 2nd rack, IOO 3rd rack, ALS 3rd rackがあった方がいい

To buy

  • Gen2 Dolphinカード & スイッチ

  • 20bit DACカード
  • Optical fiber cable (O3前)
  • 3kmの光ファーバーケーブルの見積もり

検討中

KAGRA/Subgroups/DGS/Projects/ToDo (last edited 2021-03-03 11:13:27 by shoichi.oshino)