• KAGRA
• Subgroups
• DGS
• Meeting
• 20231205
• minute

2023/11/7 16:00~ DGS meeting

• 宮川、山本、押野、池田、中垣、川本

0. 2023年度予算

DGS total: 2000

• Test bench for O5: 900
• PC/Network maintenance: 500

• 20bit ADC: 500 -> 2枚買えたら

• IO chassis test cable: 100
• (X end optical fiber cable: 200)
• Optical fiber cable at corner station for new IO chassis.

1. LIGO CDSとの打ち合わせについて

• 現状メールでやりとりしている。
• 必要があればオンラインでやりとりなど。

2. MTP光ファイバーケーブル

• Endの1-2階間をどうするか？logn Dolphinを1、2階共に設置するか、計算機を（2階に）集めてIOシャーシを1台1階におく。1ー2階のネットワークも増やす。
  • IRIG-Bシャーシが2台浮くことになる。
• 別計算機を立ち上げて、新IO chassisとDonphiin GEN3のテストをするといい。
  • O4bが始まる前に見込みをつけておいた方がいい。
  • V4が数台。Xeon Gold　27台ある。Dolphin（制御をDAQ）とIRIG-B、DGSを全てハーフハイトで。
  • DC0で16個のend point（スレッドに相当）が立ちあがる。30台のRTPCからデータを受け取る。コアが12個なので、入れ替えながら受け取る。NIC1台で32個のエンドポイントを扱えるのでNICを増やすか、コア数を増やすかするといい。エンドポイントを1ー2年前に8個から16個に増やした。
• 古いIO chassisはGEN1で動いているので、biosのGEN3モードで動くかどうかのテストをする必要がある。
• センター1階は予算があれば進める。最終的にはBSあたりとIOOあたりの2か所で、段階的にやってもいい。
• エンドはMTPは無しでも良く、1-2階間のマルチモードの8芯以上の追加がX,Y共に必要。
• センター2FのPCとIO chassisを置き換えることを考える。既存のものと一緒において、すぐに戻せるような体制でテスト。IRIG-BとFanoutを余らせるのがここでの最終目的。

4. テストベンチ

• カード枚数テスト（池田）

  • KAGRA/Subgroups/DGS/Projects/TestBench/O5TestBench

  • (12/5) カード認識順の確認 => 順列になっている問題なし

  • (12/5) 最大構成枚数の確認 => k1als0のカード枚数構成は問題なく動作した。

    • Type-Aのカード枚数の構成にするとFEPCが再起動を繰り返す問題が発生。
      • Adonacoカード1枚に 外部電源を挿してみたが効果なし
      • Adonaco のDIPSW見直したが効果なし
      • 今後、FEPCのBIOS設定の見直しなどを予定
• テストベンチもう１系統制作中（押野）

  • PX Dolphinのテスト -> 4kmはLIGOでもまだできてない。できているのはIX Dolphin。

  • Debian11

• Center 1F <--> 2F 光ファイバーテスト

  • 1FにRTPC 2FにIOシャーシ or 1FにIOシャーシ 2FにRTPC
• テストベンチのIRIGボードが2枚抜き取られている
  • X500にある？

  • (9/5) 台湾グループがLineノイズ解析のための2Uのサーバーをテストサーバ（結局コントロールルーム横のサーバー室)にとりあえず1台入れたがっている。Real timeとLow latencyでやることになるので、サイトにインストールすることが必要。LVKの翌週を考えている。窓口は山本君->PEMに引き継ぎが。

• (11/7) LIGOのrunで使われていたRCGを使うのがいいのでは?例えば5.1.2。
• (12/5) 三代君が以前バラしたIRIG-Bの基板が回路室から回収された。

スケジュール

• 7月：DAQ立ち上げ
• 8月：テストベンチ移動
• 9-11月：Dolphin用テストベンチ立ち上げ
• 12-1月:Dolphon-光変換PC立ち上げ
• -24年12月： テスト

5. IPC glitch

• rtsystabの2つ目まではエラーが出ない。それ以降は出る。順序を変えると出方が変わるが、その影響が順序を変えていないところにもでる。
• mx streamの立ち上げの引数の順序を直接変えて、mx streamを立ち上げ直したら切り分けができないか？
• ethtoolでlatencyを遅くして影響が出るかみてみる。
• latencyはDC0もRTPCも最小になっていると思われる。
• アップデートで解決しないのか？
• (9/5) NICの遅延設定で一旦は減るようだが、またモデルアップデートすると再現する。MX streamだけの再起動するとどうなるか？NICの2枚挿しは？
• (11/7) 10月20日くらいから10日間くらい少ない時があった。フィルターバンクの増減、最終的には4つ減ったが、影響があるかどうかは不明。
  • LIGOはDAQをDolphinにO1くらいで移行している。
  • チャンネル数を減らすのは有効だろう。コミッショニングよりも観測の方がチャンネル数は少ないが、実際に減らすのは結構大変。

4. 1ヶ月の進捗状況

• 時刻情報をすぐに比較できるようにしようと考えている。FPGAでSKのTDCというのを作るか？
  • LIGOのComparatorは？
• (11/7) Xend停電でDGS系のネットワークが断絶した。光ファイバーとスイッチを他のものに変えてとりあえず接続はできたが、既存ファイバーがなぜ繋がらないかは不明。

  • (12/5) センターのスイッチの故障が原因だったようである。-> 今回はポートを変えて対処した。でも、なぜエンドの停電でセンターの機器が壊れたのか？接続断で顕になる問題なのか？ログを調べてみると、IPC glitchのヒントになるかも。

• (12/5) IMC susなどIO chassisの電源をACからDCに変えた。残りはIOO0,1 ALS。SR2がBSから数珠繋ぎになっているのは、配線依頼済み。エンドはまだいくつか、特に1階が手付かず。
  • その際、電圧降下で立ち上がりにくいことがあった。ラック側の電圧が落ちないように、根元で少し上げておくのがいい。
• (12/5) k1bootが一旦落ちた。再起動で一お動き出した。システム領域にはディスクエラーはなかったが、データ領域にエラーが3つあった。でもそのエラーが落ちた理由とも思えない。

• (12/5) minute trendが3月にいっぱいになるので、2月くらいに交換するといい。もう1系統バックアップを組んでおいた方がいいかも。-> 押野

5. GPSのジャンプ

• KAGRAのGPSに4月に大きなジャンプが起きた。
• SKに6月にCommon Viewの作業中に大きなジャンプが起きた。少なくとも4月には何もなかった。
• 9/13 天文学会で特別セッションで発表する。
• (5/9)衛星の数が正午に減るようなことはなさそう。

5. メンテンナス

• 古いUPSバッテリーを一斉交換する。->　山本 -> 9/6:すでに切れているものは交換した。O4までに、後2台残っている。

  • 古いバッテリーの処分をする必要がある。-> 池田

6. ADC noise

• ADCの遅延。新しいカードが1クロック(16usec)遅れる。ただ、新しいADCの方がノイズが少ない。
• 8/9 18Vと24VのGNDが繋がるとだめ。
  • 8/9 IO chassisの出力側: DACのSCSIケーブルと、DIOのケーブルのDO側が繋がっていると、IO chassisの電源(24V)のGNDとIO chassisの筐体が繋がる。ラックのフレームと回路電源(18V)のGNDが繋がっている。そのためさらに何らかの理由で24Vと18Vの繋がっているよう。

  • 例えばDOの37ピンのシールドと各回路のシャーシが繋がっているのでは？->ササキに作ってもらうか？

  • Oplevはあまり問題ないが、オフセットが大きくて揺れの絶対量自身が問題になっているところがダメ。
  • BOのGNDを切るアダプターを作るのはどうか？
  • BIとADCのケーブルは関係なさそう。
• 回路室に再現できるスタンドアロンを作る。今の回路室にあるスタンドアロンは測定で使うのでいじらない。
  • 回路室ラックにある押野君管理の計算機を旧SK計算機室に移す方向で進める。
  • スタンドアロンがそこそこ動くようになってきた。
  • DACのch数で抵抗が分割される。枚数分のch数でわられる。BIOのch数が関係するかも、ただしまだ検証の必要あり。
• 坑内の各ラックのどこのチャンネルが悪いのかを調べておく。PRとOMCあたりを調べる予定。
  • 12/23にSRとOMCラックのADCを測定した。
• (2/7)両エンド1回を除いて、測定すべきものはほぼ測定した。
• (3/7) Xendの1階を測定した。いくつかのチャンネルがノイジーだったが、今回はそこまで問題にはならないチャンネルだった。残りはYend 1階。
• (4/4) DACの方の測定をテスト的に試す。テストマスのコイル周りを優先的に。
  • 周波数で見てノイズがあまりフラットでなく、ブロードなピークが見える。
• 次回はSRの残りで9月後半。あとはType C
• IMCのフランジの電極がBNC。
• (12/5) DAC: VISに引き継いでもらったはずだが、まだPRのどれか一つとType-Cが残っている。基本的にある程度完了しているが、機器に変更などあった場合は再測定。

7. IP 枯渇問題

• 押野君がWS networkを立てる案を作ってくれた。
• 10.60.10.XXのサブネットを変える。
• Oは多分無理。1週間くらいのメンテナンスデーが欲しい。
• 10/4 EPICS信号をTCP/IPのネットワークから分ける。（池田）
  • awgはnds経由で指令しているのか？
• O4以前は諦める。

8. Interlock

• 真空関連で進めている。PLCだと予算が厳しいので、廉価なものを選んでいる。（中垣）
  • IPが数十必要になる。
• (3/7) 2月に上久保田さんがきて、いくつかのポンプ関連のモニターテストをした。次回上久保田さんがきて、上位PCと繋ぐ。
• (4/4)3/16に上久保田さんとヤンさんがきてくれて、Yarmで動作確認をした。サーボと真空ゲージの接続にトラブルがまだある。
• (5/9)5/11, 12にヤンさんがきて真空モニターを設置予定でIPはすでに取得した。来週16,17日に上久保田さんがくる。
• (7/4) 5/16, 17に上窪田さんと打ち合わせ、6/29,30にヤンさんがきてY21とTMPとの接続テストをした。来週また上窪田さんがきて進める。
• (11/7) 9月、10月でGVの遠隔操作とセンターエリアへの実装、VLAN対応。11月中に両エンドへの実装を予定している。
• (12/5) 11月に両エンドのリモート操作（MEDM経由）が可能になった。その後、自己判断するようなもの（ハードワイヤ）を組み込む。

長期的でやるタスク

• 大きいモニターもいずれ交換。O4a後くらいか？

• 坑内のIOO付近のWi-Fiを安定化させる。-> クリーンブース内を有線化

• テストベンチ。
  • Dolphinが主流に。DAQもDolphin。
• SINETのアップグレード
• 坑内ネットワークのアップグレード
• 新IO chassisをどう稼動させていくか？
  • 今回買った計算機で稼動
• RGCのアップグレード
• DCの冗長化
• 20bit DAC
• 18bit ADC
• タイミング関連が変わる。
• 計算機のreplace
• 回路の交換
• 柏と神岡の10G化
• 柏が止まる時の逃げ道、冗長性など
• 予算

To do

ケーブル

• 計算機室の出口のケーブル整理。

その他

• D-SUB37pinケーブルを作る。

今後の予定

• 次回: 1月9日（火） 16:00~
• 次々回: 2月6日（火） 16:00~