History of Troubleshoot (No. 5)

• History
• View the source.
• Troubleshoot has been deleted.
  • 1 (2010-10-14 (Thu) 02:48:55)
  • 2 (2011-04-09 (Sat) 01:23:22)
  • 3 (2011-04-11 (Mon) 01:04:04)
  • 4 (2011-04-11 (Mon) 13:41:42)
  • 5 (2011-04-14 (Thu) 11:46:45)
  • 6 (2011-04-14 (Thu) 11:46:45)
  • 7 (2011-04-16 (Sat) 17:49:01)
  • 8 (2011-04-19 (Tue) 02:50:48)
  • 9 (2011-04-19 (Tue) 08:02:45)
  • 10 (2011-04-20 (Wed) 05:24:31)
  • 11 (2011-04-21 (Thu) 06:03:53)
  • 12 (2011-04-22 (Fri) 02:40:30)
  • 13 (2011-04-23 (Sat) 03:29:57)
  • 14 (2011-04-30 (Sat) 07:44:17)
  • 15 (2011-05-02 (Mon) 05:23:04)
  • 16 (2011-05-04 (Wed) 16:59:15)
  • 17 (2011-05-05 (Thu) 03:26:00)
  • 18 (2011-05-05 (Thu) 03:26:00)
  • 19 (2011-05-18 (Wed) 16:33:23)
  • 20 (2011-10-25 (Tue) 02:43:13)
  • 21 (2011-11-08 (Tue) 04:01:33)
  • 22 (2011-11-26 (Sat) 01:59:21)

---

• このページの使い方
  • 全員でトラブル症状とその対処法を共有するページです。
  • 観測中にトラブルが生じた場合に、その対処法を記述してください。
  • 観測ログのcopy and pasteでokです。
• 変更履歴
  • 29-Aug-09 - T.Tosaki & Y.Tamura - created.
  • 12-Apr-10 - BH - modified
  • 11-Apr-11 - YO & YT - added FAQ.

---

• FAQ
  • 通信エラーに関するもの

• 目次
  • 記入例
  • トラブル内容とその対処法
    • 2009/09/02 04:55 UT 通信トラブル
    • 2009/09/02 22:51 weather time on Asp. Mon. disrupted
    • 2009/09/02 23:08-23:12 UT ASPIRIN has NOT worked.
    • 2009/09/03 23:47 UT QLOOKトラブル
    • 2010/04/12 04:20 UT aste-c1c トラブル
    • 2010/04 COSMOS GUIで指示書が表示されない
    • 2010/05/10 ``ERR CONT(911) Internal error (Semaphore)''
    • 2010/09/28 It cannot get "time", even though I restarted cosmos@aste-1s
    • 2010/10/05 iOPT が bus error で動かない場合
    • 2010/10/14 Connection trouble to aste-2c
    • 2011/04/08 ERR trk0002e trk_00 Can't read TIME/EPH file !
    • 2011/04/14 MATLABのライセンスサーバーが落ちる (aste-mx2)

---

記入例†

• 2009/08/03 06:58 UT aspmon上のweather timeが停止している (UT05:42頃停止)。 下記の手順で対処。
  1. aste-v1cのCOSMOSの再起動。

        asteobs@aste-v1c % sudo /cosmos3/aste/nro/sbin/cos3_cntl restart

     しばらくすると、restart実行画面に以下のメッセージが繰り返されながら表示された。

      accept : socket =5accept : socket =5
      cnnect aste-mtla:22
      fork :11867
      fork :11867
      client loop end : precv(2)
      killng pid+ 11662
      WARNING shm_cadac：Error in cadad_read_data()：skip　okと表示される。

  2. aste-1cにおけるastnrodの再起動 (by YT) --> 約5分後weather timeが復帰した。

       root@aste-1c # /cosmos3/aste/nro/rc3.d/S99astnrod stop
       root@aste-1c # /cosmos3/aste/nro/rc3.d/S99astnrod start

トラブル内容とその対処法†

2009/09/02 04:55 UT 通信トラブル†

• 　現象

     "E018:Connection refused to server process" とpop-up windowが出で、priorityが??と表示された。
     数分待つとcos3launcher.tclのpriorityがMTKになったが
     Antenna main、Antenna Console、Antenna Offset、Subref Offsetのパネルではpriorityは取れていない。

• 下記の手順で対処。

     -とりあえず風が強いのでantenna consoleのpriorityを取得してSTBYへ
     -他のpriorityも取得
     -autopとQLOOKの起動
     -ALL PROGにして再び観測開始
     ※QLOOKの表示エラーもトラブルシューティングにて対応。

• reference) トラブルシューティング

2009/09/02 22:51 weather time on Asp. Mon. disrupted†

• I notice weather time on Asp. Mon. disrupted.

  Weather time = 2009/0902 14:54:15             # frozen...

1. set the antenna control to STBY.
2. restart COSMOS on aste-v1c, and wait for ~ 5 min. --> doesn't work!

    asteobs@aste-v1c % sudo /cosmos3/aste/nro/sbin/cos3_cntl restart

3. restart astnrod on aste-1c, and wait for ~5 min. --> the weather time is now recovered!

    root@aste-1c # /cosmos3/aste/nro/rc3.d/S99astnrod stop
    root@aste-1c # /cosmos3/aste/nro/rc3.d/S99astnrod start

2009/09/02 23:08-23:12 UT ASPIRIN has NOT worked.†

• obstable: aste09/sbrf09/jpsbc3.list
• batch for subref position measurements
• note:
  • The pointing correction in EL is a bit large (~ 8"). Why?
  • Oops... ASPIRIN has NOT worked.--> stop the observation.

      Refraction Corr. status : **** CORRECTION INACTIVE ****

• restart COSMOS.

1. set the antenna control to STBY.
2. restart COSMOS on aste-v1c, and wait for ~ 5 min. --> doesn't work!

    asteobs@aste-v1c % sudo /cosmos3/aste/nro/sbin/cos3_cntl restart

3. restart COSMOS on aste-1s.

    asteobs@aste-1s% /opt/sudo/bin/sudo /cosmos3/aste/nro/sbin/cos3_cntl restart all

   • Okay, aspirin now comes back!! move on to pointing...

2009/09/03 23:47 UT QLOOKトラブル†

• 　現象

     QLOOKでlocking-data fileのopen errorという趣旨の表示。

• 下記の手順で対処。

     -QLOOKの再立ち上げなおし -> 効果なし
     -QLOOKのpriorityを解除(IDLE状態)すると表示開始出来た(何故…？)
     この状態のままでも観測に不都合は無かったためこのまま観測。

2010/04/12 04:20 UT aste-c1c トラブル†

• 　現象

     光ポインティング観測中　aste-c1c　がダウン　（観測自体は行われている）

  • ssh aste-c1c -l astepon　でログインできない
  • aste-2c, aste-1sからもpingに応答しない
  • 観測し直しても、aste-1sで　> /opt/sudo/bin/sudo /cosmos3/aste/nro/sbin/cos3_cntl restartしても変わらず
• 対処 by T. Tsukagoshi
  • notice *** WARNING*** むやみやたらに再起動しないようにしてください
  • コンソールログインをためす（山頂では192.168.11.9というIPでコンソールサーバーに入れます）

    > ssh 192.168.11.9 -l asteobs

  • どのマシンにコンソール経由でアクセスするかの画面がでるので、そこで対象のマシンを選択してコンソールログインを試みます.
  • "Entering character/text mode"と出た場合は ctrl+ ] で抜けます。"Console escape. Commands are:"とコマンド一覧が出たら"b"を選択（りたーん）
    1. 落ちている場合はokプロンプトが出る
    2. 落ちていない場合は　"aste-cabin1c login:”
    3. その他のトラブルの場合はフリーズ (下記の電源on/offによる対処へ)
  • 落ちている場合はそのプロンプトで

     boot

  • と打ってリターンすると、起動が始まります.色々と起動メッセージが出力されるので、エラーが無いことを確認しながら、aste-cabin1c login: という画面になったら、起動出来ている状態です。こうなったら、他マシンからでもsshで入れます.

• 遠隔でのaste-c1cの電源on/off
  1. ターミナル二つ用意
  2. tslinuxにログイン
     • ssh tslinux -l asteobs
  3. 6番aste-c1cを選択
  4. コンソールでokプロンプトが出ていないのを確認
     • okプロンプトやaste-c1c login:と出ている場合は以下は必要無し
  5. もうひとつのターミナルでaste-3cとかに入る
  6. 以下を実行

     /cosmos3/aste/nro/sbin/tap_sw lantap0 1 off
     /cosmos3/aste/nro/sbin/tap_sw lantap0 1 on

     • 尚、lantapの制御については、[LAN Tapのページ|http://aste-www.mtk.nao.ac.jp/astecntl/etc/lantap.html] を参照。
  7. 実行すると電源が入るので、tslinuxの画面で起動しているかどうか確認する
     • この辺のエラーは気にしない

       screen not found.
       Can't open input device.
       Keyboard not present.

  8. 起動するとaste-c1c console login:になるので、これで起動したことになる

2010/04 COSMOS GUIで指示書が表示されない†

• 現象 COSMOS GUIのListボタンを押しても、本来あるはずの指示書が表示されない。

• 対処
  1. COSMOS GUIのプライオリティを解除し、ウィンドウを閉じる（右上の×ボタン）
  2. ランチャーから再度立ち上げる

2010/05/10 ``ERR CONT(911) Internal error (Semaphore)''†

• 現象
  • 指示書をスタートすると、以下のエラーでストップする

    ERR CONT(911) Internal error (Semaphore)
    CONT_BRR :76 134 ERR CONT(911)
    Manager Fastal Error. out of order.

• COSMOS restart や DASBOX restart では改善せず

• 対処
  • aste-2c reboot
    • 共有メモリのアクセスが出来なくなっていたことが原因

2010/09/28 It cannot get "time", even though I restarted cosmos@aste-1s†

• 現象
  • doesn't get the time in Antenna Console
  • doesn't get the aspirin time
  • doesn't get the weather info in Environment Monitor
  • even though I restarted cosmos@aste-mt2, it never go well..
• 対処
  • aste-mt2 reboot itself ( ask administrators! )

2010/10/05 iOPT が bus error で動かない場合†

• 対処
  • initvme でOPTを操るvmeバスの初期化(c.f. 測定手順書_連続波ポインティングなど)

    astepon@aste-c1c% cd optpon
    astepon@aste-c1c% initvme
    AVME-338B was initialized successfully.

  • aspilin, antstatも確認する(c.f. Observing Log/2010-06-05)。

2010/10/14 Connection trouble to aste-2c†

• 現象
  • 通信が切れている
    • Web envmonも12時間前あたりから止まっている
  • aste-2sへpingは通るが、ログインはtimeoutでできない

    aste-mt2{asteobs}54: ssh aste-2c
    ssh_exchange_identification: Connection closed by remote host

• 原因
  • aste-2c のハング

• 対処
  • aste-2c reboot （以下手順）
    • aste-3c へログイン
    • aste-3c からコンソールにログイン

      > ssh 192.168.11.9 -l asteobs

    • 「3」を選んで「halt」でaste-2cにログイン（※pwについては、誰かに聞く）

      Serial Console Server Connection Menu for your Master Terminal Server
      1 aste-1s          2 aste-1c          3 aste-2c          4 aste-3c
      5 aste-v1c         6 aste-c1c         7 aste-r1c         8 ttyS8
      Type 'q' to quit, a valid option[1-8], or anything else to refresh :

    • aste-2cをreboot
  • aste-1s cosmos restart (以下手順)
    • aste-2cのreboot後にaste-2cを経由してaste-1sにログイン
    • cosmos restart

      /opt/sudo/bin/sudo /cosmos3/aste/nro/sbin/cos3_cntl restart all

2011/04/08 ERR trk0002e trk_00 Can't read TIME/EPH file !†

• 原因
  • time.dat or eph.dat か両方ともに更新されていない
    • TIMEファイル(UT1とUT0のずれを書いたファイル): /cosmos3/aste/etc/time.dat
    • EPHEMERISファイル: /cosmos3/aste/etc/eph.dat
• 対処
  • tail time.dat などでそのファイルの有効期限を確認する
  • 調査結果を aste-comp へ連絡して更新してもらう

2011/04/14 MATLABのライセンスサーバーが落ちる (aste-mx2)†

• 対処方法
  • adminになり、/usr/local/matlab/R2009a/etc/以下の"lmdown"と"lmstart"を実行する

    $ su  admin
    $ cd /usr/local/matlab/R2009a/etc/
    $ ./lmdown
    $ ./lmstart

  • 注意点1:rootでは起動できないようです
  • 注意点2:adminのパスワードが必要です