この章では、ソフトウェアの問題の解決についての概要を説明します。システムクラッシュの問題の解決とシステムメッセージの表示などが含まれます。
この章の内容は次のとおりです。
ソフトウェアの問題の解決手順については、次の章を参照してください。
この節では、Solaris 8 リリースで使用できるようになった、システムの問題解決に関する新機能について説明します。
新しいアプリケーションデバッグツール apptrace を使用して、アプリケーション開発者やシステムサポート担当者が、Solaris 共有ライブラリの呼び出しを追跡することによって、アプリケーションやシステムの問題をデバッグできます。この追跡では、障害の発生場所に至るまでの一連のイベントを表示できます。
apptrace ツールの呼び出し追跡機能は、以前の sotruss コマンドよりも信頼性が高くなっています。さらに、apptrace ツールでは、Solaris ライブラリインタフェースに対する関数の引数、戻り値、エラー状況の表示が改善されています。
デフォルトでは、apptrace は、コマンド行に指定した実行可能オブジェクトからそのオブジェクトが依存する各共有ライブラリへの直接呼び出しを追跡します。
詳細は、apptrace(1) のマニュアルページを参照してください。
このリリースでは coreadm コマンドが新しく導入されました。coreadm コマンドでは、コアファイルの命名規則が柔軟になり、コアファイルの保存方法が改善されます。たとえば、coreadm コマンドでは、すべてのプロセスコアファイルを同じシステムディレクトリに置くようにシステムを構成できます。そのため、Solaris のプロセスやデーモンが異常終了した場合に、特定のディレクトリにあるコアファイルを調べればよくなり問題の追跡が容易になります。
構成可能な 2 つの新しい core ファイルパス (プロセス別パスとグローバルパス) を、別々に有効にしたり無効にしたりできます。プロセスが異常終了すると、以前の Solaris リリースと同様に core ファイルが現在のディレクトリに作成されます。ただし、グローバルのコアファイルパスが有効で /corefiles/core に設定されている場合、プロセスが異常終了するたびに 2 つのコアファイルが、1 つは現在の作業ディレクトリに、もう 1 つは /corefiles ディレクトリに作成されます。
デフォルトでは Solaris のコアパスとコアファイルの保存方法は従来と同じです。
詳細は、「コアファイルの管理 (coreadm)」と coreadm(1) のマニュアルページを参照してください。
一部の proc ツールが拡張されてプロセスのコアファイルやライブプロセスが調べられるようになりました。proc ツールは、/proc ファイルシステムの機能を操作するユーティリティです。
現在、コアファイルを処理できるツールは /usr/proc/bin/pstack、pmap、pldd、pflags、pcred です。これらのツールを使用するには、プロセス ID を指定するように、コアファイルの名前をコマンド行に指定します。たとえば、次のように指定します。
$ ./a.out Segmentation Fault(coredump) $ /usr/proc/bin/pstack ./core core './core' of 19305: ./a.out 000108c4 main (1, ffbef5cc, ffbef5d4, 20800, 0, 0) + 1c 00010880 _start (0, 0, 0, 0, 0, 0) + b8 |
proc ツールを使ってコアファイルを調べる方法の詳細は、proc(1) のマニュアルページを参照してください。
新しいリモートコンソール機能により、リモートシステムの問題を解決しやすくなりました。
詳細は、「リモートコンソールメッセージングを有効にする」と consadm(1M) のマニュアルページを参照してください。
Solaris オペレーティング環境が動作しているシステムがクラッシュした場合は、クラッシュダンプファイルを含む、可能なかぎりの情報を購入先に提供してください。
最も重要なことは、次のとおりです。
システムのコンソールメッセージを書き取ります。
システムがクラッシュした場合は、システムをリブートする前に、まずコンソール画面にメッセージが表示されていないか確認してください。このようなメッセージは、クラッシュした原因を解明するのに役立ちます。システムが自動的にリブートして、コンソールメッセージが画面から消えた場合でも、システムエラーログファイルを表示すれば、これらのメッセージをチェックできます。システムエラーログファイルは、/var/adm/messages (または /usr/adm/messages) に自動的に生成されます。システムエラーログファイルを表示する方法の詳細は、「システムメッセージを表示する方法」を参照してください。
クラッシュが頻繁に発生して、その原因を特定できない場合は、システムのコンソールや /var/adm/messages ファイルから得られるすべての情報を収集して、購入先に問い合わせください。購入先に問い合わせるときに必要な問題解決のための情報の完全なリストについては、「システムクラッシュの問題の解決」を参照してください。
システムのクラッシュ後にリブートが失敗する場合は、第 40 章「ソフトウェアで発生するさまざまな問題の解決」を参照してください。
次のように入力してディスクとの同期をとり、リブートします。
ok sync |
システムのクラッシュ後にリブートが失敗する場合は、第 40 章「ソフトウェアで発生するさまざまな問題の解決」を参照してください。
savecore コマンドを実行して、スワップ領域に書き込まれたクラッシュ情報を保存します。
# savecore |
クラッシュダンプを自動的に保存する方法については、第 39 章「システムクラッシュ情報の生成と保存」を参照してください。
システムの問題を特定するために、次の質問に答えてください。クラッシュしたシステムの問題を解決するためのデータを収集するには、「システムクラッシュを解決するためのチェックリスト」を参照してください。
表 38-1 システムクラッシュに関するデータの収集
質問 |
説明 |
---|---|
問題を再現できるか |
この質問は、再現可能なテストケースは実際のハードウェア問題をデバッグするために重要であることが多いために重要である。購入先では、特殊な計測機構を使用してカーネルを構築して問題を再現し、バグを引き起こし、診断、および修正できる |
Sun 以外のドライバを使用しているか |
ドライバは、カーネルと同じアドレス空間で、カーネルと同じ特権で動作する。したがって、ドライバにバグがあると、システムクラッシュの原因となることがある |
クラッシュの直前にシステムは何を実行していたか |
システムが通常でないこと (新しい負荷テストの実行など) を行なったり、通常よりも高い負荷がシステムにかかったりした場合、クラッシュの原因となることがある |
クラッシュ直前に、異常なコンソールメッセージが表示されたか |
システムは、実際にクラッシュする前に問題の兆候を示すことがある。この情報は役立つことが多い |
/etc/system ファイルに調整パラメタを追加したか |
調整パラメタは、システムクラッシュの原因となることがある。たとえば、共有メモリーセグメントを増やした結果、システムが限度以上の多くのメモリーを割り当てようとした |
問題は最近発生するようになったか |
そうであれば、問題の原因は、システムの変更 (たとえば、新しいドライバ、新しいソフトウェア、作業負荷の変化、CPU のアップグレード、メモリーのアップグレードなど) にある可能性がある |
クラッシュしたシステムの問題を解決するためのデータを収集するときは、次のチェックリストを使用します。
項目 |
ユーザーのデータ |
---|---|
コアファイルが生成されているか |
|
オペレーティングシステムのリリースと適切なソフトウェアアプリケーションのリリースレベルを確認する |
|
システムのハードウェアを確認する sun4d システムの prtdiag 出力を含める |
|
パッチはインストールされているか。そうであれば、showrev -p 出力を含める |
|
問題を再現できるか |
|
Sun 以外のドライバをシステムで使用しているか |
|
クラッシュ直前のシステムの動作は |
|
クラッシュ直前に、異常なコンソールメッセージが表示されたか |
|
/etc/system ファイルにパラメタを追加したか |
|
問題は最近発生するようになったか |
|
システムのメッセージはコンソールデバイスに表示されます。ほとんどのシステムメッセージは次の形式で表示されます。
[ID msgid facility.priority]
次に例を示します。
[ID 672855 kern.notice] syncing file systems... |
カーネルから出されるメッセージには、カーネルモジュール名が次のように表示されます。
Oct 1 14:07:24 mars ufs: [ID 845546 kern.notice] alloc: /: file system full |
システムがクラッシュすると、システムのコンソールに次のようなメッセージが表示されることがあります。
panic: error message |
error message は、crash(1M) のマニュアルページに説明されているパニックエラーメッセージの 1 つです。
パニックメッセージより頻度は少ないですが、パニックメッセージではなく次のメッセージが表示されることがあります。
Watchdog reset !
エラー記録デーモン syslogd は、自動的に様々なシステムの警告やエラーをメッセージファイルに記録します。デフォルトでは、これらのシステムメッセージの多くは、システムコンソールに表示されて、/var/adm ディレクトリに格納されます。システム記録を設定することによって、これらのメッセージを格納する場所を指示できます。詳細は、「システムのメッセージ記録をカスタマイズする方法」を参照してください。これらのメッセージは、失敗の予兆のあるデバイスなど、システム障害をユーザーに警告できます。
/var/adm ディレクトリには、いくつかのメッセージファイルが含まれています。最も新しいメッセージは、/var/adm/messages (および messages.0) にあり、最も古いメッセージは、messages.3 にあります。一定の期間 (通常は 10 日) ごとに、新しい messages ファイルが作成されます。messages.0 のファイル名は messages.1 に、messages.1 は messages.2 に、messages.2 は messages.3 にそれぞれ変更されます。その時点の /var/adm/messages.3 は削除されます。
/var/adm ディレクトリは、メッセージやクラッシュダンプなどのデータを含んでいる大きなファイルを格納するため、多くのディスク容量を消費します。/var/adm ディレクトリが大きくならないようにするために、そして将来のクラッシュダンプが保存できるようにするために、不要なファイルを定期的に削除しなければなりません。crontab を使用すれば、この作業は自動化できます。この作業を自動化する方法については、「クラッシュダンプファイルを削除する方法」と第 30 章「システムイベントのスケジュール設定」を参照してください。
システムクラッシュまたはリブートによって生成された最近のメッセージを表示するには、dmesg コマンドを使用します。
$ dmesg |
あるいは、more コマンドを使用して、メッセージを 1 画面ごとに表示します。
$ more /var/adm/messages |
詳細は、dmesg(1M) のマニュアルページを参照してください。
$ dmesg date starbug genunix: [ID 540533 kern.notice] SunOS Release 5.8 Version 64-bit date starbug genunix: [ID 223299 kern.notice] Copyright (c) 1983-1999 by Sun Microsystems, Inc. date starbug genunix: [ID 678236 kern.info] Ethernet address = xx:xx:xx:xx:xx:xx date starbug unix: [ID 389951 kern.info] mem = 131072K (0x8000000) date starbug unix: [ID 930857 kern.info] avail mem = 122134528 date starbug rootnex: [ID 466748 kern.info] root nexus = Sun Ultra 5/10 UPA/PCI (UltraSPARC-IIi 333MHz) date starbug rootnex: [ID 349649 kern.info] pcipsy0 at root: UPA 0x1f 0x0 date starbug genunix: [ID 936769 kern.info] pcipsy0 is /pci@1f,0 date starbug pcipsy: [ID 370704 kern.info] PCI-device: pci@1,1, simba0 date starbug genunix: [ID 936769 kern.info] simba0 is /pci@1f,0/pci@1,1 date starbug pcipsy: [ID 370704 kern.info] PCI-device: pci@1, simba1 date starbug genunix: [ID 936769 kern.info] simba1 is /pci@1f,0/pci@1 date starbug simba: [ID 370704 kern.info] PCI-device: ide@3, uata0 date starbug genunix: [ID 936769 kern.info] uata0 is /pci@1f,0/pci@1,1/ide@3 . . . |
/etc/syslog.conf ファイルを変更すると、様々なシステムプロセスが生成するエラーメッセージを記録できます。デフォルトでは、/etc/syslog.conf は、多くのシステムプロセスのメッセージが /var/adm メッセージファイルに格納されるように指示しています。クラッシュとブートのメッセージも、同様にこのファイルに格納されます。/var/adm メッセージを表示する方法については、「システムメッセージを表示する方法」を参照してください。
/etc/syslog.conf ファイルは、タブで区切られた 2 つの列から構成されています。
facility.level ... |
action |
facility.level |
機能またはメッセージや状態のシステムでの出所。コンマで区切られた機能のリスト。機能の値については表 38-2 を参照。level は、記録する状態の重要度や優先順位を示す。優先レベルについては表 38-3 を参照 |
action |
動作フィールドは、メッセージが転送される場所を示す |
次は、デフォルトの /etc/syslog.conf ファイルの例です。
user.err /dev/sysmsg user.err /var/adm/messages user.alert `root, operator' user.emerg * |
この例は、次のユーザーメッセージが自動的に記録されることを意味します。
ユーザーエラーはコンソールに出力され、/var/adm/messages ファイルにも記録されます。
早急な対応が必要なユーザーメッセージ (alert) は、root ユーザーと operator ユーザーに送信されます。
ユーザー緊急メッセージは、各ユーザーに送信されます。
最も一般的なエラー状態の出所を表 38-2 に示します。最も一般的な優先順位を、重要度順に表 38-3 に示します。
表 38-2 syslog.conf メッセージのソース機能
出所 |
説明 |
---|---|
カーネル |
|
認証 |
|
すべてのデーモン |
|
メールシステム |
|
lp |
スプールシステム |
ユーザープロセス |
Solaris 2.6 リリース以降、/etc/syslog.conf ファイルで有効化できる syslog 機能の数の制限は解除されます。以前のリリースでは、機能の数は 20 個に制限されていました。
優先順位 |
説明 |
---|---|
emerg |
システムの緊急事態 |
alert |
すぐに修正が必要なエラー |
crit |
致命的なエラー |
err |
その他のエラー |
info |
情報メッセージ |
debug |
デバッグ用の出力 |
none |
この設定は出力を記録しない |
スーパーユーザーになります。
任意のエディタで、/etc/syslog.conf ファイルを編集します。 syslog.conf(4) のマニュアルページで説明している構文に従って、メッセージの出所、優先順位、およびメッセージの記録場所を追加または変更します。
変更を保存して編集を終了します。
次の /etc/syslog.conf の user.emerg 機能の例は、ユーザー緊急メッセージを root ユーザーと個別のユーザーに送信します。
user.emerg `root, *' |
次の新しいリモートコンソール機能を使うと、リモートシステムの問題を解決しやすくなります。
consadm コマンドでは、補助 (またはリモート) コンソールとしてシリアルデバイスを選択できます。consadm コマンドを使用して、システム管理者は 1 つまたは複数のシリアルポートを構成して、出力先が変更されたコンソールメッセージを表示したり、システムの実行レベルが変わったときに sulogin セッションをサポートしたりできます。この機能を使用して、モデム付きのシリアルポートにダイヤルインしてコンソールメッセージを監視し、init 状態の変更を表示できます。(詳細は、sulogin(1M) のマニュアルページと次の詳しい手順を参照してください。)
補助コンソールとして構成されたポートからシステムにログインすることもできますが、このポートは主に、デフォルトコンソールに表示される情報を表示する出力デバイスです。ブートスクリプトやその他のアプリケーションがデフォルトコンソールに対して読み書きを行う場合、書き込み出力はすべての補助コンソールに出力されますが、入力はデフォルトコンソールからだけ読み込まれます。(対話型ログインセッションでの consadm コマンドの使い方については、「対話型ログインセッション中に consadm コマンドを使用する」を参照してください。)
コンソール出力はカーネルメッセージと syslog メッセージからなり、新しい仮想デバイス /dev/sysmsg に書き込まれます。さらに、rc スクリプト起動メッセージが /dev/msglog に書き込まれます。以前のリリースでは、これらのメッセージはすべて /dev/console に書き込まれていました。
スクリプトメッセージを補助コンソールに表示したい場合は、コンソール出力を /dev/console に出力しているスクリプトで出力先を /dev/msglog に変更する必要があります。メッセージ出力を補助デバイスに出力変更したい場合は、/dev/console を参照しているプログラムで syslog() または strlog() を使用するように明示的に変更してください。
consadm コマンドは、デーモンを実行して補助コンソールデバイスを監視します。補助コンソールに指定された表示デバイスがハングアップしたりキャリア信号がなくなって切り離されると、そのデバイスは補助コンソールデバイスのリストから削除され、アクティブでなくなります。1 つまたは複数の補助コンソールを有効にしても、メッセージがデフォルトコンソールに表示されなくなるわけではありません。メッセージは引き続き /dev/console に出力されます。
実行レベルの変更中に補助コンソールメッセージングを使う場合は、次の点に注意してください。
システムのブート時に実行する rc スクリプトにユーザーの入力がある場合は、補助コンソールから入力を行うことはできません。入力はデフォルトコンソールから行う必要があります。
実行レベルの変更中に、スーパーユーザーパスワード入力を要求するために sulogin プログラムが init によって呼び出されます。このプログラムは、デフォルトのコンソールデバイスだけでなく各補助デバイスにもスーパーユーザーパスワードの入力要求を送信するように変更されています。
システムがシングルユーザーモードで動作し、1 つまたは複数の補助コンソールが consadm コマンドによって有効になっていると、最初のデバイスでコンソールログインセッションが実行され、正確なスーパーユーザーパスワードを要求する sulogin プロンプトが表示されます。コンソールデバイスから正しいパスワードを受け取ると、sulogin は他のすべてのコンソールデバイスからの入力を受信できないようにします。
コンソールの 1 つがシングルユーザー特権を取得すると、デフォルトコンソールとその他の補助コンソールにメッセージが出力されます。このメッセージは、どのデバイスから正しいスーパーユーザーパスワードが入力され、コンソールになったかを示します。シングルユーザーシェルが動作する補助コンソールのキャリア信号が失われると、次のどちらかのアクションが起ることがあります。
補助コンソールが実行レベル 1 のシステムを表している場合は、システムはデフォルトの実行レベルに移行します。
補助コンソールが実行レベル S のシステムを表している場合は、シェルから init s または shutdown コマンドが入力されたデバイスに「ENTER RUN LEVEL (0-6, s or S):」というメッセージが表示されます。このデバイスのキャリア信号も失われている場合は、キャリア信号を復活して正確な実行レベルを入力する必要があります。init や shutdown コマンドを実行しても、実行レベルプロンプトが再表示されることはありません。
シリアルポートを使用してシステムにログインしている場合には、init または shutdownコマンドを使用して別の実行レベルに移行すると、このデバイスが補助コンソールかどうかに関係なくログインセッションは失われます。この状況は、補助コンソール機能がない Solaris リリースと同じです。
consadm コマンドを使って補助コンソールにするデバイスを選択すると、システムをリブートするか補助コンソールの選択を解除するまで、そのデバイスは補助コンソールとして有効です。ただし、consadm コマンドには、複数のシステムリブートにまたがってデバイスを補助コンソールとして使用するオプションがあります。(詳しい手順については、次の内容を参照してください。)
シリアルポートに接続されている端末からシステムにログインしてから consadm コマンドを使ってこの端末にコンソールメッセージを表示して対話型ログインセッションを行う場合、次の点に注意してください。
この端末で対話型ログインセッションを行う場合、補助コンソールがアクティブだと、コンソールメッセージは /dev/sysmsg デバイスまたは /dev/msglog デバイスに送られます。
この端末からコマンドを発行すると、入力はデフォルトコンソール (/dev/console) ではなく対話型セッションに送られます。
init コマンドを実行して実行レベルを変更すると、リモートコンソールソフトウェアは対話型セッションを終了し、sulogin プログラムを実行します。この時点では、入力はこの端末からだけ可能で、入力はコンソールデバイスから行われたかのように扱われます。そのため、「実行レベルの変更中に補助コンソールメッセージングを使用する」の説明のとおりに、sulogin プログラムにパスワードを入力できます。
次に、(補助) 端末から正しいパスワードを入力すると、補助コンソールは、対話型 sulogin セッションを実行し、デフォルトコンソールおよび競合する補助コンソールを使えなくします。つまり、その端末は実質的にシステムコンソールとして機能します。
この端末から実行レベル 3 または別の実行レベルに変更できます。実行レベルを変更すると、すべてのコンソールデバイスで sulogin が再び実行されます。終了したり、システムが実行レベル 3 で起動されるように指定すると、どの補助コンソールからも入力を行えなくなります。すべての補助コンソールはコンソールメッセージを表示するだけのデバイスに戻ります。
システムが起動する際には、デフォルトのコンソールデバイスから rc スクリプトに情報を入力する必要があります。システムが再び起動すると login プログラムがシリアルポートで実行されるため、別の対話型セッションを開始できます。そのデバイスを補助コンソールに指定していれば、コンソールメッセージはその端末に引き続き出力されます。ただし、端末からの入力はすべて対話型セッションに送られます。
consadm デーモンは、consadm コマンドで補助コンソールを追加するまでポートの監視を開始しません。セキュリティ機能として、コンソールメッセージは、キャリア信号が失われるまでか、補助コンソールデバイスの選択が解除されるまでの間だけ出力変更されます。そのため、consadm コマンドを使うには、そのポートでキャリア信号が確立されている必要があります。
補助コンソールを有効にする方法の詳細は、consadm(1M) のマニュアルページを参照してください。
スーパーユーザーとしてシステムにログインします。
補助コンソールを有効にします。
# consadm -a devicename |
現在の接続が補助コンソールであることを確認します。
# consadm |
# consadm -a /dev/term/a # consadm /dev/term/a |
スーパーユーザーとしてシステムにログインします。
複数のシステムリブート後も補助コンソールを有効にします。
# consadm -a -p devicename |
このデバイスが持続的な補助コンソールのリストに追加されます。
デバイスが持続的な補助コンソールのリストに追加されているか確認します。
# consadm |
# consadm -a -p /dev/term/a # consadm /dev/term/a |
# consadm -d /dev/term/a # consadm |