インフラストラクチャの可視性の向上:StatsD と AppSignal のスタンドアロンエージェントを使用してあらゆるシステムを監視

アプリケーションを監視するだけでは、システムの全体像を把握するには必ずしも十分とは限りません。多くの場合、サテライトアプリ (またはサポートアプリ) で実行されているサービスは、日常業務に重大な影響を与える可能性があります。データベースサーバーはこのよく知られた例です。バックアップスクリプトやその他のバックグラウンドジョブもシステムの速度を低下させる可能性があるため、見落とされることがよくあります。

Node.js 用の AppSignal APM、Ruby APM、Elixir APM は、アプリ自体を自動的にインストルメントします。ただし、AppSignal はデフォルトではこれらのサテライトプロセスを監視しません。監視をどこにでも拡張し、すべてのデータを 1 つのアプリに収めるために、AppSignal のスタンドアロンエージェントをインストールできます。

AppSignal のスタンドアロンエージェント

スタンドアロンエージェントは、Ruby、Elixir、または JavaScript アプリケーションを通常使用するのと同じソフトウェアに基づいています。このソフトウェアはスタンドアロンモードでも実行できます。

スタンドアロンエージェントは以下の監視に使用できます。

インフラストラクチャ :システムの一部ですが、アプリケーションコードを実行しないマシン。
バックグラウンドジョブ :集中的な cron ジョブや長時間実行されるデータ処理スクリプトなど。これらのバックグラウンドジョブがサポートされている言語 (Ruby、Elixir、または Node.js) で記述されている場合は、標準の統合を使用できます。
その他の言語 :すぐにサポートされる言語以外の言語で書かれたプログラム。

たとえば、スタンドアロンエージェントを使用すると、Python で記述された機械学習モデルを追跡したり、バックアップスクリプトを計測したり、Kafka ブローカーを監視したり、Web ファームでホストメトリクスを収集したりできます。 AppSignal でこのすべての情報を表示して、メインアプリケーション用にすでに持っているメトリクスを補完できます。

仕組み

エージェントは deb または rpm パッケージとして出荷され、言語の依存関係はありません。 Debian/Ubuntu または Red Hat ベースのシステムで動作します。インストール手順の詳細については、エージェントのドキュメントを確認してください。

インストールが完了すると、エージェントは数分で設定され、デーモンとして永久に実行され続け、インフラストラクチャをサイレントに監視します。さらに、エージェントには、AppSignal ダッシュボードにログインしたカスタムデータを中継する StatsD サーバーが含まれています。

StatsD とは何ですか?

StatsD は、任意のデータを収集および集計するための標準です。メトリックとパフォーマンス情報のログ記録に重点を置いています。マシン内での占有面積が小さい UDP 接続上で軽量のテキストプロトコルを使用します。

StatsD メッセージは次のようになります。

KEY の場合は任意の文字列、および VALUE は数字です。 type 値は、数値がどのように処理されるかを定義します。

次の 3 種類の指標をサポートしています。

c :これはカウンターです。呼び出されるたびに増加します。たとえば、active_users:1|c active_users に 1 を加えますカウンター。
g :ゲージ 数値を受け取り、更新されるまでそれを保持します。これは、スループット、アクティブユーザーの数、キュー内の保留中のタスクの数など、時間の経過とともに増減する値を記録するのに役立ちます。
t :タイミングを保存します価値観。このタイプは、継続時間を追跡するのに最適です。 AppSignal は、記録されたすべてのタイミングの平均、カウント、パーセンタイルを計算します。

サポートされていないその他の指標タイプは、黙って無視されます。

StatsD へのデータの送信

スタンドアロンエージェントは、ポート 8125 で UDP パケットをリッスンします。netcat を使用して、コマンドラインから StatsD 形式の文字列を送信できます。

UDP を使用しているため、応答を待つ必要はありません。

Socat も機能します:

これにより、バッチまたは cron ジョブを簡単に計測できるようになります。たとえば、次の行ではゲージを使用して、バックアップジョブが生成したデータ量を記録します。

整数に限定されるわけではありません。 StatsD は浮動小数点数も処理します。

メトリクスにタグを追加できます。 StatsD サーバーは、メッセージの末尾にあるオプションのタグをサポートしています。

同じメッセージ内に複数のタグを適用し、後でフィルタリングするための値を割り当てることができます。

AppSignal でデータを確認する方法については、後ほど学習します。

言語のインスツルメンテーション

StatsD サーバーは、UDP パケットを送信できるあらゆる言語と互換性があります。いくつかの例を見てみましょう。

Python は、データマイニングと機械学習で人気のある言語です。ビルドイン socket を使用して、Python アプリケーションにインストルメンテーションを追加できます。ライブラリ:

Java では java.net を使用して同様の結果を達成できます。ライブラリ:

PHP は、非常に人気のある言語のもう 1 つの例です。 socket_sendto を使用して UDP パケットを送信できます :

StatsD クライアント

これまで、すべての言語で組み込みのネットワーク機能を使用してきました。しかし、それだけではありません。多くの言語と製品には、サードパーティの StatsD クライアントまたはアドオンが含まれています。少なくともサポートされているデータ型については、StatsD 準拠のクライアントが機能するはずです。クライアントのリストは、StatsD プロジェクト wiki で見つけることができます。