スプランク マシンデータ分析の概要-パート1. SPLクエリとログの視覚化の例



この記事では、データをSplunkにロードする方法、組み込みのSPL言語に基づいてシステムで検索クエリを作成する方法、およびそれらを視覚化する方法について説明します。 これは、 テストデータに基づいた純粋に実用的な「ハウツー」記事で、アクセスは自由に利用でき、誰でもダウンロードできます。

読んで実際に繰り返した後、次のことを学びます。



システムへのデータのアップロード




システムでログを収集するための5つの主なソースがあります(これは完全なリストではありません)。


この記事では、明確にするために、最も単純な方法を使用します。 ローカルコンピューターからSplunkにテストファイルをアップロードするだけです。 エンタープライズの歴史上、これを誰も使用していないことは明らかであり、上記のオプションはターゲットシステム上のエージェント (フォワーダー)と一緒に使用され、インフラストラクチャは次のようになります。



しかし、このケーススタディでは、ローカルコンピューターにダウンロードされた1つの無料のSplunk Enterprise Freeで十分です。 インストール手順については、 以前の記事をご覧ください

データをダウンロードしてSplunkをインストールしたら、データをロードする必要があります。 実際、データは事前​​に準備されているため、非常に簡単です( 指示 )。 重要 ! アーカイブを解凍する必要はありません。

SPLリクエスト


SPL言語の主な機能:




SPL構造:


デフォルトでは、SPLリクエストはいくつかの段階に分割できます:必要なデータのフィルタリングと選択、既存のデータに基づいた新しいフィールドの作成、データの集計と統計の計算、最​​後にフィールドの名前の変更、出力の並べ替え。



システムにデータをアップロードした後、それを検索できます(以下はクエリの例で、実行結果があります):

検索インターフェイスは次のとおりです。



検索とフィルター:


Splunkでは、以下の例のように、キーワードまたは「標準の論理演算子で区切られたキーワードのセット」によって「Googleのような」イベントを検索できます。 また、右側のメニューと特定の期間のイベント数を示す中央の緑のヒストグラムの両方で必要な時間間隔を選択することにより、いつでも検索を更新できます。


計算フィールド(評価):


Splunkは、既存のフィールドに基づいて新しいフィールドを作成できますこのために、 evalコマンドが使用され、その構文と使用例を以下に説明します。 いくつかのフィールドを作成した後、さらにリクエストに参加することもできます。


統計クエリと視覚化:


新しいフィールドのフィルタリングと作成を学んだ後、次のステップである統計クエリまたはデータ集約に進みます。 さらに、これらはすべて自然に視覚化できます。 これらのリクエストについては、 別のテストファイルをシステムにダウンロードする必要があります 。 ブート段階で、[ 名前を付けて保存 ]ボタンを使用してsourcetype csveqに 変更し、クエリ結果がスクリーンショットに一致するようにすることが重要です。




経時的な統計クエリ:


Splunkはすべての検索を時間内に実行するため、最も一般的なコマンドの1つはtimechartです 。これにより、時間参照を使用して統計クエリを作成できます。以下に例を示します(視覚化の種類は、統計、視覚化タブ、および書式ボタンの下のインターフェイスで選択できます):


おわりに


次回は、地理座標を持つデータを操作できるいくつかの興味深いコマンドと、これらの座標が利用できない場合にそれらを取得する方法と場所、およびトランザクションを強調表示してイベントのシーケンスを識別するデータのグループ化について説明します。

また、Splunk- クイックリファレンスガイドに関する多くの情報を1か所にまとめた非常に便利なドキュメントについても言及します。

Source: https://habr.com/ru/post/J324136/


All Articles