弹性堆栈はどのようにDevOpsを高速に実行できるか|JFrog

DevOpsチ，ムはユニバ、サル、バ、ナリ、リポジトリマネ、ジャ、としてArtifactoryを利用していますが，その運用監視は困難な場合があります。複数の高可用性ノ，ドとx射线をJFrog DevOpsプラットフォ，ムとして統合することで運用デ，タはJFrogプラットフォ，ムの各サ，ビスのログに分散されます。

運用チームはリアルタイムのデータマイニングとプラットフォーム監視で得られる貴重なデータの分析を必要としています。以前のブログJFrogのログ分析をSplunkでにて初めてご覧になった方もいるかもしれません。

この機能をより広範囲に利用できるようにするため，JFrogはこの機能を弹性堆栈のユ，ザ，に拡張し，ElasticsearchとKibanaの統合を行いました。

Elasticsearchは分散型でスケーラブルな検索エンジンで全文検索,構造化テキスト検索,アナリティクス検索などに利用できます。大量のデタを検索する場合はもろん，さまざまな種類の文書を検索する場合にも利用されています。

KibanaはElasticsearchの可視化とダッシュボ，ドとして一般的に導入されています。Kibanaを使用した場合,ビルドの可視化やダッシュボードを使ってWeb UIからElasticsearchのログデータを検索することができます。

オ，プンソ，スのログ分析テクノロジ，を活用する方法をご紹介します。弹性、Fluentd Kibanaを活用し,運用チームが価値ある情報を得るための無償のオープンソース・ログ分析プラットフォームを提供します。

流利の使用

まず，JFrog上のオ，プンソ，スのデ，タコレクタであるFluentdをElasticsearchとKibanaの統合で利用できるようにしました。FluentdはJFrogプラットフォームの各製品に対するログ入力,フィールドの抽出,レコードの変換を行い,このデータをJSONに変換します。

すべてのログデータを共通フォーマットで利用できるため,Fluentdはプラグインを介して,お客様が選択したElasticsearchにログデータを送信します。

Fluentdのンストル

各JPDノドにFluentdロギングエジェントをンストルする必要があります。このエージェントは様々な詹妮弗ログファイルを処理し,新しいログ行を解析後,対応するレコードに変換し,Fluentdの関連する出力プラグインに送信する役割を持っています。

各ノドにFluentdエジェントをンストルするにはFluentdンストルガドに記載されている通り，osの種類に応じた手順を実施します。

例えばRed Hat Linux无论何时を動作させているノードではFluentdエージェント“td-agentをインストールする必要があります(このOSでは根アクセスが必要です):

$ curl -L https://toolbelt.treasuredata.com/sh/install-redhat-td-agent3.sh | sh

Red Hat无论何时の空间にインストールする場合はFluentdのRubyと宝石をインストールします:

$ curl -O | tar -xvf

流利の設定

rootユ，ザかそれ以外のユ，ザかにより，Fluentd設定ファルの配置場所の変更を必要な場合があります。

パッケージマネージャを使用した場合,根ユーザによるインストールではデフォルトでtd-agent.confファイルは/etc/td-agent/にあります。

$ ls -al /etc/td-agent/td-agent.conf -rw-r——r——1 root root 8017 5月11日18:09 /etc/td-agent/td-agent.conf

根ユーザ以外のインストールでは書き込み権限があればtd-agent.confファイルをどこでも保存できます。td-agentを実行時,- cフラグを利用してfluentdをこのファイルの場所に指定することができます。

設定ファ@ @ルはJFrog日志分析Github回购から取得した設定ファ@ @ルに置き換える必要があります。

このリポジトリではfluentdフォルダに設定ファ▪▪ルのテンプレ▪▪トが含まれています。ノ，ドで実行されているJFrogアプリケ，ションにマッチするテンプレ，トを使用してください:

この設定ファesc esc esc esc esc esc esc esc esc esc esc匹配ディレクティブで更新する必要があります:

#END弹性输出@type elasticsearch @id elasticsearch主机elasticsearch端口9200 index_name unified-artifactory include_tag_key true type_name fluentd logstash_format false #END弹性输出

ここでのホストはデプロイしたkibana_svc.yamlスニペットの仕様上,内部のk8クラスタ・ホストのelasticsearchです。ElasticsearchとKibanaを別の方法で設定している場合は外部IPアドレスを設定することも可能です。