# 日本語による質問・議論はこちら **URL:** https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=1 [Latest](https://discuss.elastic.co/latest.md) · [Categories](https://discuss.elastic.co/categories.md) · [Tags](https://discuss.elastic.co/tags.md) **Page:** 2 --- ## [ETL処理の実行順序について](https://discuss.elastic.co/t/etl/304896)
**Author:** [@Totsuka](https://discuss.elastic.co/u/Totsuka)\ **Replies:** 6\ **Last updated:** [May 26, 2022, 9:11am UTC](https://discuss.elastic.co/t/etl/304896 "2022-05-26T09:11:35Z")
大変初歩的な質問で申し訳ないですが、公式リファレンスや書籍では理解できなかったため、ご質問いたします。 質問内容としては、各プラグインはどのような順番で実行されているかということです。 例えば、下記の例です。 input { jdbc { jdbc\_driver\_class =\> "com.mysql.jdbc.Driver" statement =\> "SELECT \* from example\_table"… --- ## [DataNode内のシャード再配置時の動作対象について](https://discuss.elastic.co/t/datanode/304883)
**Author:** [@takumi.yoshikawa](https://discuss.elastic.co/u/takumi.yoshikawa)\ **Replies:** 2\ **Last updated:** [May 26, 2022, 5:38am UTC](https://discuss.elastic.co/t/datanode/304883 "2022-05-26T05:38:11Z")
・ElasticsearchはDataNode内のディスク使用率が以下の閾値を超えると保管しているシャードを別のNodeに再配置しようと働きかけます。 cluster.routing.allocation.disk.watermark.high その際に以下の基準があるかご存じでしょうか。 DataNode内のどのシャードが再配置の対象となるのか どのNodeが再配置先の対象となるのか ディスクベースのシャード割り当て|弾力… --- ## [Elasticsearch等の学習方法について](https://discuss.elastic.co/t/elasticsearch/305437)
**Author:** [@Yos](https://discuss.elastic.co/u/Yos)\ **Replies:** 2\ **Last updated:** [May 24, 2022, 2:09am UTC](https://discuss.elastic.co/t/elasticsearch/305437 "2022-05-24T02:09:50Z")
※このようなことをここに投稿してよいのかわかりませんので、 不適切であれば削除いたしますのでご返信ください。 私は仕事でElasticsearch＋Kibana＋Logstash＋Beatsを組み合わせたログ分析の仕組みを構築中ですが、そのための学習は書籍（ElasticStack実践ガイド）や公式ドキュメント、このコミュニティ、個人のブログで進めております。 皆様はElasticsearchやその他Kibana、Logstash… --- ## [Function\_score queryでのスコアリング時に単語が分割されてしまう事象について](https://discuss.elastic.co/t/function-score-query/302662)
**Author:** [@Totsuka](https://discuss.elastic.co/u/Totsuka)\ **Replies:** 4\ **Last updated:** [May 2, 2022, 9:02am UTC](https://discuss.elastic.co/t/function-score-query/302662 "2022-05-02T09:02:57Z")
＜実現したいこと＞ titleフィールドに「消費税」という単語が含まれていれば、5ポイント、 questionフィールドに「消費税」という単語が含まれていれば、4ポイント、 answerフィールドに「消費税」という単語が含まれていれば、3ポイントを付与し、 その合計をスコアリングの値とし("score\_mode": "sum")、スコアの降順で表示したいです。 ※Elasticsearchのデフォルトのスコアリングは無視する設… --- ## [ビジュアライゼーションのグラフクリック時の適用フィルターに関して](https://discuss.elastic.co/t/topic/301019)
**Author:** [@Koki](https://discuss.elastic.co/u/Koki)\ **Replies:** 2\ **Last updated:** [April 27, 2022, 6:22am UTC](https://discuss.elastic.co/t/topic/301019 "2022-04-27T06:22:43Z")
作成したビジュアライゼーションにて、0.885～0.89の範囲にある棒グラフをクリックした際に 下記のような適用フィルターのチェックボックスが出てきます。 こちらのチェックボックスが写真のように0～0.005という範囲になっております。 どうにかして0.885～0.89というようにクリックした箇所の範囲に指定したいのですが、解決策はありますでしょうか？ --- ## [Discoverにてコロン前後のキーワードを検索する場合の事象について](https://discuss.elastic.co/t/discover/302766)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [April 22, 2022, 3:55pm UTC](https://discuss.elastic.co/t/discover/302766 "2022-04-22T15:55:02Z")
下記のようなインデックスを保持しております { "took" : 2, "timed\_out" : false, "\_shards" : { "total" : 5, "successful" : 5, "skipped" : 0, "failed" : 0 }, "hits" : { "total" : { "value" : 4, "relatio… --- ## [コントロールの範囲スライダーで小数単位でスライダーを動かしたい](https://discuss.elastic.co/t/topic/301020)
**Author:** [@Koki](https://discuss.elastic.co/u/Koki)\ **Replies:** 0\ **Last updated:** [March 30, 2022, 3:03am UTC](https://discuss.elastic.co/t/topic/301020 "2022-03-30T03:03:03Z")
0～１までの小数のみのデータがはいったフィールドに対して、範囲スライダーを利用したいと考えております。 ステップサイズを0.1、小数部分の桁数を1と設定すると、下記のようなエラーが発生するのですが、エラーが発生しないためには「ステップサイズ」および「小数部分の桁数」をどのように設定すればよいかを教えてください。 --- ## [“Parent Circuit Breaker”の推定サイズ（estimated\_size）の算出方法について](https://discuss.elastic.co/t/parent-circuit-breaker-estimated-size/300556)
**Author:** [@yusuke.kominami](https://discuss.elastic.co/u/yusuke.kominami)\ **Replies:** 0\ **Last updated:** [March 24, 2022, 10:22am UTC](https://discuss.elastic.co/t/parent-circuit-breaker-estimated-size/300556 "2022-03-24T10:22:04Z")
\_nodes/statsで確認したところ 現在、下記に添付したデータの様な状態となっており このままでは Parent Ciruit Breaker の limit に引っかかってしまい Circuit Breakが発生してしまいかねないため 対応を考えているのですが、原因の特定が出来ず調査が行き詰まっております。 Parent Circuit Brwaker は各breakerの合計の値が入ってくるものという認識なのですが … --- ## [検索結果のvisualize表示について](https://discuss.elastic.co/t/visualize/300279)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [March 22, 2022, 2:11pm UTC](https://discuss.elastic.co/t/visualize/300279 "2022-03-22T14:11:52Z")
下記URLを参照し、Discoverの結果のとあるフィールドの集約結果をvisualizeにて表示しようとしております。 型がip型や数値型のフィールドについてはviualize表示できたのですが、テキスト型のフィールドについて、Available fieldsのフィールド名をクリックしても「visualize」ボタンが表示されず、visualize表示できません。原因及び対処法をご教示頂けないでしょうか。 --- ## [【Vega-lite】タイムスケール内のデータがグラフに表示されない](https://discuss.elastic.co/t/vega-lite/300342)
**Author:** [@qoopen0815](https://discuss.elastic.co/u/qoopen0815)\ **Replies:** 0\ **Last updated:** [March 22, 2022, 1:20pm UTC](https://discuss.elastic.co/t/vega-lite/300342 "2022-03-22T13:20:42Z")
Gantt Chart (Ranged Bar Marks) | Vega-Liteを参考にしながらグラフを作成しています。 50個以上の適当なデータを投入して、下記のようなグラフを作成することはできましたが、投入したデータの個数と、グラフに表示されているデータの個数が一致しません。 開発者ツールでVEGA\_DEBUG.view.data('hoge')を使い、読み込んだデータを調べると、10個のデータしか取得できてないことが… --- ## [Discoverにおけるハイフンを含む文字列の検索について](https://discuss.elastic.co/t/discover/299817)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [March 22, 2022, 9:13am UTC](https://discuss.elastic.co/t/discover/299817 "2022-03-22T09:13:23Z")
ドキュメント内のあるフィールドに、ハイフンを含む文字列があります。 フィールド名：fieldA 値：su su-l su-a Discover画面にて前方一致で「su-」から始まるものを検索したいのですが、想定通りの検索が出来ませんでした。 下記、Discoverでの指定条件と結果になります。 fieldA:"su-l" →su-lのフィールドのみマッチ fieldA:"su\*" →su、su-l、su-aがマッチ f… --- ## [Configuring Filebeat to use an AWS PrivateLink endpoint to index into CloudWatch](https://discuss.elastic.co/t/configuring-filebeat-to-use-an-aws-privatelink-endpoint-to-index-into-cloudwatch/300056)
**Author:** [@ndtreviv](https://discuss.elastic.co/u/ndtreviv)\ **Replies:** 1\ **Last updated:** [March 18, 2022, 3:37pm UTC](https://discuss.elastic.co/t/configuring-filebeat-to-use-an-aws-privatelink-endpoint-to-index-into-cloudwatch/300056 "2022-03-18T15:37:40Z")
Continuing the discussion from AWS PrivateLinkの使用方法: I also want to do this. I can't find any documentation to configure an endpoint override. I also need to do the same thing with the S3 snapshots repository. Is it e… --- ## [\[metricbeat\]Error fetching data for metricset logstash.node: Could not find field 'id' in Logstash API response](https://discuss.elastic.co/t/metricbeat-error-fetching-data-for-metricset-logstash-node-could-not-find-field-id-in-logstash-api-response/299418)
**Author:** [@Yos](https://discuss.elastic.co/u/Yos)\ **Replies:** 2\ **Last updated:** [March 17, 2022, 1:10am UTC](https://discuss.elastic.co/t/metricbeat-error-fetching-data-for-metricset-logstash-node-could-not-find-field-id-in-logstash-api-response/299418 "2022-03-17T01:10:33Z")
metricbeatでelastic stack監視をしようと logstash-xpackを有効化し、metricbeatを起動したところ、 以下のエラーが出力されます。 Kibana上ではLogstashのMonitoringはできているようですが、 /var/log/messagesにエラーが出続けます。 このエラーの原因で思い当たること等ございましたら、ご教授ください。 ■/etc/metricbeat/module… --- ## [Kibana pluginsまたは、REST APIよりKibana Discover、Dashboardの作成について](https://discuss.elastic.co/t/kibana-plugins-rest-api-kibana-discover-dashboard/299698)
**Author:** [@takadev](https://discuss.elastic.co/u/takadev)\ **Replies:** 2\ **Last updated:** [March 15, 2022, 10:53am UTC](https://discuss.elastic.co/t/kibana-plugins-rest-api-kibana-discover-dashboard/299698 "2022-03-15T10:53:56Z")
現在、kibana管理画面より、Discoverの作成、作成したDiscoverをPanelに配置したDashboardの作成を行っております。 作成を管理画面ではなく、REST APIやKibana pluginsを利用したアプリから作成できないか調査しているのですが、Kibana Guideからはわかりませんでした。 Kibanaが公開しているREST APIやKibana pluginsなどからDiscover、Dashboa… --- ## [Beatsでoutput.fileを指定する方法](https://discuss.elastic.co/t/beats-output-file/297842)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 1\ **Last updated:** [March 15, 2022, 9:37am UTC](https://discuss.elastic.co/t/beats-output-file/297842 "2022-03-15T09:37:50Z")
winlogbeat,filebeatにて、収集対象のログファイルを指定したディレクトリ配下に配置したいのですが、出力ができません。 output.file: path: "/tmp/winlogbeat" filename: winlogbeat #rotate\_every\_kb: 10000 #number\_of\_files: 7 #permissions: 0600 #rotate\_on\_startup:… --- ## [Relying on default value of \`pipeline.ecs\_compatibility\`,](https://discuss.elastic.co/t/relying-on-default-value-of-pipeline-ecs-compatibility/299672)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 1\ **Last updated:** [March 15, 2022, 1:36am UTC](https://discuss.elastic.co/t/relying-on-default-value-of-pipeline-ecs-compatibility/299672 "2022-03-15T01:36:54Z")
Continuing the discussion from Relying on default value of \`pipeline.ecs\_compatibility\`,: 上記のエラーですが、再起動をしても出現するようになってしましました・・。 どなたか知見がある方、エラー解消方法をご教示いただけると幸いです。 よろしくお願いいたします💦 --- ## [Logstashにて特定の行のみ抽出する方法](https://discuss.elastic.co/t/logstash/298925)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 2\ **Last updated:** [March 14, 2022, 10:42pm UTC](https://discuss.elastic.co/t/logstash/298925 "2022-03-14T22:42:45Z")
filebeat,winlogbeatで受信したファイルから特定の文字列が入った行のみ抽出する方法はありますでしょうか？ 例えば、errorの文字列が入っている行のみ抽出するって感じです。 filterで指定するとは思うのですが、方法がわかりません。 どなたかご存じでしたらご教示願います💦 よろしくお願いいたします。 --- ## [Elasticsearch Output および Grok FilterでのECSに関するWariningについて](https://discuss.elastic.co/t/elasticsearch-output-grok-filter-ecs-warining/299188)
**Author:** [@Yos](https://discuss.elastic.co/u/Yos)\ **Replies:** 0\ **Last updated:** [March 9, 2022, 9:03am UTC](https://discuss.elastic.co/t/elasticsearch-output-grok-filter-ecs-warining/299188 "2022-03-09T09:03:29Z")
Elasticsearch、Kibana、LogstashおよびFilebeatをバージョン7.16.3から8.1.0へアップグレードしたところ、以下のようなLogstashのWaringが出力されました。 \[WARN \]\[logstash.filters.grok \]\[パイプライン名\] ECS v8 support is a preview of the unreleased ECS v8, and uses the v1 … --- ## [Relying on default value of \`pipeline.ecs\_compatibility\`,](https://discuss.elastic.co/t/relying-on-default-value-of-pipeline-ecs-compatibility/298370)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 1\ **Last updated:** [February 28, 2022, 6:19am UTC](https://discuss.elastic.co/t/relying-on-default-value-of-pipeline-ecs-compatibility/298370 "2022-02-28T06:19:51Z")
logstashを以下のコマンド起動したら「Relying on default value of pipeline.ecs\_compatibility～」というエラーが表示されました。 \[root@rhel8 conf.d\]# /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/logstash.conf \[INFO \] 2022-02-28 13:45:46.786 … --- ## [Beatsで収集したログをそのままlogstashに送信できない](https://discuss.elastic.co/t/beats-logstash/297840)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 6\ **Last updated:** [February 28, 2022, 4:48am UTC](https://discuss.elastic.co/t/beats-logstash/297840 "2022-02-28T04:48:51Z")
filebeat,winlogbeatで収集したログを、logstashがインストールされているログ管理サーバに送信して、ログの管理を行いたいです。 filebeat,winlogbeatで収集したログを、logstashに受信できたと思ったのですが、生ログではなく、ログの情報（該当ログファイルのパス、ログファイルの作成日時等）が送られてきます。 filebeat,winlogbeatで収集したログを、生ログのままlogstashに… --- ## [Beatsで収集したログを日次指定してlogstashに送信するには](https://discuss.elastic.co/t/beats-logstash/297841)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 4\ **Last updated:** [February 23, 2022, 11:17pm UTC](https://discuss.elastic.co/t/beats-logstash/297841 "2022-02-23T23:17:15Z")
winlogbeat,filebeatで収集したログをリアルタイムもしくは日次指定してlogstashに送信する方法が知りたいです。 どのソフトのymlファイルで設定すれば宜しいのでしょうか？ 宜しくお願い致します。 --- ## [Systemctlで起動する際、pipelines.ymlを読み込み起動する方法](https://discuss.elastic.co/t/systemctl-pipelines-yml/298094)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 0\ **Last updated:** [February 23, 2022, 11:16pm UTC](https://discuss.elastic.co/t/systemctl-pipelines-yml/298094 "2022-02-23T23:16:02Z")
logstashをsystemctl start logstashで起動する際、デフォルトでpipelines.ymlを読み込み起動すると認識していますが、pipelines.ymlを読み込んで起動しません。 /etc/systemd/system/logstash.serviceの内容は以下 \[Unit\] Description=logstash \[Service\] Type=simple User=root Group=roo… --- ## [Winlogbeatで複数ファイルを振り分ける方法](https://discuss.elastic.co/t/winlogbeat/298093)
**Author:** [@gou\_gemma](https://discuss.elastic.co/u/gou_gemma)\ **Replies:** 0\ **Last updated:** [February 23, 2022, 11:01pm UTC](https://discuss.elastic.co/t/winlogbeat/298093 "2022-02-23T23:01:51Z")
複数ディレクトリに格納されたファイルをwinlogbeatからlogstashにファイルを送信した後で、ディレクトリ毎にファイルを格納したいです。 filebeatであれば、tagsで振り分けができたのですがwinlogbeatではfilebeatでいう、tagsのような振り分けに適したパラメータがあるのでしょうか？ ちなみにfilebeatでは以下のようにディレクトリ毎に振り分けをしています。 output { if "fi… --- ## [Kibanaのマルチテナント運用におけるユーザ管理について](https://discuss.elastic.co/t/kibana/296353)
**Author:** [@Yuji1](https://discuss.elastic.co/u/Yuji1)\ **Replies:** 2\ **Last updated:** [February 9, 2022, 3:06am UTC](https://discuss.elastic.co/t/kibana/296353 "2022-02-09T03:06:45Z")
Kibana 7.16.2でダッシュボード機能をマルチテナント化し、組織内に展開しようと考えています。 下記サイトを参考にし、ユーザ毎に利用できる情報を制御することでマルチテナント運用を実現したいと考えています。 https://acro-engineer.hatenablog.com/entry/2018/04/12/120000 ここで課題となっているのがユーザ管理についてです。 組織A、組織Bに対してそれぞれAdminの… --- ## [ドキュメントAPIにて、インデックス名に動的に日付を設定する方法](https://discuss.elastic.co/t/api/293513)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 10\ **Last updated:** [February 4, 2022, 9:45am UTC](https://discuss.elastic.co/t/api/293513 "2022-02-04T09:45:41Z")
以下のドキュメントに示されるAPIにて、インデックス名に現在月を付与したいです PUT my-index-000001/\_doc/1?timeout=5m { "@timestamp": "2099-11-15T13:12:00", "message": "GET /search HTTP/1.1 200 1070000", "user": { "id": "kimchy" } } 上記APIにて、インデ… --- ## [日付ヒストグラムを週間隔にしたときに、開始を月曜日ではなく、他の曜日にできますか](https://discuss.elastic.co/t/topic/295006)
**Author:** [@chibivader](https://discuss.elastic.co/u/chibivader)\ **Replies:** 2\ **Last updated:** [January 28, 2022, 2:02am UTC](https://discuss.elastic.co/t/topic/295006 "2022-01-28T02:02:58Z")
kibanaでグラフを作成する際に、日付ヒストグラムで週間隔にすると、 月曜日から日曜日までの集計になります。 これを例えば、木曜日から水曜日までの集計にすることはできますでしょうか。 添付の図で言えば 2021-12-27から開始ではなく、2021-12-30から開始にしたいと思っています。 --- ## [既存のインデックスのマッピング定義を変更する際のデータ移行方法について](https://discuss.elastic.co/t/topic/294668)
**Author:** [@Naoki\_Yoshida](https://discuss.elastic.co/u/Naoki_Yoshida)\ **Replies:** 2\ **Last updated:** [January 19, 2022, 1:08am UTC](https://discuss.elastic.co/t/topic/294668 "2022-01-19T01:08:00Z")
既にデータが登録されているインデックスで、とあるフィールドのマッピング定義を変更する場合には、 既存インデックス削除→新規インデックスを作成して新しいマッピング定義を登録しデータを投入 という方法しかないのでしょうか。 現在運用しているシステムでは上記のような方法を取っておりまして、 マッピング定義の更新に非常に時間がかかっています。 何かいい方法等ありましたら教えていただけますと幸いです。 --- ## [折れ線グラフにおいて、日付単位で集計0件の場合にcountを0で集計させたい](https://discuss.elastic.co/t/0-count-0/292079)
**Author:** [@na\_taka](https://discuss.elastic.co/u/na_taka)\ **Replies:** 13\ **Last updated:** [December 28, 2021, 7:29am UTC](https://discuss.elastic.co/t/0-count-0/292079 "2021-12-28T07:29:18Z")
お世話になっております。 折れ線グラフにおいて、質問させていただきます。 サンプルログ date dstaddr\_i レコード数 11/19 10.1.2.1 1 11/19 10.2.1.1 1 11/19 172.16.2.1 2 11/19 192.168.2.1 2 11/19 11.1.2.1 2 グラフ表示対象 11/19 173.16.2.1 2 … --- ## [Kibanaでのデータテーブル表示について](https://discuss.elastic.co/t/kibana/292955)
**Author:** [@takadev](https://discuss.elastic.co/u/takadev)\ **Replies:** 2\ **Last updated:** [December 27, 2021, 9:27am UTC](https://discuss.elastic.co/t/kibana/292955 "2021-12-27T09:27:06Z")
kibanaを利用して、ElasitcSearchに保存されているデータを表形式で表示できないか確認を行っております。 Visualizeのdatatableにてテーブル表示できないか確認してみましたが、集約されて表示されるため、期待する結果となりませんでした。 データをレコード毎に表示する方法をご教示頂けませんでしょうか。 目的 データ例(6件)をレコード毎にテーブル表示し、ダッシュボードを共有したい。 index構… --- ## [elasticsearchに入っているデータがKibanaから参照できない](https://discuss.elastic.co/t/elasticsearch-kibana/292756)
**Author:** [@snowman\_1114](https://discuss.elastic.co/u/snowman_1114)\ **Replies:** 2\ **Last updated:** [December 24, 2021, 3:36am UTC](https://discuss.elastic.co/t/elasticsearch-kibana/292756 "2021-12-24T03:36:09Z")
こんにちは Elasticsearchにはデータが入っており、Index patternも対象のindexを含む形で行っているのですが、Discoverなどでデータを見ることができません。 filebeatのmodule(panw)からElasticsearchにデータ登録を行っています。（バージョンは7.16.1です） APIをたたくとドキュメントは登録されている GET /filebeat-panos-2021.12.23… [Previous page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md) [Next page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=2)