# 日本語による質問・議論はこちら **URL:** https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=8 [Latest](https://discuss.elastic.co/latest.md) · [Categories](https://discuss.elastic.co/categories.md) · [Tags](https://discuss.elastic.co/tags.md) **Page:** 9 --- ## [TSVBとMetricのnull値の取り扱いの差](https://discuss.elastic.co/t/tsvb-metric-null/215248)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 4\ **Last updated:** [February 7, 2020, 4:55am UTC](https://discuss.elastic.co/t/tsvb-metric-null/215248 "2020-02-07T04:55:47Z")
お世話になります。 TSVBとMetricのnull値の取り扱いの差について教えてください。 たとえば以下のようなデータの場合で、testdate を Time field としてソートした場合に、value の Top Hit ( Size=1 , ORDER BY DESC ) をとると、以下のとおり差があります。 TSVB \_id=1のnullが無視され、\_id=2の10が取得(表示)される Metric \_id=… --- ## [Ingestnodeのエラー処理について](https://discuss.elastic.co/t/ingestnode/214924)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [February 7, 2020, 12:27am UTC](https://discuss.elastic.co/t/ingestnode/214924 "2020-02-07T00:27:35Z")
お世話になっております。 Ingest node Pipelineのon\_failureの設定方法について質問させて頂きます。 下記のようにPipelineAからPipelineB、PipelineBからPipelineCを呼び出す処理を検討しています。 PUT /\_ingest/pipeline/PipelineA { "processors": \[ { "pipeline": { "if… --- ## [インデックステンプレートのMappingについて](https://discuss.elastic.co/t/mapping/215066)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [February 7, 2020, 12:25am UTC](https://discuss.elastic.co/t/mapping/215066 "2020-02-07T00:25:31Z")
お世話になっております。 ElasticsearchにてインデックステンプレートでのMapping設定無で、 インデックス登録を行う上で、Kibanaの操作などで起こりうる懸念点についてご教示をお願い致します。 例： 数値が文字列で登録されている場合、Discover、Dashboard等で正しくソートされない場合がある --- ## [.monitoring-es-6-\*インデックスファイルの保存期間変更](https://discuss.elastic.co/t/monitoring-es-6/214927)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 3\ **Last updated:** [February 3, 2020, 6:23am UTC](https://discuss.elastic.co/t/monitoring-es-6/214927 "2020-02-03T06:23:33Z")
Elasticsearchのディスク容量が閾値を超えたので、indexがロックされました。 原因を調査しました。 原因 monitoring-es-6-\*インデックスファイルが、7個あり、ギガ単位サイズでした。 対処 monitoring-es-6-\*インデックスファイルを7日間保存から1日保存にしました。 しかし、対処の設定が反映されず、.monitoring-es-6-\*のインデックスのファイル数が 一日ごとに、増えて… --- ## [ESの「.monitoring-es-6-yyyymm.dd」の保存期間変更と対象限定について](https://discuss.elastic.co/t/es-monitoring-es-6-yyyymm-dd/217315)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 2\ **Last updated:** [February 3, 2020, 6:18am UTC](https://discuss.elastic.co/t/es-monitoring-es-6-yyyymm-dd/217315 "2020-02-03T06:18:03Z")
Elasticsearch(6.5.4)にて monitoring機能を有効にしました。 「.monitoring-es-6-yyyymm.dd」のサイズが大きいため保存期間を変更したいです。 デフォルトの7日保存ではなく、3日保存にしたいです。 サイズが大きい「.monitoring-es-6-yyyymm.dd」のindexのみを、 3日保存にすることは可能でしょうか？ 可能でしたら、設定コマンド等をご教示をお願いします… --- ## [NGram Tokenizerについて](https://discuss.elastic.co/t/ngram-tokenizer/217161)
**Author:** [@Yukie](https://discuss.elastic.co/u/Yukie)\ **Replies:** 4\ **Last updated:** [January 31, 2020, 2:50am UTC](https://discuss.elastic.co/t/ngram-tokenizer/217161 "2020-01-31T02:50:01Z")
はじめまして。 Elasticsearch初心者です。 日本語・英語・記号など、さまざまな文字が含まれるデータの中より、 単純に指定した文字が含まれる（部分一致）データを抽出しようとしています。 指定する文字は「１文字～」です。 ngram\_tokenizer: { type: "nGram", min\_gram: "1", max\_gram: "2", token\_chars: \["lette… --- ## [Ingest nodeのon\_failure処理について](https://discuss.elastic.co/t/ingest-node-on-failure/216590)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [January 30, 2020, 4:50am UTC](https://discuss.elastic.co/t/ingest-node-on-failure/216590 "2020-01-30T04:50:30Z")
お世話になっております。 Ingest node Pipelineのon\_failureについて質問させて頂きます。 下記のように PipelineAからPipelineB、PipelineBからPipelineCを呼び出す処理を実施しています。 取込ファイルは、S3→Filebeat→Elasticsearch(ingest node)の順でindex登録しています。 PUT /\_ingest/pipeline/Pipeli… --- ## [kibanaでのログ表示のFilterについて](https://discuss.elastic.co/t/kibana-filter/216380)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 2\ **Last updated:** [January 28, 2020, 2:25am UTC](https://discuss.elastic.co/t/kibana-filter/216380 "2020-01-28T02:25:11Z")
Kibanaで、ログを表示させています。 Filterが増えてきたので、使いたいフィルタを探すようになりました。 Filterの並びをソートをかけたり、好きな順番に変えることは可能でしょうか？ --- ## [Metricbeatでpodmanのリソース情報を取得したい](https://discuss.elastic.co/t/metricbeat-podman/216621)
**Author:** [@giraffe](https://discuss.elastic.co/u/giraffe)\ **Replies:** 3\ **Last updated:** [January 28, 2020, 2:22am UTC](https://discuss.elastic.co/t/metricbeat-podman/216621 "2020-01-28T02:22:05Z")
こんにちは。どうぞよろしくお願いいたします。 environment: CentOS 7.7 metricbeat 7.5.2 podman 1.4.4-4 コンテナの管理にpodman (https://podman.io/)を使用しています。 metricbeatでpodmanコンテナのリソース情報を取得したいのですが、 docker apiを使用せず、cgroupの情報から直接リソース情報を収集する方法をご存知ないで… --- ## [Sortの仕様について](https://discuss.elastic.co/t/sort/216598)
**Author:** [@Masanori\_Mishima](https://discuss.elastic.co/u/Masanori_Mishima)\ **Replies:** 2\ **Last updated:** [January 27, 2020, 6:12am UTC](https://discuss.elastic.co/t/sort/216598 "2020-01-27T06:12:40Z")
sort":\[{"score":{"order":"desc"}},{"age":{"order":"asc"}},{"average":{"order":"desc"}}\] のように複数のフィールドに対してソートを掛けた際の優先順位などはあるのでしょうか？ 例えばscoreの降順に並べるのが優先され、検索結果としては 1.score:90 age:17 average:85 2.score:89 age:15 average:… --- ## [Dataノードが2zoneに存在する時の運用について](https://discuss.elastic.co/t/data-2zone/216347)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 0\ **Last updated:** [January 24, 2020, 2:05am UTC](https://discuss.elastic.co/t/data-2zone/216347 "2020-01-24T02:05:24Z")
elastic cloudを使用しているのですが、Dataノードを2zoneに1ノードずつ配置して運用する場合について質問させてください。 dataノードが片方ダウンした場合、それを自動的に検知する方法はありますでしょうか？ --- ## [入力ログファイルサイズとインデックスサイズの関係性](https://discuss.elastic.co/t/topic/213988)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 2\ **Last updated:** [January 14, 2020, 1:57am UTC](https://discuss.elastic.co/t/topic/213988 "2020-01-14T01:57:38Z")
elasticsearchにファイルを取り込む際の入力ログファイルのサイズと、作成されるインデックスサイズの関係性について教えて下さい。 入力ファイルとして、110byteのログAと2byteのログBを別々のインデックスに取り込んだところ、ログAを取り込んだインデックスサイズは12121byte、ログBを取り込んだインデックスサイズは5732byteとなりました。 入力ファイル1byteあたりのインデックスサイズで考えると、ログAは… --- ## [ElasticCloudにおけるSES使用可否について](https://discuss.elastic.co/t/elasticcloud-ses/214027)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 2\ **Last updated:** [January 8, 2020, 2:05am UTC](https://discuss.elastic.co/t/elasticcloud-ses/214027 "2020-01-08T02:05:01Z")
ElasticCloudのalert通知におけるSES使用可否についてご教示ください。 マニュアルによると、Elasticsearchにおいては、elasticsearch.ymlを編集することで、alert通知時にSESが使用できる旨の記載がございます。 https://www.elastic.co/guide/en/elasticsearch/reference/current/actions-email.html#amazon… --- ## [Elasticsearchのロギング設定について](https://discuss.elastic.co/t/elasticsearch/213983)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 0\ **Last updated:** [January 7, 2020, 5:40am UTC](https://discuss.elastic.co/t/elasticsearch/213983 "2020-01-07T05:40:18Z")
GET /\_cat/health?vで、Elasticsearchのクラスタのヘルスの状態を確認しました。 statusがredだったのですが、ESのログを確認したら、statusがredのログ出力ありませんでした。 ロギングの設定で、クラスターのヘルスの関連情報をログ出力できないでしょうか？ --- ## [Integer\_range型のフィールドの検索について](https://discuss.elastic.co/t/integer-range/213064)
**Author:** [@harahara](https://discuss.elastic.co/u/harahara)\ **Replies:** 0\ **Last updated:** [December 26, 2019, 9:35am UTC](https://discuss.elastic.co/t/integer-range/213064 "2019-12-26T09:35:03Z")
バージョン：Amazon Elasticsearch Service 6.8 以下のようなinteger\_range型のフィールドを持つインデックスがあります。 { "company-data" : { "aliases" : { }, "mappings" : { "\_doc" : { "properties" : { "companyname" : { "type" : "text" }, "capital\_r… --- ## [Watcherのレスポンスを条件にアラート処理を実施したい](https://discuss.elastic.co/t/watcher/213046)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 0\ **Last updated:** [December 26, 2019, 6:22am UTC](https://discuss.elastic.co/t/watcher/213046 "2019-12-26T06:22:57Z")
お世話になっております。 Watcherのwebhook actionにてWEBサービスとの連携を実施しています。 Watcherにてエラーコードのレスポンスを受領した場合、システム管理者へ通知を行う仕組みを検討しているのですが、以下の内容を実現することは可能でしょうか。 ①WatcherA webhook actionにてWEBサービスにリクエスト ↓ ②WEBサービスの処理にてエラー ↓ ③WatcherA レスポンス… --- ## [Logstashでのログ取込で前半部分が欠損する](https://discuss.elastic.co/t/logstash/212799)
**Author:** [@yyuri](https://discuss.elastic.co/u/yyuri)\ **Replies:** 0\ **Last updated:** [December 23, 2019, 2:39am UTC](https://discuss.elastic.co/t/logstash/212799 "2019-12-23T02:39:28Z")
50万程度のログを1日に1回、Elastic Stackが動いているサーバに取り込み、Logstashのfile input pluginでElasticsearchに入れています。 ある日から突然、取り込まれたデータの前半部分が欠損するようになりました。 頻度や欠損の多さはまちまちですが、必ず前半部分のみが欠損します。 同様の事象にあった方や、対処策に心当たりがあれば、ご教授いただけないでしょうか。 構築してから1年9か月程度… --- ## [メール送信時の送信元アドレスに対する送信ドメイン認証可否](https://discuss.elastic.co/t/topic/212801)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 0\ **Last updated:** [December 23, 2019, 4:30am UTC](https://discuss.elastic.co/t/topic/212801 "2019-12-23T04:30:21Z")
watcherのactionにてEメールを送信する際、fromで指定する送信元アドレスに対して、送信元ドメイン認証(DKIM等)を利用したいです。Elasticの仕様上可能かどうか、ご教示頂けないでしょうか。 --- ## [【ingest node】dissect processorとKV processorを1度に処理できるか](https://discuss.elastic.co/t/ingest-node-dissect-processor-kv-processor-1/212268)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 4\ **Last updated:** [December 19, 2019, 5:05am UTC](https://discuss.elastic.co/t/ingest-node-dissect-processor-kv-processor-1/212268 "2019-12-19T05:05:17Z")
お世話になっております。 Ingest nodeについてご質問です。 サンプルログ value1|value2|key3=value3 key4=value4 上記ログは、1つのログに形式の異なるデータが存在します。 このログを "value1|value2|箇所は、Dissect Proccesorにて下記の方法で定義 dissect { mapping =\> { "message" =\> "%{key1… --- ## [Kibanaでの表示中のログのエクスポート](https://discuss.elastic.co/t/kibana/212100)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 2\ **Last updated:** [December 17, 2019, 7:56am UTC](https://discuss.elastic.co/t/kibana/212100 "2019-12-17T07:56:50Z")
kibanaにて Filebeatで収集して、Elasticsearchに格納したサーバログを表示しています。 kibanaで、時間帯を絞って表示したサーバログをファイルにエクスポートすることは可能でしょうか？ --- ## [FilebeatからLogstashへのデータ転送で connection reset by peer を解消したい](https://discuss.elastic.co/t/filebeat-logstash-connection-reset-by-peer/211739)
**Author:** [@sat1100](https://discuss.elastic.co/u/sat1100)\ **Replies:** 2\ **Last updated:** [December 13, 2019, 9:42am UTC](https://discuss.elastic.co/t/filebeat-logstash-connection-reset-by-peer/211739 "2019-12-13T09:42:49Z")
filebeatからデータを送った時に、ログで「write: connection reset by peer」と表示されますが、 データは送られておりKibanaで確認できている状態です。 logstashには以下のように設定しておりますが、解消するにはどのように対処すればいいかご教示お願いします。 input { beats { port =\> 5044 } } --- ## [Canvas の Time filter で parse\_exception が発生する](https://discuss.elastic.co/t/canvas-time-filter-parse-exception/211232)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 6\ **Last updated:** [December 13, 2019, 9:05am UTC](https://discuss.elastic.co/t/canvas-time-filter-parse-exception/211232 "2019-12-13T09:05:49Z")
CanvasでTime filterを使用したいのですが、あるフィールドを設定すると、parse\_exceptionが発生します。（@timestampフィールドを設定した場合にはエラーは発生しません） 動作環境 Elasticsearch 7.3.0 Kibana 7.3.0 発生しているエラーメッセージ エラーが出るフィールドのmapping情報 "testdate" : { "type… --- ## [Timestampにログ日付を設定するが時刻がずれる](https://discuss.elastic.co/t/timestamp/210452)
**Author:** [@keikei12](https://discuss.elastic.co/u/keikei12)\ **Replies:** 2\ **Last updated:** [December 12, 2019, 2:21am UTC](https://discuss.elastic.co/t/timestamp/210452 "2019-12-12T02:21:14Z")
logstashのフィルターで下記の設定をしております。 grokで「TIMESTAMP\_ISO8601:timestamp」でログ内の日付を取得 下記で@timestampにログ内の日付を設定 date { match =\> \[ "timestamp", "ISO8601" \] } 上記のように設定したところ、以下の日付ファイルが取り込まれた時に 時刻がずれていました。 ログの日付 201… --- ## [Watcherのwebhookのbodyの設定方法について](https://discuss.elastic.co/t/watcher-webhook-body/211064)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 5\ **Last updated:** [December 12, 2019, 2:16am UTC](https://discuss.elastic.co/t/watcher-webhook-body/211064 "2019-12-12T02:16:30Z")
お世話になっております。 Watcherについて、質問させて頂きます。 ご質問 ①bodyの項目名(下記例だと"resion")について、以下エラーが発生します。 \[x\_content\_parse\_exception\] \[1:587\] \[script\] unknown field \[resion\], parser not found 項目名は自由に指定できる認識ですが、違うのでしょうか。 エラーの解決策についてご教示をお願い… --- ## [特定文字列でログを分割したい](https://discuss.elastic.co/t/topic/211233)
**Author:** [@snowman\_1114](https://discuss.elastic.co/u/snowman_1114)\ **Replies:** 2\ **Last updated:** [December 11, 2019, 12:07am UTC](https://discuss.elastic.co/t/topic/211233 "2019-12-11T00:07:02Z")
特定文字列でログを分割することが可能か教えていただけますでしょうか。 例えば、 2019-12-10 10:00 AAAAA BBBBB CCCC DDDDCUTLINE2019-12-10 10:01 aaaaa bbbbb cccc ddddCUTLINE2019-12-10 10:02 FFFF GGGGG HHHH MMMM というログがあり、2つのログが1行で出力されてしまっています。 このログ形式の変更は、システム側… --- ## [Elasticsearch SQLの判定がおかしい](https://discuss.elastic.co/t/elasticsearch-sql/211049)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 3\ **Last updated:** [December 9, 2019, 7:01am UTC](https://discuss.elastic.co/t/elasticsearch-sql/211049 "2019-12-09T07:01:19Z")
お世話になります。 CanvasのImage revealエレメントで、data source に Elaticsearch SQLを指定しています。 SQLの中で、値がXX以上なら～のような構文を書いているのですが、想定どおり動作しない箇所があります。 SELECT CASE WHEN round(0,3) \< 0 THEN 0 ELSE 1 END AS "test" 結果：test=0 この場合、想定する動きとして r… --- ## [Filebeatで、ログ収集がとまる](https://discuss.elastic.co/t/filebeat/206762)
**Author:** [@Negi700](https://discuss.elastic.co/u/Negi700)\ **Replies:** 5\ **Last updated:** [December 6, 2019, 1:45pm UTC](https://discuss.elastic.co/t/filebeat/206762 "2019-12-06T13:45:12Z")
Filebeatでのログ収集がとまり、困っています。 下記が出力され、決まった時間にログ収集がとまります。 現在、対処として、filebeatを再起動させて、ログ収集を再開させています。 他に、よい対処方法がありましたら、ご教示お願いします。 ログ収集がとまったときの出力 /var/log/messages rsyslogd: \[origin software="rsyslogd" swVersion="8.16.0" x-… --- ## [テキストデータの取り込み時に、改行を入れる方法](https://discuss.elastic.co/t/topic/210285)
**Author:** [@5f750bbb360aba6ced5f](https://discuss.elastic.co/u/5f750bbb360aba6ced5f)\ **Replies:** 2\ **Last updated:** [December 5, 2019, 4:35am UTC](https://discuss.elastic.co/t/topic/210285 "2019-12-05T04:35:48Z")
現在、200字、300字を超える長めのテキストデータを取り込んでいますが、Kibana上での可読性を上げるため、取り込みの際にテキストデータに改行を入れるようなLogstashの設定などがないかと悩んでおります。 CSV上では一レコードがすべて一行（＝改行が含まれていない状態）ですが、たとえば句読点の後などに改行をいれたいです。 【環境等】 ・Kibana、Elasticsearch、Logstashのバージョン：6.6.2 --- ## [データを取り込む際に不要な情報をインデックスから削除する方法](https://discuss.elastic.co/t/topic/210288)
**Author:** [@5f750bbb360aba6ced5f](https://discuss.elastic.co/u/5f750bbb360aba6ced5f)\ **Replies:** 2\ **Last updated:** [December 5, 2019, 4:34am UTC](https://discuss.elastic.co/t/topic/210288 "2019-12-05T04:34:18Z")
Logstashデータを取り込むと時に、Host・tags・pathなどがIndexに含まれていますが、こちらは見せたくない情報を含むため、これらを取り込み時点で除去するLogstash上の設定等はありませんでしょうか。 【環境等】 ・Kibana、Elasticsearch、Logstashのバージョン：6.6.2 --- ## [Tag Cloudの表示結果から漢字の単語と、形容詞を除去する方法](https://discuss.elastic.co/t/tag-cloud/210282)
**Author:** [@5f750bbb360aba6ced5f](https://discuss.elastic.co/u/5f750bbb360aba6ced5f)\ **Replies:** 1\ **Last updated:** [December 3, 2019, 5:18am UTC](https://discuss.elastic.co/t/tag-cloud/210282 "2019-12-03T05:18:11Z")
【実現したいこと】 日本語テキストをKuromoji分析をかませて、Tag Cloudで可視化している。重荷可視化したいのは英語・カタカナかつ、名詞なので、漢字の単語や形容詞、副詞などは表示結果から除去したい。 【制約】 データはIndex上には残しておきたいので、取り込み時にLogstashで漢字を除去する、などはできない。 【環境等】 ・Kibana、Elasticsearch、Logstashのバージョン：6.6.2 [Previous page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=7) [Next page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=9)