# 日本語による質問・議論はこちら **URL:** https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=4 [Latest](https://discuss.elastic.co/latest.md) · [Categories](https://discuss.elastic.co/categories.md) · [Tags](https://discuss.elastic.co/tags.md) **Page:** 5 --- ## [Logstashのlogstash-input-s3利用時のログ欠損](https://discuss.elastic.co/t/logstash-logstash-input-s3/258695)
**Author:** [@Branzino](https://discuss.elastic.co/u/Branzino)\ **Replies:** 4\ **Last updated:** [December 23, 2020, 2:37pm UTC](https://discuss.elastic.co/t/logstash-logstash-input-s3/258695 "2020-12-23T14:37:55Z")
【環境構成】 複数サーバから同じフォーマットのログをFilebeat利用してLogstash経由（logstash-output-s3）でAWS上のS3バケットに集約して、さらにLogstash（logstash-input-s3）を利用してログをElasticsearchへ転送しています。 【問い合わせ内容】 上記構成において、S3バケットまでログは欠損せずに保管されますが、後続の処理においてログ欠損が発生しています。 収集対… --- ## [WatcherのActionで時刻を扱う方法](https://discuss.elastic.co/t/watcher-action/259332)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [December 22, 2020, 2:44pm UTC](https://discuss.elastic.co/t/watcher-action/259332 "2020-12-22T14:44:44Z")
KibanaのWatcherを使用し、特定条件下でEメールを送信するような以下のActionの定義を行っています "actions": { "send\_email": { "email": { "profile": "standard", "to": \[ "XXXXX@XXX.com" \], "subject": "XXXXX"… --- ## [「APM .NET Agent」の「ASP.NET」の設定方法](https://discuss.elastic.co/t/apm-net-agent-asp-net/258235)
**Author:** [@mukai](https://discuss.elastic.co/u/mukai)\ **Replies:** 3\ **Last updated:** [December 16, 2020, 2:09pm UTC](https://discuss.elastic.co/t/apm-net-agent-asp-net/258235 "2020-12-16T14:09:48Z")
こんにちは。 ASP.NET (Full .NET Framework)に、elasticのAPM Agentを導入したいと考えています。 関連する部分のドキュメントを見たのですが、他のソフトと違い詳細な手順が書かれておらず、うまく設定できません。 (何をダウンロードするか・具体的にどこの設定ファイルにどの様に書けば動作するかの例) 日本語・英語は問いませんので、何か参考になりそうな記事(実践例・手順書)がありまし… --- ## [Elasticsearch repositoryが作成できない](https://discuss.elastic.co/t/elasticsearch-repository/258383)
**Author:** [@\_Username](https://discuss.elastic.co/u/_Username)\ **Replies:** 2\ **Last updated:** [December 14, 2020, 7:19am UTC](https://discuss.elastic.co/t/elasticsearch-repository/258383 "2020-12-14T07:19:06Z")
【問合せ内容】 Elasticsearchのsnapshot取得のため、リポジトリを作成しようとしているが、【現象】エラーが発生してリポジトリを作成できない。 同じ事象の情報や、原因調査方法など、助言をいただきたく、宜しくお願いいたします。 【環境】 Windows10 PRO(バージョン 1909)(※開発環境のため、スタンドアロン) Elasticsearch 7.9.2 kibana 7.9.2 【参考】 スナップシ… --- ## [Cluster\_uuidが\_na\_となる](https://discuss.elastic.co/t/cluster-uuid-na/256446)
**Author:** [@y-nakamichi](https://discuss.elastic.co/u/y-nakamichi)\ **Replies:** 1\ **Last updated:** [December 11, 2020, 2:12am UTC](https://discuss.elastic.co/t/cluster-uuid-na/256446 "2020-12-11T02:12:17Z")
現在、Docker swarmモードで3台のマシン上にElasticsearchクラスタを構築しております。(ホスト名はnode1, node2, node3、Elasticsearchのバージョンは7.8.1) es@node1:~$ sudo docker node ls ID HOSTNAME STATUS AVAILABILI… --- ## [インデックス、マッピング定義の作成エラー](https://discuss.elastic.co/t/topic/256987)
**Author:** [@miya2](https://discuss.elastic.co/u/miya2)\ **Replies:** 2\ **Last updated:** [December 1, 2020, 1:04am UTC](https://discuss.elastic.co/t/topic/256987 "2020-12-01T01:04:20Z")
以下のマッピング定義を使用したインデックスの作成で エラーが発生しており色々調べてはいるのですが解決せず、 回答頂けますと幸いです。 ElasticsearchのVersion7.5.0を使用しています。 ・mapping.json { "mappings" : { "text" : { "properties" : { "text1" : { "… --- ## [Keyに角括弧( ‘\[’ )が使用されているJSONデータを取り込みたい](https://discuss.elastic.co/t/key-json/255149)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 3\ **Last updated:** [November 30, 2020, 6:11am UTC](https://discuss.elastic.co/t/key-json/255149 "2020-11-30T06:11:34Z")
お世話になります。 初歩的な質問ですみません。 keyに角括弧( ‘\[’ )が使用されているJSONデータをlogstashを使ってESに取り込みたいのですが、エスケープなどをしてもlogstashでJSONパースエラーとなり取り込みすることができません。 s3inputプラグインを使用しており、codecにjsonを指定しております。 このデータを取り込みできるようにするにはどうしたらよいのでしょうか。 取り込んだJSONデ… --- ## [Elasticsearchでidの自動採番について](https://discuss.elastic.co/t/elasticsearch-id/256726)
**Author:** [@Tasu](https://discuss.elastic.co/u/Tasu)\ **Replies:** 2\ **Last updated:** [November 27, 2020, 4:31am UTC](https://discuss.elastic.co/t/elasticsearch-id/256726 "2020-11-27T04:31:03Z")
logstashからElasticsearchにデータを送っています。 データが送られると、elasticsearchでidが自動採番されると思うのですが、 idには桁数や数の制限はあるのでしょうか？ ご存じのかたおられましたらご教示ください。 --- ## [Logstashでログメッセージが欠損している可能性について](https://discuss.elastic.co/t/logstash/255795)
**Author:** [@Tasu](https://discuss.elastic.co/u/Tasu)\ **Replies:** 3\ **Last updated:** [November 26, 2020, 4:55am UTC](https://discuss.elastic.co/t/logstash/255795 "2020-11-26T04:55:08Z")
Filebeat,Logstash,Elasticserchを使用してAPサーバで発行するログをログ管理サーバで取得しているのですが、APサーバで発行したログ数と、ElasticSearchに取り込まれたログ数が一致しないという事象が発生しています。ElasticSearchのメモリを増強しましたが事象が解決せず、Logstashが問題なのではないかと考えているのですが、原因が特定できていません。どなたかアドバイス頂けないでしょうか？ … --- ## [Logstashの「LEAK: ByteBuf」に関するエラーについて](https://discuss.elastic.co/t/logstash-leak-bytebuf/256045)
**Author:** [@ueba-dev-i](https://discuss.elastic.co/u/ueba-dev-i)\ **Replies:** 1\ **Last updated:** [November 24, 2020, 2:26am UTC](https://discuss.elastic.co/t/logstash-leak-bytebuf/256045 "2020-11-24T02:26:47Z")
Logstashにおいて、高負荷な状態が継続し、以下アラートが発出致しました。 \[ERROR\]\[io.netty.util.ResourceLeakDetector\] LEAK: ByteBuf.release() was not called before it's garbage-collected. See http://netty.io/wiki/reference-counted-objects.html for more… --- ## [Elasticsearchの自動マッピングについて](https://discuss.elastic.co/t/elasticsearch/254208)
**Author:** [@vavan](https://discuss.elastic.co/u/vavan)\ **Replies:** 3\ **Last updated:** [November 4, 2020, 9:07am UTC](https://discuss.elastic.co/t/elasticsearch/254208 "2020-11-04T09:07:54Z")
elastisearch7.8.1でシステムを構築しています。Index作成時、手動でKeyword型のマッピングをしています。 PUT /hoge\_index/\_mapping { "properties":{ "text\_data" : { "type" : "keyword" } } } このIndexに、データを投入します。 POST /hoge\_index/\_… --- ## [Kibana 空白のスペースの選択と表示される](https://discuss.elastic.co/t/kibana/253968)
**Author:** [@mo-ri](https://discuss.elastic.co/u/mo-ri)\ **Replies:** 6\ **Last updated:** [November 2, 2020, 8:01am UTC](https://discuss.elastic.co/t/kibana/253968 "2020-11-02T08:01:55Z")
初めて投稿致します。 elasticsearch 、kibanaを使って数ヶ月しか使っていない素人です。 環境は、AWSのEC2上にelasticsearch7.9.2、kibana7.9.2をインストールしています。 先週まで Webにて/5601にてkibanaの画面が表示され、 AWSからのデータの投入も確認でき、visualizeやDashboardも作成しておりました。 平日は問題なく、kibanaのhome画面が表… --- ## [\_delete\_by\_queryで空いたストレージを利用したい](https://discuss.elastic.co/t/delete-by-query/252176)
**Author:** [@aurantiacus](https://discuss.elastic.co/u/aurantiacus)\ **Replies:** 2\ **Last updated:** [October 19, 2020, 8:12am UTC](https://discuss.elastic.co/t/delete-by-query/252176 "2020-10-19T08:12:08Z")
elasticsearch6.4.0 インデックスから条件に該当するデータを\_delete\_by\_queryで削除し削除して確保できるであろうストレージを利用したいと考えています。 実際に試したところ、\_delete\_by\_query実行前と実行後で kibana-\>Management-\> Index managementで参照できる インデックスのPrimary Storage Sizeが下がるものだと思っていましたが、変化… --- ## [【kibana5.6】DiscoverやVisualizeで、桁ぞろえの為に数値表示を右寄せしたい](https://discuss.elastic.co/t/kibana5-6-discover-visualize/251847)
**Author:** [@murata-ku](https://discuss.elastic.co/u/murata-ku)\ **Replies:** 2\ **Last updated:** [October 14, 2020, 12:08am UTC](https://discuss.elastic.co/t/kibana5-6-discover-visualize/251847 "2020-10-14T00:08:26Z")
掲題の件について公式ページや実機の設定画面を確認しましたが、設定方法が分からなかった為にこちらで問合せさせてください。 \<目的\> DiscoverやVisualizeで、数値を桁揃えで表示したい ＜背景＞ DiscoverやVisualizeの画面で、テーブル状に表示したレコードの一覧において、数値が左詰めになってしまい、ぱっと見で、数値の桁の違いがわかりづらいです。 WEBサイトなどに掲載されている画面を見ると、右付け表示さ… --- ## [Watcherの実装内容に関して](https://discuss.elastic.co/t/watcher/249760)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 4\ **Last updated:** [October 8, 2020, 12:30am UTC](https://discuss.elastic.co/t/watcher/249760 "2020-10-08T00:30:12Z")
※9/25 一部内容を変更しました。 お世話になります。 Watcherの実装に関して、質問させて頂きます。 ▼inputのindex ・A\_indexとB\_indexの紐づき項目は「tenantId」 ・tenantIdにaddressは一意 A\_index \_id tenantId eventid memo 1 001 111 test1 2 002 111 test2 B\_i… --- ## [Discoverの検索結果を上限サイズを超えてCSV出力したい](https://discuss.elastic.co/t/discover-csv/251061)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [October 6, 2020, 2:45am UTC](https://discuss.elastic.co/t/discover-csv/251061 "2020-10-06T02:45:41Z")
DIscoverの検索結果30000件程をCSV出力したいです。しかし、CSVの出力サイズでサポートされているのは最大50MBまでと制限があるため、Discover画面から出力しようとすると、その上限に引っかかってしまいます。50MBを超えるCSV出力を実施するためには何かいい方法は無いでしょうか？ --- ## [ダッシュボード上でPOSTリクエストを実行する方法](https://discuss.elastic.co/t/post/249923)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [September 30, 2020, 11:29am UTC](https://discuss.elastic.co/t/post/249923 "2020-09-30T11:29:00Z")
kibanaのダッシュボード上で、あるボタンを押すとPOSTリクエストを送信するような実装は可能かどうか、ご教示頂けないでしょうか？ボタンでなくても良いですが、もし可能であればダッシュボード上からPOSTリクエストを送信したいと思っております --- ## [Kibanaでの描画時に他のindexの内容を利用して集計する方法](https://discuss.elastic.co/t/kibana-index/249929)
**Author:** [@sck\_345](https://discuss.elastic.co/u/sck_345)\ **Replies:** 1\ **Last updated:** [September 30, 2020, 11:15am UTC](https://discuss.elastic.co/t/kibana-index/249929 "2020-09-30T11:15:16Z")
初心者のため、質問内容がおかしかったら申し訳ありません。 あるindexの内容を集計してグラフを描画したいのですが、 目標に対する割合を合わせてDataTableなどで描画したいと考えています。 indexA：生ログ indexB：indexAに含まれる項目ごとの目標値 indexA category | cost A1| 100 A2| 200 A1| 250 A3| 150 indexB category | cos… --- ## [Logstash http\_poller で 取得したデータのfilter方法について](https://discuss.elastic.co/t/logstash-http-poller-filter/248426)
**Author:** [@unisuke](https://discuss.elastic.co/u/unisuke)\ **Replies:** 5\ **Last updated:** [September 19, 2020, 2:46pm UTC](https://discuss.elastic.co/t/logstash-http-poller-filter/248426 "2020-09-19T14:46:20Z")
こんにちは。 http\_poller pluginで取得したデータをfilterしたいと思っています。 http\_pollerで得たデータは下記としまして、 "content" =\> \[ \[0\] { "AList" =\> \[ \[0\] { "name" =\> "X", }, \[1\] { "name" =\> "Y, } \], "… --- ## [【ダッシュボード】URLのリンクについて](https://discuss.elastic.co/t/url/247690)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [September 10, 2020, 8:20am UTC](https://discuss.elastic.co/t/url/247690 "2020-09-10T08:20:42Z")
お世話になります。 ダッシュボードの機能に関して、ご質問します。 ダッシュボードにて、Discoverで作成したindex項目一覧の掲載を検討しています。 index一覧に「WebサイトのURL」がある場合、URLを押下してWebサイトに遷移する方法はありますでしょうか？ （項目のtypeがStringだと実現出来ないと思いますが、何かしらのtypeを指定すれば実現出来ますでしょうか） 例)下記「WebURL」を押下するとgo… --- ## [【ingest node】JSON processor 配列のパース処理に関して](https://discuss.elastic.co/t/ingest-node-json-processor/246385)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 1\ **Last updated:** [September 10, 2020, 5:50am UTC](https://discuss.elastic.co/t/ingest-node-json-processor/246385 "2020-09-10T05:50:07Z")
お世話になります。 Ingest nodeのJSON processorに関して質問させて頂きます。 以下にてmessage("objects"の配列に"references"の配列がネストされている)のデータをJSON processorを使いパース処理を検証しています。 Simulate上、"references"は"json\_target.objects"の値となっていますが、 "json\_target.objects"と… --- ## [Azureでのクラスタ構成でスナップショットが作れない](https://discuss.elastic.co/t/azure/247833)
**Author:** [@rykon13](https://discuss.elastic.co/u/rykon13)\ **Replies:** 1\ **Last updated:** [September 9, 2020, 3:26am UTC](https://discuss.elastic.co/t/azure/247833 "2020-09-09T03:26:03Z")
Azure MarketplaceでElastic社が提供しているクラスタ構成でAzure上にデプロイしています。 (Masterノード3台、dateノード3台、Clientノード2台＋kibana) デプロイ完了後、バックアップ用にレポジトリを作成しようと思い、 全てのnodeにAzureとAWS S3用のプラグインを追加し、kibanaからレポジトリを作成しようとしたところ、エラーとなりました。 原因と対処、回避策などありま… --- ## [【ingest node】enrich processorに関して](https://discuss.elastic.co/t/ingest-node-enrich-processor/246571)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [August 31, 2020, 1:37am UTC](https://discuss.elastic.co/t/ingest-node-enrich-processor/246571 "2020-08-31T01:37:40Z")
お世話になります。 ingest nodeのenrich processorに関して、質問させて頂きます。 （下記問い合わせに関連したご質問になります。） ▼実現したいこと A indexの投入データの「A\_id」が"1111"の場合 ①C index 「A\_id」の値を条件に、「B\_id」の値(複数有)を取得 C index \_id A\_id B\_id 1 1111 aaaa 2 1111 b… --- ## [【Filebeat S3 input】JSONファイルの取込について](https://discuss.elastic.co/t/filebeat-s3-input-json/245729)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 1\ **Last updated:** [August 26, 2020, 2:21am UTC](https://discuss.elastic.co/t/filebeat-s3-input-json/245729 "2020-08-26T02:21:35Z")
お世話になります。 FilebeatのS3 inputを使用し、JSONファイルの取込を検証しています。 FilebeatのアウトプットはElasticSearchで、ingest node(JSON processor)を使用しindex登録します。 ▼filebeat.yml(抜粋) filebeat.inputs: type: s3 enabled: true queue\_url: XXXX access\_key… --- ## [Throttle filter pluginの動作のマニュアルとの違いについて](https://discuss.elastic.co/t/throttle-filter-plugin/245875)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 3\ **Last updated:** [August 24, 2020, 9:46am UTC](https://discuss.elastic.co/t/throttle-filter-plugin/245875 "2020-08-24T09:46:39Z")
お世話になります。 Throttle filter pluginの動作について教えてください。 以下のconfでlogstashを動作させています。 input { ～ } filter { ～ throttle { before\_count =\> -1 after\_count =\> 1 period =\> 60 max\_age =\> 120 key =\> "%{item}" … --- ## [【ingest node】別のindexのデータを登録する方法について](https://discuss.elastic.co/t/ingest-node-index/245375)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 4\ **Last updated:** [August 21, 2020, 6:25am UTC](https://discuss.elastic.co/t/ingest-node-index/245375 "2020-08-21T06:25:24Z")
お世話になります。 ingest node(またはLogstash等)にて、以下が実現できるかご教示をお願い致します。 ▼実現したいこと ・ingest nodeでA indexにデータ登録する際に、B indexのデータも併せて登録したい(B indexは予め登録しておく) ・A indexとB indexは共通のキー項目が存在しないため、C indexという紐づけindexを予め登録しておき参照した上で登録したい 例： … --- ## [Watcher webhookのレスポンスを元にメール通知](https://discuss.elastic.co/t/watcher-webhook/243322)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [August 20, 2020, 7:52am UTC](https://discuss.elastic.co/t/watcher-webhook/243322 "2020-08-20T07:52:23Z")
お世話になります。 Watcherのwebhookを利用して以下を実現したいのですが、実施可能でしょうか。 ①Watcher webhook actionにてリクエスト ②リクエスト処理が成功し、レスポンス値を取得 ③レスポンスで取得した値をメールの本文に設定し、メール通知 おそらく1回のwebhookのアクションで実現できないかと思っています。 その場合、②のレスポンス値をindexに登録することは可能でしょうか。 （i… --- ## [logstashのFile output pluginにおけるファイルロックについて](https://discuss.elastic.co/t/logstash-file-output-plugin/242689)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 4\ **Last updated:** [August 20, 2020, 4:50am UTC](https://discuss.elastic.co/t/logstash-file-output-plugin/242689 "2020-08-20T04:50:07Z")
お世話になります。 logstashのFile output pluginにおいて、ファイル出力中のファイルロックの仕様はどのようになっているのでしょうか？ （調べてみたものの、情報を見つけることができませんでした） 具体的にやろうとしていることは、Logstashで出力したファイルをシェルなどで定期的にgzipコマンドで圧縮して後続処理へ渡すようなことを考えております。 この際に、inputが不定期で行われるため、ファイル出力… --- ## [ダッシュボード表示時間のパフォーマンス向上について](https://discuss.elastic.co/t/topic/242682)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [August 19, 2020, 8:31am UTC](https://discuss.elastic.co/t/topic/242682 "2020-08-19T08:31:35Z")
以下のように、月毎にローテートするインデックスがあります。 XXXXXX-YYYY.MM このインデックスが全てマッチするように、「XXXXXX-\*」というインデックスパターンを作成し、そのインデックスパターンうぃインプットとしたDiscover及びダッシュボードを作成しています。 このような方式とした場合、蓄積した全てのデータを参照することになるので、時間が経ってデータ量が増えてくると、Discover及びダッシュボードのレスポ… --- ## [Warmノードの仕様について](https://discuss.elastic.co/t/warm/242679)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 1\ **Last updated:** [August 19, 2020, 8:13am UTC](https://discuss.elastic.co/t/warm/242679 "2020-08-19T08:13:15Z")
以下のように、一定時間経過するとWarmノードに移項するインデックスがあります。以下の例だと、172.20.209.6と172.30.40.128がwarmノードです。 ilm-test-001 0 p STARTED 2 4.2kb 172.20.210.97 instance-0000000022 ilm-test-001 … [Previous page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=3) [Next page](https://discuss.elastic.co/c/in-your-native-tongue/japanese/18.md?page=5)