# Elastic In Your Native Tongue **URL:** https://discuss.elastic.co/c/in-your-native-tongue/11.md?page=26 [Latest](https://discuss.elastic.co/latest.md) · [Categories](https://discuss.elastic.co/categories.md) · [Tags](https://discuss.elastic.co/tags.md) **Page:** 27 --- ## [Logstash経由でのレコード転送が不完全に繰り返される](https://discuss.elastic.co/t/logstash/226507)
**Author:** [@sogaoh](https://discuss.elastic.co/u/sogaoh)\ **Replies:** 3\ **Last updated:** [April 14, 2020, 4:12pm UTC](https://discuss.elastic.co/t/logstash/226507 "2020-04-14T16:12:22Z")
と同一の以下環境で Logstash経由での400万件のレコード転送が240万件程しかされない という状況となっており、打開策を模索しています。 logstash:7.6.1 ( Docker ) AWS RDS (MySQL 5.7.12) AWS Elasticsearch (7.1) 同様の状況にご経験がある、あるいは何か効果的な対策が浮かぶ、等あれば ご提示いただけると大変ありがたいと思い、投稿する次第です。 よ… --- ## [Logstash S3 outputについて](https://discuss.elastic.co/t/logstash-s3-output/227441)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 0\ **Last updated:** [April 10, 2020, 5:53am UTC](https://discuss.elastic.co/t/logstash-s3-output/227441 "2020-04-10T05:53:04Z")
お世話になります。 LogstashのS3 outputについて質問させて頂きます。 下記confを記載したところエラーが発生しました。 「bucket =\> "%{bucket}"」の記載が問題だと思いますが、解決策分かりますでしょうか。 「validate\_credentials\_on\_root\_bucket =\> false」を設定無でも別のエラーが発生しました。 input { file{ pa… --- ## [Packetbeatの処理能力について](https://discuss.elastic.co/t/packetbeat/227281)
**Author:** [@gelgoog99](https://discuss.elastic.co/u/gelgoog99)\ **Replies:** 0\ **Last updated:** [April 9, 2020, 8:55am UTC](https://discuss.elastic.co/t/packetbeat/227281 "2020-04-09T08:55:36Z")
packetbeatですが、どれくらいのトラフィックを処理できるものなのでしょうか。 10Mbps なのか 100 なのか、それとももっといけるのか。 ただこのフォーラムをみていると、あまりさばけないという話も以前ありました。 環境によって異なるとは思いますが、こういった構成でこれくらいのトラフィックを捌いている、みたいな実績等あれば教えていただけないでしょうか。 --- ## [Donnée statique Kibana - Ajouter une valeur constante](https://discuss.elastic.co/t/donnee-statique-kibana-ajouter-une-valeur-constante/227066)
**Author:** [@QuentinRogeret](https://discuss.elastic.co/u/QuentinRogeret)\ **Replies:** 2\ **Last updated:** [April 8, 2020, 8:16am UTC](https://discuss.elastic.co/t/donnee-statique-kibana-ajouter-une-valeur-constante/227066 "2020-04-08T08:16:27Z")
Bonjour, Est-il possible de "figer" une valeur dans un visuel de Kibana ? Je fais des statistiques métiers dans un dashboard Kibana et j'aimerai pouvoir laisser afficher la moyenne globale quand je filtre sur un client… --- ## [Kibanaでのmacアドレス正規表現でのfilter or search](https://discuss.elastic.co/t/kibana-mac-filter-or-search/227035)
**Author:** [@snowman\_1114](https://discuss.elastic.co/u/snowman_1114)\ **Replies:** 0\ **Last updated:** [April 8, 2020, 12:47am UTC](https://discuss.elastic.co/t/kibana-mac-filter-or-search/227035 "2020-04-08T00:47:55Z")
LinuxのbashでMACアドレスを検索する時は \[0-9A-F\]\\{2\\}\\(-\[0-9A-F\]\\{2\\}\\)\\{5\\} を指定してgrep等していますが、kibanaのSearchの際には、検索窓にどのように書くとMACアドレスが検索できますか？(kibana-6.6.1を使用しています。) --- ## [Logstash pipeline에 복수개의 conf가 있는 경우 여러 인덱스에 모두 쌓이는 현상](https://discuss.elastic.co/t/logstash-pipeline-conf/225550)
**Author:** [@deep2eye](https://discuss.elastic.co/u/deep2eye)\ **Replies:** 1\ **Last updated:** [April 7, 2020, 1:18am UTC](https://discuss.elastic.co/t/logstash-pipeline-conf/225550 "2020-04-07T01:18:38Z")
안녕하세요. logstash에 아래와 같이 복수개의 설정을 등록하고 AAAA.json에 데이터를 넣으면 AAAA 인덱스와 BBBB 인덱스 모두에게 AAAA.json 데이터가 쌓입니다. 왜 이런걸까요? \[pipelines.yml\] - pipeline.id: AAAA path.config: "/etc/logstash/conf.d/AAAA.conf" queue.type: persis… --- ## [Elasticsearch Python index 함수 속도 증가](https://discuss.elastic.co/t/elasticsearch-python-index/226339)
**Author:** [@fbqweasd](https://discuss.elastic.co/u/fbqweasd)\ **Replies:** 1\ **Last updated:** [April 6, 2020, 11:09pm UTC](https://discuss.elastic.co/t/elasticsearch-python-index/226339 "2020-04-06T23:09:46Z")
Python elasticsearch 모듈을 사용하여 10분마다 방화벽 로그를 다른 elasticsearch 서버로 옮기고 있습니다. 10분동안 최소 15만개 이상의 데이터를 옮겨야 하는데 대략 1개의 데이터를 전송하는데 0.001944초가 소요됩니다. 데이터를 업로드하는데 걸리는 시간을 줄일 수 있나요..? 코드 : es.index( index='file… --- ## [Не корректно работает поиск с использованием Edge n-gram token filter](https://discuss.elastic.co/t/edge-n-gram-token-filter/226531)
**Author:** [@111311](https://discuss.elastic.co/u/111311)\ **Replies:** 9\ **Last updated:** [April 6, 2020, 7:01pm UTC](https://discuss.elastic.co/t/edge-n-gram-token-filter/226531 "2020-04-06T19:01:35Z")
Здравствуйте, нужна помощь в корректировке настроек поиска. Вкратце опишу проблему. Когда мы забиваем в поиск слово например "Приора" то помимо реальных документов где встречается слово приора вылетают такие документы г… --- ## [Elasticsearch update by query problem](https://discuss.elastic.co/t/elasticsearch-update-by-query-problem/226611)
**Author:** [@111306](https://discuss.elastic.co/u/111306)\ **Replies:** 1\ **Last updated:** [April 6, 2020, 9:42am UTC](https://discuss.elastic.co/t/elasticsearch-update-by-query-problem/226611 "2020-04-06T09:42:45Z")
遇到一个问题，我的 elasticsearch 版本是 7.6.1 ，使用的系统是 Debian 9 。我们在线上运行 elasticsearch 时，发现使用 update\_by\_query 接口发现有时并没有更新，但单个请求又是成功的。什么情况下会显示更新成功，但并没有发生更新呢？请问这个是什么问题，困扰很久了。 --- ## [Kibana canvas の Expression editor](https://discuss.elastic.co/t/kibana-canvas-expression-editor/226616)
**Author:** [@sshota](https://discuss.elastic.co/u/sshota)\ **Replies:** 0\ **Last updated:** [April 6, 2020, 5:22am UTC](https://discuss.elastic.co/t/kibana-canvas-expression-editor/226616 "2020-04-06T05:22:01Z")
お世話になります。 Kibana canvas の Markdownなどにおいて、 Expression editorを使って、値に応じて背景色を変えたり文字色を変えるなどを実現したいです。 下記discussの投稿や、function-referenceなどを参考にして、 とってきた数値データに応じて、とりあえず色を変えることなどは実現できました。 ただ、正式な文法や、何をどこに記載すればいいのかが全くわかっておらず、 … --- ## [Combiner plusieurs pipelines d'ingestion en parallèle et/ou en série](https://discuss.elastic.co/t/combiner-plusieurs-pipelines-dingestion-en-parallele-et-ou-en-serie/223710)
**Author:** [@oula\_oula](https://discuss.elastic.co/u/oula_oula)\ **Replies:** 3\ **Last updated:** [April 3, 2020, 3:45pm UTC](https://discuss.elastic.co/t/combiner-plusieurs-pipelines-dingestion-en-parallele-et-ou-en-serie/223710 "2020-04-03T15:45:22Z")
Salut, J'utilise des pipelines d'ingestions avec Filebeat pour traiter mes logs avant d'arriver dans Elasticsearch. Mes logs doivent passer par un pipeline spécifique (A ou B) selon les leurs provenances. J'arrive à le… --- ## [Mettre à jour / remplacer les données de l'index](https://discuss.elastic.co/t/mettre-a-jour-remplacer-les-donnees-de-lindex/223307)
**Author:** [@dbviz](https://discuss.elastic.co/u/dbviz)\ **Replies:** 7\ **Last updated:** [April 3, 2020, 3:40pm UTC](https://discuss.elastic.co/t/mettre-a-jour-remplacer-les-donnees-de-lindex/223307 "2020-04-03T15:40:09Z")
Bonjour, J'ai une entrée sous logstash par commande. La commande est programmée toutes les 5 minutes qui me renvoi des résultats anciens et de nouvelles données (avec des champs dates, user, webservice). Pour éviter le… --- ## [Kibana 構成情報のみスナップショット](https://discuss.elastic.co/t/kibana/226307)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 0\ **Last updated:** [April 3, 2020, 2:51am UTC](https://discuss.elastic.co/t/kibana/226307 "2020-04-03T02:51:03Z")
お世話になります。 Kibanaの構成情報(indexデータ以外)のスナップショットを取得する方法はありますでしょうか。 構成情報とは ・pipeline,template等のPUT APIでの設定値 ・indexpattern,visualize,dashboard.machine learning等の画面での設定値 ・ユーザー,ロールの設定値 など 質問の目的：Kibana(elasticseach)環境がエラーで使え… --- ## [Синхронизация данных между двумя хранилищами](https://discuss.elastic.co/t/topic/226198)
**Author:** [@111310](https://discuss.elastic.co/u/111310)\ **Replies:** 1\ **Last updated:** [April 2, 2020, 2:20pm UTC](https://discuss.elastic.co/t/topic/226198 "2020-04-02T14:20:26Z")
Есть сайт, основная БД - MYSQL, прикручиваю поиск по сущностям, которые часто обновляются и добавляются новые. Elastic получается как второе хранилище данных. Вопрос. как избежать неконсистентности данных? то есть, в my… --- ## [Elasticsearch.js where to set Index max\_result\_window?](https://discuss.elastic.co/t/elasticsearch-js-where-to-set-index-max-result-window/226185)
**Author:** [@820465323](https://discuss.elastic.co/u/820465323)\ **Replies:** 0\ **Last updated:** [April 2, 2020, 9:15am UTC](https://discuss.elastic.co/t/elasticsearch-js-where-to-set-index-max-result-window/226185 "2020-04-02T09:15:46Z")
因为在elasticsearch.js我找不到可以设置的地方 --- ## [Reconnaissance d'objet geo dans elasticsearch](https://discuss.elastic.co/t/reconnaissance-dobjet-geo-dans-elasticsearch/225478)
**Author:** [@Jalil](https://discuss.elastic.co/u/Jalil)\ **Replies:** 5\ **Last updated:** [March 30, 2020, 1:20pm UTC](https://discuss.elastic.co/t/reconnaissance-dobjet-geo-dans-elasticsearch/225478 "2020-03-30T13:20:33Z")
Bonjour, Mon objectif est d'indexer une collection depuis mongodb vers ES afin d'exploiter les points geo sur la MAP kibana. J'utilise mongo-connector. Ma collection mongodb contient entre autre un objet comme suit : "… --- ## [Аггрегации с нулевыми полями](https://discuss.elastic.co/t/topic/225397)
**Author:** [@Ekaterina\_Nekrasova](https://discuss.elastic.co/u/Ekaterina_Nekrasova)\ **Replies:** 2\ **Last updated:** [March 30, 2020, 10:56am UTC](https://discuss.elastic.co/t/topic/225397 "2020-03-30T10:56:47Z")
Всем привет ! у меня есть тип Person, в котором есть поле GroupId, которое может быть заполненно , может быть нулевым, а так же может даже не существовать, { Id: 1 Name : TоTo, GroupId: 1 } { Id: 2 Name : TaTo, GroupId… --- ## [Как правильно распределить входящие сообщения в Logstash?](https://discuss.elastic.co/t/logstash/225336)
**Author:** [@mshlmv](https://discuss.elastic.co/u/mshlmv)\ **Replies:** 1\ **Last updated:** [March 29, 2020, 8:18pm UTC](https://discuss.elastic.co/t/logstash/225336 "2020-03-29T20:18:19Z")
Планируется направить в Elasticsearch логи с разных систем, по syslog, filebeat и т.д. По syslog или по tcp отправляют разные системы с разными форматами логов. Как правильно распределить эти потоки по разным фильтрам … --- ## [Eshead 访问es](https://discuss.elastic.co/t/eshead-es/225482)
**Author:** [@qwer\_123](https://discuss.elastic.co/u/qwer_123)\ **Replies:** 0\ **Last updated:** [March 28, 2020, 10:10am UTC](https://discuss.elastic.co/t/eshead-es/225482 "2020-03-28T10:10:46Z")
阿里云部署es eshead无法链接到es \_stats报错 设置过可跨域 具体错误信息 {"error":{"root\_cause":\[{"type":"cluster\_block\_exception","reason":"blocked by: \[SERVICE\_UNAVAILABLE/1/state not recovered / initialized\];"}\],"type":"cluster\_block\_except… --- ## [RDS -\> (Logstash) -\> Elasticsearch の取り込みができない](https://discuss.elastic.co/t/rds-logstash-elasticsearch/225406)
**Author:** [@sogaoh](https://discuss.elastic.co/u/sogaoh)\ **Replies:** 1\ **Last updated:** [March 27, 2020, 3:11pm UTC](https://discuss.elastic.co/t/rds-logstash-elasticsearch/225406 "2020-03-27T15:11:49Z")
バージョン： logstash:7.6.1 ( https://hub.docker.com/\_/logstash?tab=tags ) Logstash Pipeline を利用した AWS RDS (MySQL 5.7.12) からの AWS Elasticsearch(7.1) へのデータ流し込みでつまづいてしまっています。 おそらく該当のテーブルに geometry型のカラムがあるためではないかと思い、以下２点を試したので… --- ## [Audit partage de fichier](https://discuss.elastic.co/t/audit-partage-de-fichier/224389)
**Author:** [@david\_oliver](https://discuss.elastic.co/u/david_oliver)\ **Replies:** 8\ **Last updated:** [March 20, 2020, 4:23pm UTC](https://discuss.elastic.co/t/audit-partage-de-fichier/224389 "2020-03-20T16:23:13Z")
Bonjour, J'ai un serveur de fichier j aimerai auditer qui a fais quoi : ajout, modification et suppression. j ai activé les audits file system et file share, je recois bien les log dans kibana avec winlogbeat et elasti… --- ## [Filebeatで作成されるインデックスについて](https://discuss.elastic.co/t/filebeat/224017)
**Author:** [@111142](https://discuss.elastic.co/u/111142)\ **Replies:** 4\ **Last updated:** [March 19, 2020, 3:00am UTC](https://discuss.elastic.co/t/filebeat/224017 "2020-03-19T03:00:36Z")
filebeatの設定を下記のように行いモジュールごとにインデックスを分けてログを取り込んでいます。 output.elasticsearch: hosts: \["localhost:9200"\] indices: - index: "paloalto-%{+yyyy.MM.dd}" when.equals: event.module: "panw" - index: "elasti… --- ## [Правильная конфигурация кластера](https://discuss.elastic.co/t/topic/224144)
**Author:** [@vmatviichuk](https://discuss.elastic.co/u/vmatviichuk)\ **Replies:** 1\ **Last updated:** [March 18, 2020, 6:30pm UTC](https://discuss.elastic.co/t/topic/224144 "2020-03-18T18:30:06Z")
Всем привет. Имеется кластер elasticsearch с 9 дата нодами и 3 мастер ноды. Все они крутятся в кубернетесе. Последнее время начались проблемы с производительностью. имеется данных порядка 5 терабайт. Мой вопрос, как … --- ## [Logstashのoutputをsyslogに設定時にエラー](https://discuss.elastic.co/t/logstash-output-syslog/224066)
**Author:** [@t-nakata](https://discuss.elastic.co/u/t-nakata)\ **Replies:** 0\ **Last updated:** [March 18, 2020, 10:13am UTC](https://discuss.elastic.co/t/logstash-output-syslog/224066 "2020-03-18T10:13:03Z")
logstashにて、outputをsyslogにした際に以下のエラーが発生しました。 原因についてご教示頂けないでしょうか ■confファイル内容 input { file{ path =\> "/XXX/test.log" start\_position =\> "beginning" } } output{ syslog{ host =\> "XXXXXX.co… --- ## [Machine learning et valeurs nulles](https://discuss.elastic.co/t/machine-learning-et-valeurs-nulles/223984)
**Author:** [@rbeg](https://discuss.elastic.co/u/rbeg)\ **Replies:** 3\ **Last updated:** [March 18, 2020, 8:33am UTC](https://discuss.elastic.co/t/machine-learning-et-valeurs-nulles/223984 "2020-03-18T08:33:27Z")
Bonjour, J'utilise Machine Learning pour remonter des alertes lorsque des courbes de trafic web sont anormales. Par exemple s'il y a trop de trafic ou pas assez. Je fait pour ça la somme (count) du nombre de connexions… --- ## [Ingest node 登録データと複数項目の突合せについて](https://discuss.elastic.co/t/ingest-node/223859)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 0\ **Last updated:** [March 17, 2020, 7:21am UTC](https://discuss.elastic.co/t/ingest-node/223859 "2020-03-17T07:21:48Z")
お世話になります。 下記質問の投稿が説明不足であったため、再度投稿させて頂きます。 ▼実現したいこと ingest nodeにて、インプットデータとindexA(下記参照)のデータを突き合わせて、突合せ結果をindexBに登録 indexAの例 ID,IP 100,10.169.1.1 インプットデータとindexAとの突合せ条件 ・IDが"100"かつIPが"10.169.1.1"の場合、indexBに"true"を… --- ## [Aide sur mon projet de fin d'étude](https://discuss.elastic.co/t/aide-sur-mon-projet-de-fin-detude/223422)
**Author:** [@oussaifi-majdi](https://discuss.elastic.co/u/oussaifi-majdi)\ **Replies:** 1\ **Last updated:** [March 16, 2020, 2:22pm UTC](https://discuss.elastic.co/t/aide-sur-mon-projet-de-fin-detude/223422 "2020-03-16T14:22:36Z")
j'ai un projet de fin d'étude sur l'integration de moteur de recherche dans une application gestion d'achat developer par spring boot pour rechercher des documents et des actions exemple : -rechercher une facture 456 -… --- ## [Visualize 棒グラフのカウントについて](https://discuss.elastic.co/t/visualize/223687)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 0\ **Last updated:** [March 16, 2020, 5:12am UTC](https://discuss.elastic.co/t/visualize/223687 "2020-03-16T05:12:04Z")
お世話になります。 Visualizeのbar chart(横棒グラフ)について質問させて頂きます。 ▼bar chartの設定値 ▼質問事項 上記設定値にて、下記のようにrequestのデータを配列（同値が2件）とすると、 Y軸のカウントは1件で表示されます。 "request": \["http://aaa.com/","http://aaa.com/"\] 配列の各要素が同値であっても、各要素ずつカウント(上記例では… --- ## [Visualize 積み上げ縦棒グラフの作成方法](https://discuss.elastic.co/t/visualize/223279)
**Author:** [@harue](https://discuss.elastic.co/u/harue)\ **Replies:** 2\ **Last updated:** [March 16, 2020, 4:54am UTC](https://discuss.elastic.co/t/visualize/223279 "2020-03-16T04:54:17Z")
お世話になります。 Visualizeのbar chartsにて積み上げ縦棒グラフを作成したいのですが、 公式ドキュメント、discussを参照したところ作成方法が見つかりません。 bar chartsの作成方法について、ご教示お願い致します。 ▼イメージ id毎に月毎の件数を積み上げ表示 --- ## [Поиск пересечений по нескольким параметрам](https://discuss.elastic.co/t/topic/223294)
**Author:** [@coolmac](https://discuss.elastic.co/u/coolmac)\ **Replies:** 5\ **Last updated:** [March 13, 2020, 10:36pm UTC](https://discuss.elastic.co/t/topic/223294 "2020-03-13T22:36:47Z")
Всем привет, есть такая задача по работе с Kibana и логами apache. Есть основной параметр: destination.domain Необходимо найти совпадения по трем параметрам, к примеру: source.geo.region\_name source.as.organization.n… [Previous page](https://discuss.elastic.co/c/in-your-native-tongue/11.md?page=25) [Next page](https://discuss.elastic.co/c/in-your-native-tongue/11.md?page=27)