# Requête pour filter les mêmes messages dans différentes indices d'un même index (Kibana Dashboard))

**URL:** <https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123>\
**Category:** Discussions en français\
**Created:** [May 16, 2018, 12:39pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123 "2018-05-16T12:39:48Z")\
**Posts on this page:** 8\
**Page:** 1

<div class="post-metadata">

**Author:** ![alicia1](https://avatars.discourse-cdn.com/v4/letter/a/48db29/32.png) [@alicia1](https://discuss.elastic.co/u/alicia1)\
**Post date:** [May 16, 2018, 12:39pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/1 "2018-05-16T12:39:48Z")

</div>

Bonjour,

Dans kibana, j'ai plusieurs indices d'un même index, exemple: Index1\_date1, Index1\_date2 et Index\_daten, un même message de log peut retrouver dans une ou plusieurs indices différentes,  
je souhaite filter ces messages redondants et affichier uniquement de nouveaux messages dans kibana et créer un Dashboard qui nous donne le nombre de nouveaux messages entrants par jour.

Savez vous comment faire cela?

Merci.

---

<div class="post-metadata">

**Author:** ![Charaf\_Ahmed](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/charaf_ahmed/32/30467_2.png) [@Charaf\_Ahmed](https://discuss.elastic.co/u/Charaf_Ahmed)\
**Post date:** [May 16, 2018, 2:28pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/2 "2018-05-16T14:28:05Z")

</div>

Cela vous pouvez le gerer directement dans Kibana. Dans l'option tout en haut à droite, ( Time Range ), vous pourvez selectionner d'afficher seulement les activités journalier en choisissant le bon index ( log-\* )

---

<div class="post-metadata">

**Author:** ![alicia1](https://avatars.discourse-cdn.com/v4/letter/a/48db29/32.png) [@alicia1](https://discuss.elastic.co/u/alicia1)\
**Post date:** [May 16, 2018, 2:45pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/3 "2018-05-16T14:45:11Z")

</div>

Merci @Charaf_Ahmed.

Au fait, j'ai des messages en doublon dans des indices (car un même message peut apparaître plusieurs fois dans des différents fichiers de logs qui revient tous les jours).

Je souhaite dans kibana filter les messages en doublon afin qu'un même message n'appaître qu'une seule fois dans la vue.

cela serait-il possible avec une requête Lucene?

Merci.

---

<div class="post-metadata">

**Author:** ![Charaf\_Ahmed](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/charaf_ahmed/32/30467_2.png) [@Charaf\_Ahmed](https://discuss.elastic.co/u/Charaf_Ahmed)\
**Post date:** [May 16, 2018, 2:50pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/4 "2018-05-16T14:50:17Z")

</div>

umm-hum je comprends bien ta question mais malheureusement ça depasse mon niveau.  
Desolé

---

<div class="post-metadata">

**Author:** ![dadoonet](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/dadoonet/32/137187_2.png) [@dadoonet](https://discuss.elastic.co/u/dadoonet)\
**Post date:** [May 16, 2018, 4:08pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/5 "2018-05-16T16:08:29Z")

</div>

Non.

Il faut évite les doublons par un traitement avant d'injecter.

---

<div class="post-metadata">

**Author:** ![alicia1](https://avatars.discourse-cdn.com/v4/letter/a/48db29/32.png) [@alicia1](https://discuss.elastic.co/u/alicia1)\
**Post date:** [May 16, 2018, 4:12pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/6 "2018-05-16T16:12:48Z")

</div>

Merci @dadoonet.

Dans logstash? As tu un exemple de config logstash pour faire cela en amont?

Merci.

---

<div class="post-metadata">

**Author:** ![dadoonet](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/dadoonet/32/137187_2.png) [@dadoonet](https://discuss.elastic.co/u/dadoonet)\
**Post date:** [May 16, 2018, 4:35pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/7 "2018-05-16T16:35:53Z")

</div>

Non mais dans l'idée tu peux générer un fingerprint de ton document et utiliser cette valeur comme id de document. Ainsi dès que tu as un doublon il sera juste écrasé.

---

<div class="post-metadata">

**Author:** ![system](https://us1.discourse-cdn.com/elastic/original/3X/1/a/1ac57faf039f6b580b3f104ef42a2a89e41014de.png) [@system](https://discuss.elastic.co/u/system)\
**Post date:** [June 13, 2018, 4:36pm UTC](https://discuss.elastic.co/t/requete-pour-filter-les-memes-messages-dans-differentes-indices-dun-meme-index-kibana-dashboard/132123/8 "2018-06-13T16:36:02Z")

</div>

This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.
