Exclusão de Index no elasticsearch via logstash

Olá a todos. Estamos iniciando o uso da elastic. Estou precisando saber como faço para fazer a exclusão de um index no elasticsearch, porém, via logstash, e após fazer a nova carga das informações. Caso não seja possível, como faço para deixar o elasticsearch sincronizado com o bd que uso para que cada alteração feita no bd, seja feita a atualização no index. Percebi que quando tenho informações no elasticsearch e quando no bd o usuário faz a exclusão dessa informação e insere um nova informação, no index só é feita a adição da nova informação, mas não a exclusão. Isso acarreta em dados imprecisos, visto que não é a realidade dos dados do bd. Grato.

Não é possível excluir um índice usando o logstash.

Quanto a manter sincronizado, depende de como você tá fazendo a ingestão, você teria que usar o mesmo identificador do banco como _id no elasticsearch, isso é feito utilizando a opção document_id no output pro elasticsearch, você teria que usar o campo de id nessa opção.

exemplo:

document_id => "%{id_no_db}"

É preciso configurar o logstash pra atualizar o documento no elastic também. Consegue compartilhar a configuração do pipeline que você tá usando?

ps: can a moderator move this post to the correct forum? Elasticsearch em Português - Brasil.

This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.