Olá a todos. Estamos iniciando o uso da elastic. Estou precisando saber como faço para fazer a exclusão de um index no elasticsearch, porém, via logstash, e após fazer a nova carga das informações. Caso não seja possível, como faço para deixar o elasticsearch sincronizado com o bd que uso para que cada alteração feita no bd, seja feita a atualização no index. Percebi que quando tenho informações no elasticsearch e quando no bd o usuário faz a exclusão dessa informação e insere um nova informação, no index só é feita a adição da nova informação, mas não a exclusão. Isso acarreta em dados imprecisos, visto que não é a realidade dos dados do bd. Grato.
Não é possível excluir um índice usando o logstash.
Quanto a manter sincronizado, depende de como você tá fazendo a ingestão, você teria que usar o mesmo identificador do banco como _id no elasticsearch, isso é feito utilizando a opção document_id no output pro elasticsearch, você teria que usar o campo de id nessa opção.
exemplo:
document_id => "%{id_no_db}"
É preciso configurar o logstash pra atualizar o documento no elastic também. Consegue compartilhar a configuração do pipeline que você tá usando?
ps: can a moderator move this post to the correct forum? Elasticsearch em Português - Brasil.
This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.