안녕하세요?
현재 filebeat - logstash -elasticsearch 까지 특정 데이터 파일을 읽어와서 e/s에 저장하는건 문제가 없는데,
우연히 logstash-plain.log 데이터를 살펴보니 주기적으로 아래와 같은 오류가 기록되고 있었습니다. ( 30초에 한번씩은 기록되는 것 같아요)
현재 var/lib/logstash/queue directory의 permission을 보면
drwxr-xr-x 이렇게 유저에게 w 권한이 열려있는데 왜 이런 오류가 발생하는 걸까요??
아래 오류에 대해 구글링을 해보면 대부분 파이프라인 어딘가가 정상적으로 작동하지 않고 로그데이터가 ES 자체에 올라가지 못하면서 해당 에러가 나타나는 경우가 많은데 제 경우에는 ES는 너무나 정상적으로 데이터가 올라가는데 로그 파일에 이런 에러가 나타나서 어떻게 해결해야할지 모르겠습니다.
[2018-08-28T00:00:40,244][ERROR][org.logstash.Logstash ] java.lang.IllegalStateException: Logstash stopped processing because of an error: (SystemExit) exit
[2018-08-28T00:01:07,760][FATAL][logstash.runner ] An unexpected error occurred! {:error=>#<ArgumentError: Path "/var/lib/logstash/queue" must be a writable directory. It is not writable.>, :backtrace=>["/usr/share/logstash/logstash-core/lib/logstash/settings.rb:448:in validate'", "/usr/share/logstash/logstash-core/lib/logstash/settings.rb:230:in validate_value'", "/usr/share/logstash/logstash-core/lib/logstash/settings.rb:141:in block in validate_all'", "org/jruby/RubyHash.java:1343:in each'", "/usr/share/logstash/logstash-core/lib/logstash/settings.rb:140:in validate_all'", "/usr/share/logstash/logstash-core/lib/logstash/runner.rb:279:in execute'", "/usr/share/logstash/vendor/bundle/jruby/2.3.0/gems/clamp-0.6.5/lib/clamp/command.rb:67:in run'", "/usr/share/logstash/logstash-core/lib/logstash/runner.rb:238:in run'", "/usr/share/logstash/vendor/bundle/jruby/2.3.0/gems/clamp-0.6.5/lib/clamp/command.rb:132:in run'", "/usr/share/logstash/lib/bootstrap/environment.rb:73:in '"]}