LogstashのSQS input Pluginを使用してS3からファイルを取得する方法

以下のような構成で、LogstashのSQS input Pluginを使用してS3ストレージからファイルを取得したいです。

<構成>
S3 -> SQS <- Logstash

<実現方式案>
① S3ストレージにファイルを配置
② ファイル配置を契機に、S3→SQSにイベント送信
③ LogstashはSQSをinputとし、SQSにキューイングされている順番でS3に格納されているファイルを取得する

上記実現方式を考えていたのですが、実際動かしてみたところ、LogstashのSQS input Pluginは、ファイルの実体ではなく、SQSにキューイングされているイベント情報(S3バゲット名、オブジェクト名等)を取得するプラグインだと認識しております。

LogstashのSQS input Pluginを使用し、S3ストレージからファイルを取得する方法はありますでしょうか?
(例えば、SQS input Pluginでファイル名を取得し、そのファイル名を持ってS3 input Pluginを使用してS3から対象のファイルを取得する等)

This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.