# 差分集計のグラフ化方法

**URL:** <https://discuss.elastic.co/t/topic/285204>\
**Category:** 日本語による質問・議論はこちら\
**Created:** [September 27, 2021, 8:25am UTC](https://discuss.elastic.co/t/topic/285204 "2021-09-27T08:25:10Z")\
**Posts on this page:** 6\
**Page:** 1

<div class="post-metadata">

**Author:** ![yuta.yokoyama](https://avatars.discourse-cdn.com/v4/letter/y/a5b964/32.png) [@yuta.yokoyama](https://discuss.elastic.co/u/yuta.yokoyama)\
**Post date:** [September 27, 2021, 8:25am UTC](https://discuss.elastic.co/t/topic/285204/1 "2021-09-27T08:25:10Z")

</div>

初めまして。  
初歩的な質問かもしれませんが、  
以下のようなJsonで登録し、エラーコード事に  
StartTimeとEndTime差分合計値をグラフ化したいと考えていますが、  
Kibanaで差分の合計を指定する方法がわかりません。  
どうすればよいでしょうか。

```auto
{
	"errorCode": "ERR0001",
	"Time": {
		"StartTime": "2021/06/29 00:59:57",
		"EndTime": "2021/06/29 01:00:25"
	}
}

```

---

<div class="post-metadata">

**Author:** ![tsgkdt](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/tsgkdt/32/39151_2.png) [@tsgkdt](https://discuss.elastic.co/u/tsgkdt)\
**Post date:** [September 27, 2021, 9:20am UTC](https://discuss.elastic.co/t/topic/285204/2 "2021-09-27T09:20:10Z")

</div>

こんにちわ  
まずは開始、終了の差分を求めるところから始めて試してみてはどうでしょうか。  
KibanaのScripted Fieldを使うと、Index時にはなかったフィールドを動的に求めることができるので、これを使うと確認できるのでは、と思いました。

参考） [Using Painless in Kibana scripted fields | Elastic Blog](https://www.elastic.co/jp/blog/using-painless-kibana-scripted-fields)

KibanaのStack Management -\> Index patterns で作成したIndex patternを選択すると、「Scripted Fields」が表示されているのが確認できます。  
Add scripted fieldボタンより新規作成を選択し、このように入力します。

 ![image](https://us1.discourse-cdn.com/elastic/original/3X/d/7/d7b419a762b388df86d5973c6ac41aecad7a1fa7.png)

Scriptと書かれたところは、このようになっています。

```auto
doc['Time.StartTime'].value.getSecond() - doc['Time.EndTime'].value.getSecond()

```

Scripted Field作成後に、KibanaのDiscoverで確認してみると、追加したdeltatimeというフィールドに、開始、終了時間の差分の秒数が表示されていることがわかります。

 ![image](https://us1.discourse-cdn.com/elastic/original/3X/3/1/31c3acb29840b2d3be7612ce6ba736eb82e9505c.png)

あとは、この追加したフィールドを使ってグラフ描画を行えばよいかと。

一例ですが、Kibana Lensであればこのような形で確認できるかと思います。

 ![image](https://us1.discourse-cdn.com/elastic/original/3X/a/c/acd1c68832c8243559859a553c877308a300f6de.png)

ご参考になれば幸いです。

---

<div class="post-metadata">

**Author:** ![yuta.yokoyama](https://avatars.discourse-cdn.com/v4/letter/y/a5b964/32.png) [@yuta.yokoyama](https://discuss.elastic.co/u/yuta.yokoyama)\
**Post date:** [September 27, 2021, 9:37am UTC](https://discuss.elastic.co/t/topic/285204/3 "2021-09-27T09:37:41Z")

</div>

tsgkdtさんありがとうございます。

できました。  
出来たのですが、エラーですが、実は配列になっており、正確には

```auto
{
	"Errors": [
		{
			"errorCode": "ERR0001",
			"Time": {
				"StartTime": "2021/06/29 00:59:57",
				"EndTime": "2021/06/29 01:00:25"
			}
		},
		{
			"errorCode": "ERR0002",
			"Time": {
				"StartTime": "2021/06/29 01:03:23",
				"EndTime": "2021/06/29 01:05:12"
			}
		}
	]
}

```

となっておりました。(後だしですみません。。。)

この状態でtsgkdtさんにご教示頂いた通り対応すると配列の1つ目のみの差分のみが出力となってしまいました。  
配列に対して、配列ごとに差分を出すというのはScriptでは難しいでしょうか。

---

<div class="post-metadata">

**Author:** ![tsgkdt](https://sea2.discourse-cdn.com/elastic/user_avatar/discuss.elastic.co/tsgkdt/32/39151_2.png) [@tsgkdt](https://discuss.elastic.co/u/tsgkdt)\
**Post date:** [September 27, 2021, 10:56am UTC](https://discuss.elastic.co/t/topic/285204/4 "2021-09-27T10:56:42Z")

</div>

配列になっている場合ですと、差分の時間を配列内に持たせることはできても、可視化するときに面倒になるかと思います。

このようなデータの形となったとしても・・・

```json
  "_source" : {
    "Errors" : [
      {
        "errorCode" : "ERR0001",
        "Time" : {
          "EndTime" : "2021/06/29 01:00:25",
          "StartTime" : "2021/06/29 00:59:57",
          "delta" : 32
        }
      },
      {
        "errorCode" : "ERR0002",
        "Time" : {
          "EndTime" : "2021/06/29 01:05:12",
          "StartTime" : "2021/06/29 01:03:23",
          "delta" : 11
        }
      }
    ]
  }

```

deltaのカウントの合計値をグラフにすると、32+11=43 となり、下記のようにどちらのエラーコードでも43件になってしまってます。

 ![image](https://us1.discourse-cdn.com/elastic/original/3X/1/8/1829f020e63d19cd371427933adc5ec60636444d.png)

１つのドキュメントのErrors以下に複数の情報が入っている構造だからかと思います。  
たとえば、Errorsの配列になっているところを１つ１つのドキュメントとして登録することは許されますでしょうか？  
それであれば、可視化の際もシンプルにできると思います。

ちなみにですが、上記のデータを作ったときはIngest Pipelineを使用しました。再現手順を書いておきます。

### Pilelineの設定

```auto
PUT _ingest/pipeline/deltafield_array
{
  "processors": [
    {
      "script": {
        "lang": "painless",
        "source": """
          DateTimeFormatter dtf = DateTimeFormatter.ofPattern("yyyy/MM/dd HH:mm:ss");
           for (def v: ctx.Errors) {
             def startTime = ZonedDateTime.parse(v.Time.StartTime, dtf.withZone(ZoneId.systemDefault()));
             def endTime = ZonedDateTime.parse(v["Time"]["EndTime"], dtf.withZone(ZoneId.systemDefault()));
            v.Time.delta = startTime.getSecond() - endTime.getSecond()
           }
        """
      }
    }
  ]
}

```

### データをPipelineを指定して登録

```auto
POST forum0927a/_doc/1?pipeline=deltafield_array
{

	"Errors": [
		{
			"errorCode": "ERR0001",
			"Time": {
				"StartTime": "2021/06/29 00:59:57",
				"EndTime": "2021/06/29 01:00:25"
			}
		},
		{
			"errorCode": "ERR0002",
			"Time": {
				"StartTime": "2021/06/29 01:03:23",
				"EndTime": "2021/06/29 01:05:12"
			}
		}
	]
}

```

### 登録後の確認

```auto
GET forum0927a/_doc/1

```

```auto
{
  "_index" : "forum0927a",
  "_id" : "1",
  "_version" : 4,
  "_seq_no" : 3,
  "_primary_term" : 1,
  "found" : true,
  "_source" : {
    "Errors" : [
      {
        "errorCode" : "ERR0001",
        "Time" : {
          "EndTime" : "2021/06/29 01:00:25",
          "StartTime" : "2021/06/29 00:59:57",
          "delta" : 32
        }
      },
      {
        "errorCode" : "ERR0002",
        "Time" : {
          "EndTime" : "2021/06/29 01:05:12",
          "StartTime" : "2021/06/29 01:03:23",
          "delta" : 11
        }
      }
    ]
  }
}

```

---

<div class="post-metadata">

**Author:** ![yuta.yokoyama](https://avatars.discourse-cdn.com/v4/letter/y/a5b964/32.png) [@yuta.yokoyama](https://discuss.elastic.co/u/yuta.yokoyama)\
**Post date:** [September 28, 2021, 12:32am UTC](https://discuss.elastic.co/t/topic/285204/5 "2021-09-28T00:32:28Z")

</div>

tsgkdtさん

ご教示いただきありがとうございます。  
なるほど、配列だと扱うのが面倒になりそうなんですね。

分割して登録できるか検討してみます。  
色々ありがとうございました。

---

<div class="post-metadata">

**Author:** ![system](https://us1.discourse-cdn.com/elastic/original/3X/1/a/1ac57faf039f6b580b3f104ef42a2a89e41014de.png) [@system](https://discuss.elastic.co/u/system)\
**Post date:** [October 26, 2021, 12:32am UTC](https://discuss.elastic.co/t/topic/285204/6 "2021-10-26T00:32:52Z")

</div>

This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.
