I have a file with each field separated by |~|. I am new to GROK pattern. Can someone help me build a custom pattern to remove the |~|. Empty or Null values should not be removed while processing.
The data structure is something like below:
000|~||~|2019270|~|1041|~|
500|~|00001|~|99|~|2007065|~|N|~|C|~|0|~|0|~|D|~|0|~||~|N|~|0|~|R|~|0|~|0|~| |~|0|~|0|~| |~|1|~|Y|~| |~|0|~|0|~| |~|0|~|0|~|1|~|1|~|999999990|~|2780.00000|~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|.00|~|0|~|.00|~|0|~|0|~|0|~|D|~|0|~|N|~|0|~|N|~|0|~|N|~|0|~|N|~|REGULAR REVOLVING|~|N|~|0|~||~|0|~|Y|~|Y|~|1|~||~||~||~||~||~||~||~|B|~|1|~|F|~|1|~|X|~|1|~|F|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|REGULAR REVOLVING|~||~||~|.00|~||~||~||~||~||~|REGULIER|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|U|~|0|~||~||~|0|~|0|~| |~|0|~|
500|~|00002|~|99|~|2007065|~|N|~|C|~|0|~|0|~|D|~|0|~||~|N|~|0|~|R|~|0|~|0|~| |~|0|~|0|~| |~|1|~|Y|~| |~|0|~|0|~| |~|0|~|0|~|1|~|1|~|999999990|~|2780.00000|~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|.00|~|0|~|.00|~|0|~|0|~|0|~|D|~|0|~|N|~|0|~|N|~|0|~|N|~|0|~|N|~|REGULAR REVOLVING|~|N|~|0|~||~|0|~|Y|~|Y|~|2|~||~||~||~||~||~||~||~|B|~|1|~|F|~|1|~|X|~|1|~|F|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|REGULAR REVOLVING|~||~||~|.00|~||~||~||~||~||~|REGULIER|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|U|~|0|~||~||~|0|~|0|~| |~|0|~|
500|~|00003|~|99|~|2007065|~|Y|~|C|~|0|~|0|~|D|~|0|~||~|N|~|0|~|R|~|0|~|0|~| |~|0|~|0|~| |~|1|~|Y|~| |~|0|~|0|~| |~|0|~|0|~|1|~|1|~|999999990|~|2780.00000|~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|.00|~|0|~|.00|~|0|~|0|~|0|~|D|~|0|~|N|~|0|~|N|~|0|~|N|~|0|~|N|~|REGULAR REVOLVING|~|N|~|0|~||~|0|~|Y|~|Y|~|3|~||~||~||~||~||~||~||~|B|~|1|~|F|~|1|~|X|~|1|~|F|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|REGULAR REVOLVING|~||~||~|.00|~||~||~||~||~||~|REGULIER|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|U|~|0|~||~||~|0|~|0|~| |~|0|~|
500|~|00004|~|99|~|2007065|~|N|~|C|~|0|~|0|~|D|~|0|~||~|N|~|0|~|R|~|0|~|0|~| |~|0|~|0|~| |~|1|~|Y|~| |~|0|~|0|~| |~|0|~|0|~|1|~|1|~|999999990|~|2780.00000|~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~|999999990|~||~|P|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~||~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|0|~|.00|~|0|~|.00|~|0|~|0|~|0|~|D|~|0|~|N|~|0|~|N|~|0|~|N|~|0|~|N|~|REGULAR REVOLVING|~|N|~|0|~||~|0|~|Y|~|Y|~|4|~||~||~||~||~||~||~||~|B|~|1|~|F|~|1|~|X|~|1|~|F|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|REGULAR REVOLVING|~||~||~|.00|~||~||~||~||~||~|REGULIER|~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~||~|U|~|0|~||~||~|0|~|0|~| |~|0|~|