7

json 間の構造的な diff が取りたいです。これを実現する方法はありますか。

イメージとしては、 jsondiff a.json b.json とやると、 json の構造的な差分が出力されるようなツールです。(a.json, b.json はそれぞれ、単一の json オブジェクトからなるテキストファイル)

背景としては、2つの、 type 定義にそこそこの差異が発生している ES サーバー2つがあったときに (しかし、おそらく半分ぐらいの構造は一致している、、はず) 、その mapping の定義 (SQL でいう create 文の集合のようなもの) の差分を取得したい、がやりたいことです。
REST api をたたいて、それぞれから mapping 定義を json を取得した状態で、ここから差分を計算しようとしているのですが、いいツールがあるといいなと思いながら質問しています。


参考のために、 Elasticsearch から取得できる mapping 情報 json がどのようなものかというと、 公式サイト より例えば次のような形です。

{
  "mappings": {
    "user": {
      "_all":       { "enabled": false  },
      "properties": {
        "title":    { "type": "string"  },
        "name":     { "type": "string"  },
        "age":      { "type": "integer" }
      }
    },
    "blogpost": {
      "properties": {
        "title":    { "type": "string"  },
        "body":     { "type": "string"  },
        "user_id":  {
          "type":   "string",
          "index":  "not_analyzed"
        },
        "created":  {
          "type":   "date",
          "format": "strict_date_optional_time||epoch_millis"
        }
      }
    }
  }
}

2 件の回答 2

3

使えそうなツールがありました。どうでしょうか。

1
  • json-diff が、自分のほしいような動きをしていると確認しました。
    – Yuki Inoue
    Commented 2016年4月21日 6:27
1

jqコマンドでJSONを整形して、その差分をとるのはどうでしょうか。--sort-keys / -S フラグは任意ですが、オブジェクトのキーは揃えたほうが無難でしょう。

JSONを整形出力するコマンドは python -m json.tool でも代用できると思います。

#!/bin/bash
set -eu

json_pretty='jq . --sort-keys'

diff -u <($json_pretty $1) <($json_pretty $2)

実行例

$ jsondiff.sh a.json b.json
--- /dev/fd/63  2016-04-20 02:57:59.000000000 +0900
+++ /dev/fd/62  2016-04-20 02:57:59.000000000 +0900
@@ -2,7 +2,7 @@
   "mappings": {
     "user": {
       "_all": {
-        "enabled": false
+        "enabled": true
       },
       "properties": {
         "title": {
1
  • -S オプションに +1。しかし、これで試してみたのですが、 diff の計算上違う type (例でいうところの userblogpost) が違う場所に diff として発生したりなどしているので、やはり厳密な構造的な diff が取れるならとりたい、と思っている次第です。。(質問文を更新しました: 微妙に違っているのではなくって、割と違っていることが判明しました。。すいません。)
    – Yuki Inoue
    Commented 2016年4月20日 7:14

この質問に回答するには、ログインする必要があります。

求めていた回答ではありませんか? のタグが付いた他の質問を参照する。