自己レスですが、この現象が同じことなのかと思われます。
http://stackoverflow.com/questions/14034107/does-javascript-setinterval-method-cause-memory-leakhttps://stackoverflow.com/questions/14034107/does-javascript-setinterval-method-cause-memory-leak
リークしているわけではなく、現状そういう仕様である、というのが答えなのかもしれません。