.NET Core 2.1以上だと ProcessStartInfo.ArgumentList プロパティ が使えるようですが、.NET Framework 4.5 ではProcessStartInfo.Arguments プロパティのみのようなので、地道に処理するしかないようです。
ただし、こんな記事を見つけました。処理を作って公開してくれた人が居るようです。
Escaping an array of command-line arguments in C#
上記のGitHub
timbertson/csharp-quote-argv
日本でそのまま使えるかどうかは不明ですが、試してみても良いのでは?
使えるなら、MIT Licenseということなので、そのまま使うか参考にして自作するかはご自由に。