現在mesh-tensorflowと複数GPUを搭載したマシン用いてCNNのモデル並列学習をやってみようと思っているのですが、
モデルを何個に分割するかを設定するパラメータはあるのですが、
どのように分割するか(例えば層ごとや入力から出力と並行に分割など)を設定する、
もしくはどのように分割したかを確認する方法をご存じの方がいらっしゃったら教えて頂きたいです。
コメント追加
|
スタック・オーバーフローはプログラマーとプログラミングに熱心な人のためのQ&Aサイトです。すぐ登録できます。
登録してこのコミュニティに参加する現在mesh-tensorflowと複数GPUを搭載したマシン用いてCNNのモデル並列学習をやってみようと思っているのですが、
モデルを何個に分割するかを設定するパラメータはあるのですが、
どのように分割するか(例えば層ごとや入力から出力と並行に分割など)を設定する、
もしくはどのように分割したかを確認する方法をご存じの方がいらっしゃったら教えて頂きたいです。