2

ブラウザ上で動作する、多言語向けのニューラル機械翻訳を実装したいと思っています。
一般的な実装方法であればGoogleAPIにキーワードを渡して翻訳結果を受け取るものと思いますが、
事情により通信を介しての翻訳ができません。
そこで、下記手段により実現できないかどうかを考えております。

  • 外部で学習したモデルをTensorflow.js用の形式に変換
  • Tensorflow.jsで上記モデルを呼び出し
  • キーワードをモデルに渡して翻訳結果を得る

実施したこと
学習済みモデルを入手し、tensorflowjs converterでTensorflow.js用に変換する
翻訳に利用できそうなモデルを2つ確認しました。

いずれもtensorflowjs converterでの変換は失敗しました。

!tensorflowjs_converter --input_format tf_hub --signature_name serving_default 'https://tfhub.dev/google/LaBSE/1' ./my_tfjs_model

Traceback (most recent call last):
  File "/usr/local/bin/tensorflowjs_converter", line 8, in <module>
    sys.exit(pip_main())
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/converter.py", line 735, in pip_main
    main([' '.join(sys.argv[1:])])
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/converter.py", line 739, in main
    convert(argv[0].split(' '))
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/converter.py", line 692, in convert
    control_flow_v2=args.control_flow_v2)
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/tf_saved_model_conversion_v2.py", line 661, in convert_tf_hub_module
    control_flow_v2=control_flow_v2)
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/tf_saved_model_conversion_v2.py", line 494, in convert_tf_saved_model
    weight_shard_size_bytes=weight_shard_size_bytes)
  File "/usr/local/lib/python3.6/dist-packages/tensorflowjs/converters/tf_saved_model_conversion_v2.py", line 143, in optimize_graph
    ', '.join(unsupported))
ValueError: Unsupported Ops in the model before optimization
StatefulPartitionedCall
import tensorflowjs as tfjs 

module_url = 'https://tfhub.dev/google/universal-sentence-encoder-multilingual/3' 
model = hub.load(module_url)

tfjs.converters.save_keras_model(model, 'tfjs', quantization_dtype_map=np.uint8)

    338   """
    339   temp_h5_path = tempfile.mktemp() + '.h5'
--> 340   model.save(temp_h5_path)
    341   topology_json, weight_groups = (
    342       h5_merged_saved_model_to_tfjs_format(temp_h5_path))

AttributeError: '_UserObject' object has no attribute 'save'

上記のとおり、実装の前段階のモデルの入手がうまくいっておりません。
ニューラル機械翻訳の事例すらほとんど見つけられていません。

バージョン

TensorFlow:2.2.0
Tensorflowjs: 2.0.1.post1

解決したいこと

  • ブラウザ上で利用可能な、学習モデルを入手したいです。
5
  • タイトルは作ろうとしているものではなく、実際に起きているエラーに焦点を絞ったものにした方が回答が付きやすいかもしれません。
    – cubick
    2020年7月25日 7:44
  • アドバイスありがとうございます。タイトル修正しました。
    – deigo
    2020年7月25日 10:30
  • TensorFlow.js converter のバージョンは分かりますか? 参考: github.com/tensorflow/tfjs/issues/3582
    – nekketsuuu
    2020年7月25日 13:45
  • TensorFlow.jsのバージョン追記しました。
    – deigo
    2020年7月25日 17:07
  • バージョンは充分新しいように見えるので、まだ解決法を調べていませんが、最近の issue である github.com/tensorflow/tfjs/issues/3582github.com/tensorflow/tfjs/issues/3601 と同根かもですね……。
    – nekketsuuu
    2020年7月25日 17:13

0

この質問に回答するには、ログインする必要があります。

のタグが付いた他の質問を参照する。