Skip to main content
3 / 3
本文から 5 文字削除
user avatar
user avatar

他に方法ありますでしょうか。

当該 URL の中身(HTML ソースコード)を見ますと、window.PROPS に JSON 形式でコンテンツが格納されている事が分かります。

  <script>
    window.PROPS = {"template":{"mastHead":...
  </script>

これをパースするのに wget + GNU grep + jq を使います。

$ wget -qO - https://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q13164627148 |
  grep -m1 -Po '^[ \t]*window.PROPS = \K.*$' |
  jq -r '
    "質問\n\(.preloadedState.question.questionText)\n",
    (
      .preloadedState.bestAnswer.answerItem.answerText as $best |
      select($best) | "ベストアンサー\n\($best)\n"
    ),
    .preloadedState.answer.answers as $ans |
      reduce range($ans|length) as $i("";.+"回答\($i+1)\n\($ans[$i].answerText)\n\n")
  '

質問
SNSデータをクローリング(webスクレイピング)するにはpython,rubyどちらがいいか


ベストアンサー
どちらでも可能ですし結果に大した違いもないでしょう。

お好きな方でどうぞ、としか...

次の例はベストアンサー以外の回答がある場合です。

$ wget -qO - https://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q13165913528 |
  grep -m1 -Po '^[ \t]*window.PROPS = \K.*$' |
  jq -r '
    "質問\n\(.preloadedState.question.questionText)\n",
    (
      .preloadedState.bestAnswer.answerItem.answerText as $best |
      select($best) | "ベストアンサー\n\($best)\n"
    ),
    .preloadedState.answer.answers as $ans |
      reduce range($ans|length) as $i("";.+"回答\($i+1)\n\($ans[$i].answerText)\n\n")
  '

質問
1番開発しやすいプログラム言語はなんだと思いますか?(C++は勉強していますが初心者です。)


ベストアンサー
言語の仕様、開発環境ソフトの優秀さ、開発効率の高さ、ユーザーの多さ、ライブラリの豊富さ、書籍の多さ、作れるアソフトの範囲、等のバランスによって、トータル的に比較されるべきかと。
                              :

回答1
こういうのって、人によると思います。
                              :

回答2
個人的には
                              :

回答3
こういうのは、現時点で「開発しにくいプ
                              :

回答4
>1番開発しやすいプログラム言語
                              :

回答5
Windows環境でデスクトップアプリケーションならC#かな?
                              :

この質問では14件の回答が投稿されているのですが、最初の5件のみが表示されます。これはページングが設定されているためで、次のページを示す query string(page=n) を URL に指定すれば残りの回答も取得することが可能です。

処理としては JSON テキストのパースですから Python でもできるかと思います。

user39889