$ wget -qO - https://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q13164627148 |
grep -m1 -Po '^[ \t]*window.PROPS = \K.*$' |
jq -r '
"質問\n"+\(.preloadedState.question.questionText)\n",
(
.preloadedState.bestAnswer.answerItem.answerText as $best |
select($best) | "回答ベストアンサー\n\($best)\n"+;
),
.preloadedState.bestAnsweranswer.answerItemanswers as $ans |
reduce range($ans|length) as $i("";.+"回答\($i+1)\n\($ans[$i].answerText)\n\n")
'
質問
SNSデータをクローリング(webスクレイピング)するにはpython,rubyどちらがいいか
回答
ベストアンサー
どちらでも可能ですし結果に大した違いもないでしょう。
お好きな方でどうぞ、としか...
回答次の例はベストアンサーのみになります。また、ベストアンサー以外の回答がないある場合です。
$ wget -qO - https://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q13165913528 |
grep -m1 -Po '^[ \t]*window.PROPS = \K.*$' |
jq -r '
"質問\n\(.preloadedState.question.questionText)\n",
(
.preloadedState.bestAnswer.answerItem.answerText as $best |
select($best) | "ベストアンサー\n\($best)\n"
),
.preloadedState.answer.answers as $ans |
reduce range($ans|length) as $i("";.+"回答\($i+1)\n\($ans[$i].answerText)\n\n")
' | l
質問
1番開発しやすいプログラム言語はなんだと思いますか?(C++は勉強していますが初心者です。)
ベストアンサー
言語の仕様、開発環境ソフトの優秀さ、開発効率の高さ、ユーザーの多さ、ライブラリの豊富さ、書籍の多さ、作れるアソフトの範囲、等のバランスによって、トータル的に比較されるべきかと。
:
回答1
こういうのって、人によると思います。
:
回答2
個人的には
:
回答3
こういうのは、現時点で「開発しにくいプ
:
回答4
>1番開発しやすいプログラム言語
:
回答5
Windows環境でデスクトップアプリケーションならC#かな?
:
この質問では14件の回答が投稿されているの部分ですが空白になり、最初の5件のみが表示されます。処理これはページングが設定されているためで、次のページを示す query string(page=n
) を URL に指定すれば残りの回答も取得することが可能です。
処理としては JSON テキストのパースですから Python でもできるかと思います。