0

ある作業で自動的に生成されるindex.htmlと付随するデータがあります。

index.htmlをPCのローカルフォルダ上から起動してブラウザに表示し、画面に表示される入力フォーム部分に検索条件の値を入力し、検索ボタンを押すと画面に表示されているリストが条件に一致するモノのみに絞り込まれる仕組みのあるhtmlとなっています。

このhtmlをbeautifulsoupを使ってローカルindex.htmlを起動し、入力フォーム部分・検索ボタン部分を自動操作しつつ、結果画面の表示内容についてスクレイピングを行いたいのですが、beautifulsoupでこのような作業は可能でしょうか。

python初心者なのでできそうなら調べてやってみようと思います。

3
  • 1
    BeautifulSoup はあくまで「HTML を解析する」ツールなので、自動操作が必要な場合 別途 Selenium 等を使わないと実現できないと思います。参考: SeleniumとBeautifulSoupの違いを簡単にまとめてみた
    – cubick
    Commented 2022年4月26日 6:31
  • コメントありがとうございます。なるほどSeleniumと違いがあるのは知りませんでした。仰るように絞り込み処理部分がjavascript構造なのでSelenium経由でできないか試してみます。
    – MSAII
    Commented 2022年4月26日 9:34
  • 自動操作と言っても、フォームに内容を送りながら操作する程度ならrequestsでもできますけどね。javascriptが必要になったらseleniumが必要かもしれません。pyppeteerも便利です。
    – nandeyanen
    Commented 2022年5月2日 14:00

1 件の回答 1

1

対処方法【予定】
Seleniumで条件入力し、結果画面のスクレイピングを行う。

cubick様のコメントがほぼほしい答えそのものなのでこれで閉めます。

2
  • コメントで解決したとしても自己解決であっても、ほかの人のためにその回答の中身を記述してください。
    – keitaro_so
    Commented 2022年4月28日 1:43
  • まだ具体的な用意ができないので上記のような記述しかできません。申し訳ありません。
    – MSAII
    Commented 2022年4月28日 2:26

この質問に回答するには、ログインする必要があります。

求めていた回答ではありませんか? のタグが付いた他の質問を参照する。