[selenium] タグが付いた質問

selenium はウェブブラウザ上のテスト操作を自動化し実行するためのツールです。

138 件の質問
絞り込み
並べ替え
タグ付けされた
0
1 回答
200 閲覧数

Python+Selenium で JavaScriptで記述されたボタンをクリックできない

Python+Selenium で JavaScriptで記述されたボタンをクリックできない。 あるフィットネスサイトをSeleniumで自動予約しようとしています。 レッスンの座席を指定するところまで遷移できましたが、座席がJavaScriptで記述されており、クリックできない状態となり、行き詰っております。 座席は、Excelの表形式の形で表示されており、1~50まで座が表示されています。 ...
藤原和広's user avatar
1
1 回答
180 閲覧数

Python と Selenium で特定サイトでのクリックが無応答となり、タイムアウトとなる

ディズニー予約サイトに Python+Selenium でボタンをクリックしていますが、応答が返却されません。 ■対象ページ https://reserve.tokyodisneyresort.jp/sp/hotel/search/ パソコンのブラウザではクリックして次に進んでいますが、Selenium で動かすと応答がなく、タイムアウトしています。 user-agentの設定を疑ったのですが、...
藤原和広's user avatar
0
1 回答
122 閲覧数

seleniumとasyncioの組み合わせでquitしてもプロセスが残ってしまう

seleniumとasyncioを組み合わせて複数のdriverを非同期で走らせています。 普通にdriverを立ち上げてquitする分にはプロセスが残らないのですが、Ctrl-Cで強制終了するとプロセスが残ってしまいます。 うまくプロセスをkillする方法を教えていただけませんでしょうか。 環境: Raspberry Pi OS $ uname -a Linux raspberrypi 6.1....
Sho's user avatar
  • 1
0
0 回答
125 閲覧数

WEBスクレイピングのログイン処理

WEBスクレイピングでログインまで自動化したいのですが、ログインボタンの要素が見つからず困っています。 canvas要素上の処理であることは確認できましたが、どうログイン処理を記述するかで詰まりました。 座標を具体的に指定して組めはしましたが、異なる端末環境で使用する予定の為あまり意味がありません。 JSから数値取得して座標指定するといったことはできるのでしょうか? VBA/...
GENKI's user avatar
  • 19
0
1 回答
246 閲覧数

動的に生成されたページをSeleniumで取得できない

現在、下のサイトのイベント上位者のデッキデータを収集しようとしています。 そのため、「デッキをみる」と表示されるリンクを取得したいと考えています。 https://players.pokemon-card.com/event/detail/262812/result そこで、google colabにて以下のコードを実行しましたが、肝心の「デッキをみる」のリンク等を取得できませんでした。 どなたか、...
INE's user avatar
  • 3
0
0 回答
139 閲覧数

new EdgeDriverのタイミングで、Edgeでアプリとしてインストールしたサイトが落ちる

SeleniumによりEdgeを自動制御して操作するアプリを作ったのですが、 new EdgeDriver()をするタイミングで、起動していた**アプリ化したサイト(※)**が閉じられてしまいます。 ※Edgeの「…」メニューから「アプリ」→「このサイトをアプリとしてインストール」を実行しアプリ化したもの。 起動済みのアプリ化したサイトを閉じずにnew EdgeDriver()...
Junya's user avatar
  • 1
0
0 回答
256 閲覧数

Seleniumでマウスを動かすと、ビューポート域内にもかかわらずエラーが発生する

解決したい現象 Seleniumでマウスを人間が動かすように見える疑似的な関数を作成しようとした時、マウスがビューポート域内にもかかわらずエラーが出てしまいます。 この現象は仕様なのでしょうか、私の使い方や考え方の間違いなのでしょうか。 ご指摘いただけますようお願いいたします。 解決したい現象は「ビューポート内をエラー無くマウス移動させたい」です。 対象のコード: ...
bakabon88's user avatar
  • 137
2
2 回答
661 閲覧数

Python + Selenium での Firefox のスクレイピングでエラー:selenium-manager.exe がない?

Python 3.10(←当初12と誤記していたものを訂正) と Selenium 4.15.2 で Firefox 115.4.0_ESR のスクレイピングをするコードを書いています。 「最近のSeleniumのバージョンには SeleiumManager が付いていて、WebDriver(FirefoxなのでGeckoDriver)の手動更新は不要」との記述をWebで見つけて、...
tszmusic's user avatar
0
1 回答
196 閲覧数

Python Selenium で Chromeブラウザ「検証」モードで表示されているにも関わらず 要素が見つからない

スポーツクラブJEXERサイトに Selenium でログインを試みていますがログインできません。 ログインURLは以下となります。 ○トップページ ⇒ ログインボタンを押下 https://www.jexer.jp/info/index.html ○ログインページ https://jresports.e-atoms.jp/JEXERWebUser/Account/LogIn?ReturnUrl=%...
藤原和広's user avatar
0
1 回答
611 閲覧数

Seleniumでページを取得できないサイトがある

下記サイトにchromedriverとseleniumを用いてアクセスしようと試みています。 他のサイトでは問題なくアクセスできていますが、getで処理が止まってしまいます。 https://salonboard.com/login/ 【環境】 Ubuntu 22.04.3 LTS Python 3.10.12 Google Chrome 116.0.5845.110 Selenium 4.14....
JapanYellow's user avatar
1
2 回答
327 閲覧数

find_elementでXPathを指定してスクレイピングできない

Python、Seleniumを使って下記のサイトをスクレイピングしたいと考えていますがうまく行きません。 https://www.spacemarket.com/spaces/eqt2ssndgz6ukjve/rooms/Wsr2fj8iAGN-FSkT/reservations/new/?date=2023-10-23&from=room_calendar&price_type=...
斉藤 真's user avatar
0
0 回答
99 閲覧数

Rselenium でブラウザが起動しない

Rseleniumを使用したいのですがwebブラウザを開く段階でエラーが出てしまいました。 エラーメッセージ Selenium message:Unable to create new service: ChromeDriverService Build info: version: '3.141.59', revision: 'e82be7d358', time: '2018-11-14T08:...
遠藤猛瑠's user avatar
0
1 回答
380 閲覧数

Google ColaboratoryにGoogle Chromeの最新版とChromeDriverの最新版がインストールできないです。

Google Colaboratory上でSeleniumを動かしたいので、 Google Chromeの最新版 ChromeDriverの最新版 をそれぞれインストールしたいです。 しかし、実行してもエラーが出現します。 前提条件 開発環境はGoogle Colaboratory Seleniumでスクレイピングをしたい。 期待値 Google ...
kamome_run's user avatar
0
0 回答
911 閲覧数

handshake failed; returned -1, SSL error code 1, net_error -100のエラー出力

サイズの小さいwebページだとエラー文が出力されずにスクリーンショットを撮ることが出来るのですが、サイズの大きいwebサイトを撮ろうとするとエラー文が出力され続け、一枚撮るのに三分ほどかかります。この解消方法をずっと調べているのですが、厳しいです。わかる方いらしたら何卒宜しくお願い致します。 # selenium 4 from selenium import webdriver from ...
yushi's user avatar
  • 3
0
0 回答
107 閲覧数

PHPから呼び出されたpythonの出力結果がおかしくなる

python2ではPHPファイルからURLを持ってきています。ソースコードはほぼ同じなのに下記でエラーが出力されるのがよくわかりません。わかる方宜しくお願い致します。 python1 from selenium import webdriver from selenium.webdriver.chrome.service import Service as ChromeService from ...
yushi's user avatar
  • 3
0
0 回答
85 閲覧数

AWS lambda+seleniumでHTMLが描画されない

AWS lambda上でSelenium(python)を用いて  https://app.squadbeyond.com/ このサイトをスクレイピングしようとしています。 ローカルではうまくいくのですが、AWS上で実行しようとすると、画面が真っ白でHTML要素が表示されません。 time.sleepやwait系の類は何度も試しているので違います。 また、UA偽装も関係ありませんでした。 ...
staff3's user avatar
  • 1
0
0 回答
269 閲覧数

seleniumを使ったスクレイピングでボタンをクリックする方法が知りたい

最近seleniumを使ったスクレイピングを勉強し始めたものです。 よろしくお願いいたします。 言語はpythonでVScodeを用いて実行しています。 やりたいことは、Googlemapのタイムラインを自動でダウンロードすることなのですが、 タイムラインを開くmenuボタンをクリックしようとしたところ、エラーになってしまいました。 実行しようとしてエラーが出てる箇所は以下の通りで ...
user59112's user avatar
1
0 回答
411 閲覧数

SeleniumでIE Driverを使用し、edge IEモードにてScreen Lock画面中に操作したい

EdgeをIEモードで立ち上げ、IE Driverを用いてサイトを開き、操作しています。 通常使用するのであれば問題無いのですが、スクリーンをロックした状態で使用したいと考えています。 しかし、画像の様にスクリーンをロックした状態ですと指定したサイトを開くことができません。 回避方法をご存知でしたらご教示ください。 private void button1_Click(object sender, ...
Rumine's user avatar
  • 11
0
0 回答
165 閲覧数

AWS lambda pythonで位置情報を設定してseleniumスクレイピングをしたい

前提 使用環境 AWS lambda python3 seleniumを用いて位置情報を設定してスクレイピングするプログラムを作成しています. 実現したいこと AWS lambda python3 の環境でselenium + headless chromium + chromedriverを用いてchromeに位置情報をsetしてスクレイピングしたい. 発生している問題・エラーメッセージ ...
柿元裕紀's user avatar
0
0 回答
213 閲覧数

スクレイピングで為替情報の取得を試みていますが、要素の指定で躓いています。

前提 閲覧頂きありがとうございます。 為替レートの情報を自動で取得したく スクレイピングを試みています。 下記のサイトでCookieの同意をクリックした後、 「Amount you paid」の項目に入力するため要素の取得をしたいのですが、 要素が見つからずエラーとなります。 ■対象ページ https://usa.visa.com/support/consumer/travel-support/...
shin t's user avatar
  • 1
2
2 回答
175 閲覧数

Seleniumで同じcsvが重複して追加されてしまうのはなぜ?

pythonやプログラミングの初心者です。 色々なサイトを調べましたが、問題が解決されなかったため、こちらに投稿させていただいています。 基本的な内容かもしれませんが、ご協力いただけますと幸いです。 やりたいこと Google Colaboratoryを使って下記のサイトに載っているリストをスクレイピングして csvとして出力して、データ解析をしたいです。 http://regalkes....
Augusto_Soba's user avatar
3
2 回答
275 閲覧数

Pythonにて、引数をループ処理で増やしていく事はできますか?

Python3.10.2とseleniumを使用しています。 商品コードを入力、表示された在庫数をスクレイピングしてCSVに保存、という流れなのですが、商品数が増えてきたので、ループ処理に変更したく思っています。 ループしたい処理は下記になります。 send_data(n)を1~4000ぐらいまで増やしていく処理ができないか考えています。 ...
tak's user avatar
  • 31
1
2 回答
2,347 閲覧数

Tkinterにてボタンが押されるまで次の処理を待機したい

TkinterとSeleniumを使ったアプリケーションで,スタートを押すとChromeが起動し,スタートを押すと input('>何かを入力すると,コンソールにp要素のテキストを表示') が動作し,コンソールでエンターキーなりを押すまでp要素の取得を待ちます. 次に input('>何かを入力すると,コンソールにh2要素のテキストを表示') が動作し,同じくh2要素の取得を待ちます. ...
user avatar
1
1 回答
630 閲覧数

Tkinterにて,ボタンが押されるまで次の処理を待機する方法を教えてください.

TkinterとSeleniumを使ったアプリケーションで,スタートを押すとChromeが起動し,スタートを押すと input('>何かを入力すると,コンソールにp要素のテキストを表示') が動作し,コンソールでエンターキーなりを押すまでp要素の取得を待ちます. 次に input('>何かを入力すると,コンソールにh2要素のテキストを表示') が動作し,同じくh2要素の取得を待ちます. ...
user avatar
0
1 回答
241 閲覧数

Selenium と concurrent.futures を使ったタスク実行が、スクリーンセーバーで停止してしまう

Pythonにて Seleniumで、あるURLのアクセスをThreadPoolExecutorにて並列4 taskで実行するscriptを組んでいるのですが、実行時から約1時間ほどは期待通りのタスクが次々に完了していくのですが、macの画面がscreen saverに切り替わった時、...
n t's user avatar
  • 1
0
0 回答
132 閲覧数

Pythonでsafariをプライベートモードで開きたい

pythonでブラウザを開いて、WEBサイトを表示する通常の方法は >>> import webbrowser >>> url = "https://www.google.com" >>> webbrowser.open(url) となると思いますが、これを safariで、かつブライベートモードで開きたいのですが、...
MoreChoice's user avatar
1
1 回答
401 閲覧数

Python CSV出力が上手くいきません。

見よう見まねでトライしてみたスクレイピングをcsv出力しようとしました。 しかし添付の画像のような出力にしかなりません。 エラーは特にでていませんが、どこをどう修正すれば良いかご教授いただけたら幸いです。 from selenium import webdriver from selenium.webdriver.chrome.options import Options from ...
田中丸's user avatar
-1
1 回答
211 閲覧数

Pythonでプレミアリーグの第一試合の勝ち点数を分析したい

selenium・openpyxlを使って、節ごとプレミアリーグの第一試合の結果を抽出してエクセルへ書き込みたいです。 プレミアリーグの試合数の結果を使って勝ち点数の分析をしています。 先ずは第一試合のみ分析したいので、節ごとの勝ち点が1点より大きい試合の勝ち点を次の行へ追加したいです。 実現したい内容 ❶読み込みエクセルから、節ごとを読み込み、 節ごとプレミアリーグの第一試合へ検索します。 ...
幸589's user avatar
  • 445
0
3 回答
473 閲覧数

PythonでURLのリストから特定のIDを抽出したい

seleniumを使って、yahoo newsのwebサイトからURLを抽出して IDのみ取得したいです。 実現したい内容 ❶からURLを取得してから、❷IDのみ取得したいです。 ❶URL取得 ['https://news.yahoo.co.jp/pickup/6435551'] ['https://news.yahoo.co.jp/pickup/6435550'] ['https://news....
幸589's user avatar
  • 445
0
0 回答
1,298 閲覧数

PythonにてSeleniumのrequests.exceptions.SSLErrorを解消したい

PythonでSeleniumを使って下記のWEBサイトをスクレイピングしています。 https://shoply.co.jp/ エクセルからJAN_CODEを読み込んで、サイトへJAN_CODEを検索して、画像・商品名・価格をエクセルに入れています。 エクセルデータ JAN_CODE,画像,商品名,価格 4953103354739 4953103289055 4589591675799 ...
幸589's user avatar
  • 445
0
1 回答
113 閲覧数

find_element(By)にURLによって変わる要素を入れたい

以下のような2つのデータフレームから各URLのIDと一致するtxtを抜き出してfind_element(By.LINK_TEXT)に入れ込むようなことは可能でしょうか?df2のtxt部分は重複する場合もあります。よろしくお願い致します。 df1: URL ID aaa 1 bbb 2 ccc 3 ddd 4 ... ... df2: ID txt 1 xxx 2 yyy 3 zzz 4 ...
kacha's user avatar
  • 3
0
1 回答
1,806 閲覧数

driver.find_element(By.LINK_TEXT, "XXXX")でエラーになるものとならないものがある

以下のコードの①ではエラーもなく押下できますが②だと③のエラーが出力されてしまいます。 原因を教えていただきたいです。関係無いかもしれませんがpip listの結果もコードの下に貼りました。 ① driver.find_element(By.LINK_TEXT, "ログイン") ② driver.find_element(By.LINK_TEXT, "FX取引スタート&...
kyouka's user avatar
  • 1
0
1 回答
1万 閲覧数

PythonでSeleniumを使ってChromeを自動的に落ちさせない方法

Pythonでselenium+Chromeを利用した際にYahooページを開き、ショッピングのメニューをクリックすると自動的にchromeが落ちてしまいます。 Yahooページだけではなく他のサイトを開く際も同じです。 以前は drive.close() を指定するとChromeが閉じました。 PythonのバージョンやSeleniumによってChromeは自動的に落ちますか。 ...
幸589's user avatar
  • 445
0
1 回答
797 閲覧数

pythonでseleniumのwindow_handlesがフリーズする

下記のコードでdriver.window_handlesがフリーズします。 常にフリーズするのではなく、10回に1度程度の頻度で発生します。 エラーメッセージや例外の発生はありません。 やりたい事は、特定のタイトルを持つウィンドウに制御を切り替える ことです。 データ依存があるのが分かっていて、このコードの前にボタンをクリックして ...
かーとと's user avatar
0
1 回答
1,032 閲覧数

seleniumのStaleElementReferenceExceptiontエラーの対処方法ご教授ください

質問 下記コードを実行したときにStaleElementReferenceExceptionになります。 最初は出ていませんでしたがほぼ100%表示されるようになりました。 試した内容 sleepで待ち時間を設定 ダメでした x_pathの要素を配列にいれてfor文に入れる ダメでした for w in dd: ddd.append(w) 初心者なのでやり方がおかしいかもしれません… ...
user52334's user avatar
0
0 回答
339 閲覧数

seleniumでGoogleを開こうとスクレイピングする際、WebdriveException:Message:chrome not reachableとでてしまい開けません

プログラムの勉強を始めたばかりで、YouTubeや本などの模写?みたいのをしています。 スクレイピングの動画で下記のプログラムをうったところ、 WebdriveExceptionと出てしまいgoogleを開けませんでした。 seleniumやbrewなどのインストールはすませてあります。 browser.get('http://www.google.com./')
Python初心者's user avatar
0
1 回答
893 閲覧数

Selenium を使って Firefox を起動したい

現象 VSCodeで開いたJupyter Notebookで下記のPythonのコードを実行すると、エラーが表示されてFirefoxが起動できません。 from selenium import geckodriver ImportError Traceback (most recent call last) /tmp/...
atago_IT's user avatar
  • 237
1
1 回答
3,150 閲覧数

Python seleniumでPDFを好きなディレクトリに保存したい

Python selenium でダウンロードしてきたファイルを指定したディレクトリに保存したいです. ↓サイトを参考にしましたが“Downloads”フォルダに入ってしまいます. https://qiita.com/KWS_0901/items/33ae052e2e4694a6b4f1 ↓サイトの方法を試しましたが解決しませんでした. https://ja.stackoverflow.com/...
otori334's user avatar
0
1 回答
1,101 閲覧数

seleniumで要素を取得できない

http://www1.river.go.jp/cgi-bin/SrchSiteSui2.exe こちらのリンク先にある水系と観測項目をpythonのseleniumを使って自動入力したいです。 まずは一つずつ、水系から試そうと思い以下のコードを実行しました。 from selenium import webdriver from selenium.webdriver.support.ui ...
manatsu's user avatar
  • 187
0
2 回答
1,059 閲覧数

lambda上でheadlesschromeを使ってseleniumを動かそうとするとエラーになる

マルチポストです。 https://teratail.com/questions/375966 teratailでも回答を募りましたが、 解決に至らなそうなのでこちらでも投稿させていただきます。 lambda上でheadlesschromeを使ってseleniumで操作したいのですが、 上手くいきません。 環境構築はこちらを参考にしました。 バージョン等もこちらと同じです。 https://...
shazam's user avatar
  • 3
0
1 回答
307 閲覧数

seleniumを使ってTwitterのキーワードを複数検索したい

前提・実現したいこと python:seleniumを使って Excelから繰り返しデータを読み、Twitterで複数のデータを検索したいです。 C列に都市2つ以上ある場合、Twitterで下記のように検索したいです。 Excel データ No 国 都市 1 アメリカ ロスアンゼルス、ニューヨーク、カリフォルニア 2 日本 東京、京都 3 オーストラリア シドニー 検索したい順番 ...
幸589's user avatar
  • 445
1
1 回答
4,444 閲覧数

seleniumを使ったweb操作で別タブに開いてしまったサイトのurlを取得したい

seleniumでWebを開いた後,ユーザが操作をすることで開いたページのurlを取得しようとしました. from selenium import webdriver import time browser = webdriver.Chrome('chromedriver.exe') browser.get('https://kakolog.jp/q/') while True: ...
user49026's user avatar
3
1 回答
312 閲覧数

pythonを使ってChrome上でHTMLファイルを開く

pythonを使って、Chrome上でHTMLファイルを表示しています。 HTMLファイルのパスに"#"があると、手動で開く時は問題がないのに、pythonからですと、 ファイルにアクセスできませんとChrome上で表示されてしまいます。 "#"をパスから取り除くと、pythonからちゃんと開けます。 pythonでは、ファイルパスに”#”...
DenDen's user avatar
  • 43
1
2 回答
5,179 閲覧数

エラー: stale element reference: element is not attached to the page document

以前は上手くテキストファイルにアウトプットされていたのですが、最近になってエラーが出ます。 エラー: stale element reference: element is not attached to the page document やりたい事は、テキストファイルのデータを一行ずつ読み込み、ループで処理、アウトプットファイルにGoogle検索結果を書き出すという事です。 ...
kimi Tanaka's user avatar
0
0 回答
1,927 閲覧数

pythonでのseleniumを用いたwebプロキシの設定について

pythonのseleniumをchromeで動かしてユーザー名とパスワードの設定のあるwebプロキシに自動的に接続できるようにしたいのですが、思うようにすすみません。 ubuntu20.04の実機を使ってcronで定期的にwebプロキシに接続をしてサイト情報を引っ張ってきたいのですが、headlessモードになると拡張機能を使うことが出来ずに失敗になってしまいます。 ...
志村ゆかり's user avatar
3
0 回答
992 閲覧数

同じ名前のclassがついているボタンから1つのボタンをクリックさせたい

やりたいこと pythonとseleniumを使用して、毎日入力している勤怠の登録を自動化したいと考えています。 何をどうしたいか 現在苦戦しているところが、日付の分出てきているボタンをクリックすることです。 ボタンの箇所のhtmlは、実際のソースとは違いますが、以下のような形で日付分出てきています。 <table> <tbody> //1~5日のもの ...
pythonNewbieMan's user avatar
1
1 回答
481 閲覧数

ChromeでHTMLファイルをPDF保存時のページサイズ指定が動作しない

Chrome上でHTMLファイルを開いて、PDFに保存するというのをやりたくて、 下記コードを書きましたが、コード中のappState内の"pageSize"をA3、A5、レターサイズと どんなに値を変えて指定しても、出力されたPDFファイルのページサイズがA4となってしまいます。 appState内の他のプロパティ"isLandscapeEnabled"や&...
DenDen's user avatar
  • 43
3
0 回答
384 閲覧数

Selenium で Chrome をモバイルモードで開くと位置情報を変更できません

SeleniumでChromeをモバイルモードで開いて位置情報を変更したいのですが、 MobileEmulation設定をするとGeoLocation設定が無視されてしまいます。 MobileEmulationなしだと位置情報の変更はできているので、 モバイルエミュレータを有効にすると位置情報の設定はできないということでしょうか? options=options.add_argment("...
Ichi's user avatar
  • 31
0
1 回答
360 閲覧数

ExcelからTwitter(selenium)で特定の条件がある場合、繰り返し処理を行う方法について

前提・実現したいこと python:seleniumを使って Excelから繰り返しデータを読み、Twitterで複数のデータを検索したいです。 B列に同じ国が2つ以上ある場合、Twitterで下記のように検索したいです。 Excel データ 1 アメリカ カリフォルニア 1 アメリカ フロリダ 2 フランス パリ 3 日本  東京 検索したい順番 アメリカ "...
幸589's user avatar
  • 445
1
2 回答
3,984 閲覧数

selenium でのループ処理中にエラー発生時も終了しないようにしたい

seleniumを使用してスクレイピングをしようと考えています。 xpathの一部を変数にしてループさせてテキストを表示しようと考えています。 わからないこと ループで回して取得しようとするのですが、取得する値の数がその時々で変わるので 何回ループを回せばよいのかわかりません。 ですので、該当するxpathが存在しなかった場合、ループを終わりにしたいのですが、うまくいかずエラーが起きてしまいます。 ...
zumo1224's user avatar
  • 123