Skip to main content

すべての質問

でタグ付けされた
絞り込み
並べ替え
タグ付けされた
0
0 回答
358 閲覧数

python selenium webdriver.Chromeが遅い

ウェブで調べても分からなかったので質問させてください。 事象 Pythonでseleniumを使ってウェブページを開こうとすると webdriver.Chrome()の実行に5分程度かかり かつ Basic認証が正常に動作しない。 コード実行時にVSCode左下の「コールスタック」欄に以下が実行中と表示されます。 なお別環境では同じコードの実行はスムーズに完了します。 MainThread ...
きつねうどん's user avatar
0
0 回答
283 閲覧数

PythonのSeleniumにてChromeをシークレットモードで開いた上でプロキシを突破したい

質問内容 SeleniumでChormeをシークレットモードで開きつつプロキシを突破する方法をご教示いただけないでしょうか? 試したこと seleniumで認証ありプロキシで接続&ダイアログを突破してブラウザ操作する方法-python 上記記事の 「クローム(ブラウザ)に拡張機能を追加しなくてもローカルに保存してクロームオプションに追加すれば良かった。」を参考に、プロキシを突破するコードを記述した。...
Kakashi-san's user avatar
0
0 回答
1,826 閲覧数

handshake failed; returned -1, SSL error code 1, net_error -100のエラー出力

サイズの小さいwebページだとエラー文が出力されずにスクリーンショットを撮ることが出来るのですが、サイズの大きいwebサイトを撮ろうとするとエラー文が出力され続け、一枚撮るのに三分ほどかかります。この解消方法をずっと調べているのですが、厳しいです。わかる方いらしたら何卒宜しくお願い致します。 # selenium 4 from selenium import webdriver from ...
yushi's user avatar
  • 3
0
1 回答
1,004 閲覧数

Selenium を使って Firefox を起動したい

現象 VSCodeで開いたJupyter Notebookで下記のPythonのコードを実行すると、エラーが表示されてFirefoxが起動できません。 from selenium import geckodriver ImportError Traceback (most recent call last) /tmp/...
atago_IT's user avatar
  • 237
0
1 回答
331 閲覧数

seleniumを使ってTwitterのキーワードを複数検索したい

前提・実現したいこと python:seleniumを使って Excelから繰り返しデータを読み、Twitterで複数のデータを検索したいです。 C列に都市2つ以上ある場合、Twitterで下記のように検索したいです。 Excel データ No 国 都市 1 アメリカ ロスアンゼルス、ニューヨーク、カリフォルニア 2 日本 東京、京都 3 オーストラリア シドニー 検索したい順番 ...
幸589's user avatar
  • 455
0
0 回答
2,218 閲覧数

pythonでのseleniumを用いたwebプロキシの設定について

pythonのseleniumをchromeで動かしてユーザー名とパスワードの設定のあるwebプロキシに自動的に接続できるようにしたいのですが、思うようにすすみません。 ubuntu20.04の実機を使ってcronで定期的にwebプロキシに接続をしてサイト情報を引っ張ってきたいのですが、headlessモードになると拡張機能を使うことが出来ずに失敗になってしまいます。 ...
志村ゆかり's user avatar
0
2 回答
4,152 閲覧数

Seleniumで取得保存したファイル名の特定

Ubuntu+Python+SeleniumでChromeを自動化し、Saveボタンをクリックしてファイルをローカルに保存するところまで出来ましたが、このファイル名が手動で制御出来ず、取得元のサイトが検索ワードに基づいて付けた適当な名前になります。 この、たった今保存されたファイルのファイル名をPythonで取得する場合、どの方法が賢いでしょうか。 ディレクトリを検索し、...
Chihiro  Fukazawa's user avatar
0
1 回答
1,695 閲覧数

Seleniumの要素を特定しているnameの取得方法が分からない?

こちらのQiita記事を参考にSeleniumの勉強をしています。 Ubuntu、Python3、Chromeを使っています。 以下のサンプルコードについて質門です。 import time from selenium import webdriver driver = webdriver.Chrome() driver.get('https://www.google.com/') time....
Chihiro  Fukazawa's user avatar
0
1 回答
454 閲覧数

Rubyでseleniumを使ってremoteで接続する際にNet::ReadTimeoutになる

現在、DockerCompose上のRubyでseleniumを使って、別サーバにchromeを使いたいのですがうまく動作しません。 以下に各種コードとエラー内容を書かせていただきます。 DockerCompose.yml version: "3" services: rails: build: context: . dockerfile:...
user3387068's user avatar
0
1 回答
870 閲覧数

スクレイピングで、テキストの一部が自動的に英語に翻訳された状態で取得される

Seleniumのスクレイピングについてご質問させていただきます。 現在、↓のページのスクレイピングスクリプトを書いています。 https://www.gakujo.ne.jp/2022/company/baseinfo/22242/ 環境 MacBook Pro Google Chrome Jupyter Notebook Selenium 症状 見出しの一部(『プロフィール』)...
maronie_papa's user avatar
0
1 回答
825 閲覧数

PythonでExcelからデータ読込後、ブラウザで検索

やりたいこと Excelからデータを読み込み,yahooで交通費検索したいです。 各項フィルドごとで作業を繰り返したいです。 以下のサイトと同様な処理をPandasで実現したい。 参考: PythonでExcelからデータ読込→サイトで交通費検索→Excelへデータ書込 Pythonでエクセルから情報を取得して検索エンジンに入力! Excelのデータ 日付 出発 到着 ...
幸589's user avatar
  • 455
0
1 回答
1,569 閲覧数

FirefoxをPythonのSeleniumで起動する時、proxyのusernameとpasswordを入力する方法

FirefoxをPythonのSeleniumで起動する際、下の画像の様にproxyのusernameとpasswordの入力を要求されますが、 こちらをpythonのscriptから入力する方法を教えていただけないでしょうか。 私の実行環境 Ubuntu 18.04.3 LTS Python 3.9.1 selenium 3.141.0 py39h07f9747_1002 conda-...
akki's user avatar
  • 139
0
0 回答
574 閲覧数

seleniumで普段使用するchromeを自動操縦した後に全てのサービスに再ログインを求められる。

環境 mac os highsierra Python3.8 selenium chrome ver.85 問題 1:困っている seleniumで普段使用するchromeのユーザプロファイルを指定して自動操縦した後にchromeを閉じて、起動して手動に切り替えると今までログインしていたサービス(twitter, spotify, スタックオーバフロー等...)...
wataru's user avatar
  • 1,133
0
1 回答
1,226 閲覧数

Seleniumを使ったスクレイピングで、最後のページが終了したらbreakさせたい。

目的 ↓のURLに表示される全ての一覧ページの求人詳細URLを取得したい。 (ただし、求人の数は変動する。今回は291件) https://next.rikunabi.com/eigyo/lst_jb0101020000/ 期待する結果 [https://next.rikunabi.com/company/cmi2566412298/nx1_rq0016317040/?fr=cp_s00700&...
maronie_papa's user avatar
0
0 回答
608 閲覧数

VBA Selenium ChromeDriver Webメールに添付ファイルを付けたい

roundcube webmail で vba selenium chromedriver を使用してメール作成、送信を試みています。 タイトル、本文などは入れられたのですが、添付ファイルを設定する方法がどうしてもわかりません。ご存じの方、ご教授お願いします。 With CreateObject("Selenium.ChromeDriver") .Start .Get "...
miaou's user avatar
  • 187
0
0 回答
256 閲覧数

Invalid argument supplied for foreach() というエラーについて

PHP、SeleniumWebdriverでスクレイピングをしています。以下のコードを実行した際、 Invalid argument supplied for foreach()というエラーが不定期で起こります。 findsElements()の利用として適切ではないコードの書き方なのでしょうか? 該当コード if (count($driver->findElements(...
しょうへい's user avatar
0
1 回答
847 閲覧数

Webdriverでの「Timed out waiting for driver server to start」

すみません。PHP、slenium、chromedriverを使いスクレイピングをしています。不規則かつ頻繁に「Timed out waiting for driver server to start」のエラーが出るのですが、原因が全くわかりません。どなたか解決策をご存知でしたらお教えください。 また、現時点で関係性は不明ですが、わかっていることとして、スクレイピング中に例外を投げた際、quit(...
しょうへい's user avatar
0
1 回答
2,791 閲覧数

ブラウザ表示とヘッダレスモードで動作が異なる場合の切り分けについて

背景: selenium初心者です あるサイトの情報取得のためにseleniumを利用しているのですが ブラウザ表示時には正常に情報取得ができていたにも関わらず、ヘッダレス モードで実行した場合には下記のエラーが発生し、情報取得が不可となりました 質問内容: seleniumブラウザ表示時とヘッダレス動作時に挙動が異なる場合の切り分け方法について 皆さんはどのように行われているのでしょうか。(...
Taka's user avatar
  • 1
0
1 回答
300 閲覧数

条件分岐が多くなりすぎてネストが深くなってしまったコードをスッキリさせたい

Seleniumの勉強のためRubyでinstagramのWeb自動ツールの開発をしています。 この中で、投稿にコメントを書き込むスクリプトの中で コメント入力欄 「投稿する」ボタン の2つを取得するコードを書いています…が、なかなかきれいにまとまらなくて困っています。 コメント欄・投稿するボタンのHTMLコード ...
question_dog's user avatar
0
2 回答
999 閲覧数

Selenium ChromeDriver でタップ(タッチ)イベントを発生させるには

ChromeDriver で特定要素のタップイベント touchstart touchend をトリガーするにはどのようにコーディングすればよいでしょうか。
jirolabo's user avatar
  • 2,234
1
1 回答
2,604 閲覧数

chromedriver で headless と user-data-dir のオプションを同時に指定するとエラーが発生する

下記のコードを実行するとエラーが発生します。 それぞれのオプションを個別に指定するとエラーになりません。 headless と user-data-dir は同時に指定できないのでしょうか。 実行したコード: var driverDirectory = Path.GetDirectoryName(AppDomain.CurrentDomain.BaseDirectory); var options ...
jirolabo's user avatar
  • 2,234
0
2 回答
1,644 閲覧数

Selenium, Python3, コンボボックスの現在の値の取得方法

from selenium.webdriver import Chrome, ChromeOptions from selenium.webdriver.common.keys import Keys from selenium.webdriver.support.ui import Select, WebDriverWait from selenium.webdriver.support ...
ozikot's user avatar
  • 11
4
1 回答
3,395 閲覧数

Pythonでbrowser=webdriver.Firefox() を実行するとエラー

Mac Python3.6 を使用しているものです。 seleniumをimportして、 browser=webdriver.Firefox() を実行してみたのですが、 うまくいかず困っています。(エラー文は下記) geckodriverのPATHについては問題ないと思うのですが。 初心者なのでわかりやすく教えて頂けるとありがたいです。 >>> from ...
tokumekonsa's user avatar
0
1 回答
1,640 閲覧数

同じurlで異なる内容のページのhtml要素の取得方法がわかりません。

PMDAのサイト では 検索フォーム と検索確認のURLが同じなのですが検索確認のhtmlを解析したいです。 下記のコードでは検索確認のhtmlの解析ができず、検索フォームのhtmlを検出してしまうため、 elem_serch_btn1のクリックに失敗します。 検索確認のhtmlを解析するにはどうしたらようでしょうか・・? お教示お願いいたします。 from selenium import ...
koya's user avatar
  • 1
0
0 回答
273 閲覧数

centos7+nginx+uwsgi+flask+seleniumでchromedriverが立ち上がらない。

現状 centos7(VPS)+nginx+uwsgi+flask+seleniumでブラウザーから渡されたURLでスクリーンショットを取ろうとしているのですが、chromedriver(chrome本体?)が起動に失敗します。 確認したこと nginxを経由せずにflaskの単体サーバーでは問題ありませんでした。 uwsgi経由でflaskサーバー立ち上げて実行しても問題ありませんでした。 ...
momonga's user avatar
0
1 回答
370 閲覧数

cron実行について

今度cronを使って、Selenium WebDriverを定時実行したいと考えていますが、以下の状況でcron実行できるのか教えていただきたいです。 状況 cronで深夜に実行コマンドを流すように記載予定。 PC(mac)は一定時間でスクリーンロックがかかります。 疑問点 1. cronはスクリーンロックがかかっている状態でも実行されるのか。 (...
tanukitokitune's user avatar
0
0 回答
649 閲覧数

Selenium WebDriverでHTTP refererを設定する方法をご教授下さい。

Selenium WebDriverでHTTP refererを設定する方法をご教授下さい。 chromeを使用しています。 ■やりたい事 http://referer.com/ → http://target.com/ ■実装イメージ options->AddArgument("--referer=http://referer.com/"); driver->Navigate()...
oneeeeggg's user avatar
0
2 回答
1,985 閲覧数

selenium webdriverでのページ遷移

WebDriverを使用し、ログイン画面にてログイン後、 そのブラウザのページで別のページに遷移したいのですが、遷移しなく困っております。 以下ソース ログイン関数 static void login(IWebDriver _webDriver){ _webDriver.Url = "url1"; // IWebElement ...
nakamu's user avatar
  • 1
0
2 回答
1,359 閲覧数

Selenium IDEのテストケースをコマンドラインで変換したい

Seleniumでの自動テストの導入を考えています。 しかし、テストケースを記述する人はプログラマーではないため、Selenium IDEを使ってテストケースを作成しようと考えています。 これをWebDriverに変換してテストしたいのですが、コマンドライン上で変換する方法が分かりません。 検索してみると、一様にSelenium IDEでエクスポートしろと出てきます。 ...
osapon's user avatar
  • 352
1
0 回答
1,646 閲覧数

SeleniumでFlashの操作をする時の誤動作?について

Seleniumを使ってあるブラウザゲームの自動プレイが出来たら良いなと思い、自動でログインから所定の動作をするPythonスクリプトを作成してみました。 スクリプトは以下の様な内容です。 from selenium import webdriver from selenium.webdriver.common.keys import Keys import time ## ...
そば8's user avatar
2
1 回答
1,043 閲覧数

Selenium WebDriverとはブラウザを操作するものか、それともブラウザ自体?

Selenium WebDrierというのを今までブラウザそのものではなく、ブラウザを操作するものだと思っていたのですが、Railsのテストでは phantomjs か selenium かを選択する場面があり、ブラウザそのものとして扱われているようです。 公式サイトを読んでみたのですが、いまいちよくわかりませんでした。 http://www.seleniumhq.org/projects/...
ironsand's user avatar
  • 3,567