[selenium] タグが付いた質問
110
質問
3
票
1
回答
820
閲覧数
Mac + Selenium2 + PhantomJS で PhantomJS が起動しない
環境
Mac OSX Yosemite (10.10.2)
Selenium: 2.44.0
PhantomJS: 2.0.0
症状
Mac で PHP のウェブアプリを、 PHPUnit を使ってエンドツーエンドのテストを書いています。
先週頃まで Selenium2 + PhantomJS がうまく起動していたのですが、最近になって起動しなくなってしまいました。
何か原因でしょうか?
...
2
票
1
回答
1,457
閲覧数
Google ChromeでHTTPSのWebサイトで非SSLのWebSocketを使う
ChromeでHTTPSで暗号化されているサイトから非SSLのWebSocketサーバーにアクセスすることはできますか?
Seleniumのexecute_scriptを使ってjsを埋め込み、埋め込まれたjs内でMutationObserverを使ってDomの変更を監視して、変更を検知したらlocalhostにあるWebSocketサーバに通知するということをしたいです。
...
2
票
1
回答
959
閲覧数
Selenium WebDriverとはブラウザを操作するものか、それともブラウザ自体?
Selenium WebDrierというのを今までブラウザそのものではなく、ブラウザを操作するものだと思っていたのですが、Railsのテストでは phantomjs か selenium かを選択する場面があり、ブラウザそのものとして扱われているようです。
公式サイトを読んでみたのですが、いまいちよくわかりませんでした。
http://www.seleniumhq.org/projects/...
2
票
1
回答
4,370
閲覧数
Selenium Webdriverで絶対に読み込みがタイムアウトになるのをなんとかしたい
言語はruby、seleniumのバージョンは2.2、ブラウザはfirefox31.4です。
Facebookでログインボタンをクリックした後、メンバーページへ移動するのですが、
そのメンバーページではかなり高い確率でいつまで経っても読み込みが終わらないため、タイムアウトの時間を長く設定してもエラーで終了してしまいます。
/System/Library/Frameworks/Ruby....
2
票
1
回答
104
閲覧数
pythonを使ってChrome上でHTMLファイルを開く
pythonを使って、Chrome上でHTMLファイルを表示しています。
HTMLファイルのパスに"#"があると、手動で開く時は問題がないのに、pythonからですと、
ファイルにアクセスできませんとChrome上で表示されてしまいます。
"#"をパスから取り除くと、pythonからちゃんと開けます。
pythonでは、ファイルパスに”#”...
2
票
0
回答
160
閲覧数
Selenium で Chrome をモバイルモードで開くと位置情報を変更できません
SeleniumでChromeをモバイルモードで開いて位置情報を変更したいのですが、
MobileEmulation設定をするとGeoLocation設定が無視されてしまいます。
MobileEmulationなしだと位置情報の変更はできているので、
モバイルエミュレータを有効にすると位置情報の設定はできないということでしょうか?
options=options.add_argment("...
2
票
1
回答
3,112
閲覧数
Pythonでbrowser=webdriver.Firefox() を実行するとエラー
Mac Python3.6 を使用しているものです。
seleniumをimportして、
browser=webdriver.Firefox()
を実行してみたのですが、
うまくいかず困っています。(エラー文は下記)
geckodriverのPATHについては問題ないと思うのですが。
初心者なのでわかりやすく教えて頂けるとありがたいです。
>>> from ...
1
票
2
回答
841
閲覧数
selenium でのループ処理中にエラー発生時も終了しないようにしたい
seleniumを使用してスクレイピングをしようと考えています。
xpathの一部を変数にしてループさせてテキストを表示しようと考えています。
わからないこと
ループで回して取得しようとするのですが、取得する値の数がその時々で変わるので
何回ループを回せばよいのかわかりません。
ですので、該当するxpathが存在しなかった場合、ループを終わりにしたいのですが、うまくいかずエラーが起きてしまいます。
...
1
票
1
回答
685
閲覧数
seleniumを使ったweb操作で別タブに開いてしまったサイトのurlを取得したい
seleniumでWebを開いた後,ユーザが操作をすることで開いたページのurlを取得しようとしました.
from selenium import webdriver
import time
browser = webdriver.Chrome('chromedriver.exe')
browser.get('https://kakolog.jp/q/')
while True:
...
1
票
2
回答
1,173
閲覧数
エラー: stale element reference: element is not attached to the page document
以前は上手くテキストファイルにアウトプットされていたのですが、最近になってエラーが出ます。
エラー: stale element reference: element is not attached to the page document
やりたい事は、テキストファイルのデータを一行ずつ読み込み、ループで処理、アウトプットファイルにGoogle検索結果を書き出すという事です。
...
1
票
2
回答
3,055
閲覧数
Selenium::WebDriver::Error::WebDriverError: Unable to find the chromedriver executable. というエラーが発生します
MacOS-X、SeleniumをRubyで書いてChromeを動かそうとしているのですが、うまくいきません。RubyとSeleniumのインストールまではうまくいったのですが、ChromeDriverのインストールでハマっています。
具体的には、irbで
require "selenium-webdriver"
driver = Selenium::WebDriver.for :Chrome
...
1
票
1
回答
370
閲覧数
Python seleniumでPDFを好きなディレクトリに保存したい
Python selenium でダウンロードしてきたファイルを指定したディレクトリに保存したいです.
↓サイトを参考にしましたが“Downloads”フォルダに入ってしまいます.
https://qiita.com/KWS_0901/items/33ae052e2e4694a6b4f1
↓サイトの方法を試しましたが解決しませんでした.
https://ja.stackoverflow.com/...
1
票
1
回答
848
閲覧数
Yahoo検索のスクレイピングで広告だけが取得できない
今現在、Python3でスクレイピングを学んでいて、試しにいろんなサイトをしていた際に、Yahoo検索をスクレイピングするのはグレーゾーンというのはわかっていますが、試してみたところ(何か使用したりすることはありません。)広告だけは取得できなかったみたいなので、不思議に思いました。
もともとはrequests+beautifulSoupを使って行っていたのですが、seleniumでも試したところ、...
1
票
1
回答
1,003
閲覧数
requestsとseleniumで取得できるcookieの種類
requestsのs.cookies.get_dict()とseleniumのdriver.get_cookies()で取得できるcookieの構造が違うのですが、なぜですか?
このrequestsで取得したセッションキーをseleniumの方に渡したいのですが、どこの値に入れれば良いかわかりません。詳しい方教えて頂けないでしょうか?...
1
票
1
回答
1,082
閲覧数
HTMLのボタンからPythonスクリプトを用いてSeleniumを実行する方法について
Python+Seleniumで特定のサイトにログインするスクリプトを作成しました。
Brythonを使ってHTMLで作成したページからボタンを押してこのPythonを実行したいのですがうまくいきません。Seleniumを使わずに、HTML+Brython+Pythonでブラウザからボタンを押すとHelloと表示されるものまで作成できましたが、
from selenium import ...
1
票
1
回答
756
閲覧数
Seleniumが突然使えなくなり再度インストールしようとするとエラーがでる
Seleniumが突然使えなくなりました
再度pipを使いインストールしようとすると以下のようなエラーがでます
同じような事例の方,もしくは解決法を知っているかたがいらっしゃいましたらご教授いただければ幸いです.
Collecting selenium
Using cached https://files.pythonhosted.org/packages/5e/1f/...
1
票
1
回答
1,690
閲覧数
pythonでselenium(Firefox)を使ったスクレイピングでエラー
pythonでselenium(Firefox)を使ったスクレイピングをしているのですが、
httpsのページにアクセスするとエラーになってしまい、困っております。
httpのページにはアクセスできます。
解決策をご存知の方がおられましたら、教えていただけないでしょうか。
Firefoxを使うのが必須条件です。
環境
centos6(vagrant)
python3.5
...
1
票
2
回答
2万
閲覧数
XPathで要素の存在を確認する方法
python2.7.10とseleniumとchrome driverです。
pythonでseleniumを使って、xpathを用いてfind_elementする際、そのxpathの要素が存在するかどうかで処理を分けたいのですが、どう記述すべきでしょうか。
driver.find_element(By.XPATH, '//*[@id="rank"]/tbody/tr[2]/td[1]')....
1
票
0
回答
151
閲覧数
同じ名前のclassがついているボタンから1つのボタンをクリックさせたい
やりたいこと
pythonとseleniumを使用して、毎日入力している勤怠の登録を自動化したいと考えています。
何をどうしたいか
現在苦戦しているところが、日付の分出てきているボタンをクリックすることです。
ボタンの箇所のhtmlは、実際のソースとは違いますが、以下のような形で日付分出てきています。
<table>
<tbody>
//1~5日のもの
...
1
票
0
回答
297
閲覧数
seleniumでのxpathのループ
seleniumを使用してスクレイピングをしたいと考えています。
下記のコードを実行するとxpathの部分のテキストが表示されます。
elem_username = browser.find_elements_by_xpath('//*[@id="__next"]/div/div[4]/div/ul/div[1]/a/div/div[2]/div/ul[1]/li')
...
1
票
0
回答
165
閲覧数
seleniumでスクレイピングをする際、xpathのループの仕方がわかりません。
実行環境
windows10
python3
jupyterlab
前提・実現したいこと
ツイキャスのランキングから配信者の名前とtwitterのリンクをseleniumを使用し
スクレイピングしたいと考えています。
xpathの一部を変えてループをしようとした段階でエラーが起きてしまいました。
実際のコード
from time import sleep
from selenium import ...
1
票
0
回答
835
閲覧数
phpでのseleniumを使ったスクレイピングについて
【Webブラウザの自動操作を使って、単純作業を効率化】Seleniumの実装方法について
上記サイトを参考に以下コードで実行いたしましたが、
PHP Fatal error: Uncaught Facebook\WebDriver\Exception\WebDriverException: JSON decoding of remote response failed.
...
1
票
1
回答
1,801
閲覧数
chromedriver で headless と user-data-dir のオプションを同時に指定するとエラーが発生する
下記のコードを実行するとエラーが発生します。
それぞれのオプションを個別に指定するとエラーになりません。
headless と user-data-dir は同時に指定できないのでしょうか。
実行したコード:
var driverDirectory = Path.GetDirectoryName(AppDomain.CurrentDomain.BaseDirectory);
var options ...
1
票
0
回答
417
閲覧数
Selenium×Node.jsでテスト実行すると「NoSuchSessionError: no such session」となりうまくいかない
前提・実現したいこと
自社プロダクトで人力で行っているシナリオテストの工数・負荷を削減したく
Selenium×Node.jsでテスト自動化を行おうとしていますが、調査の段階で詰まってしまっています。。。
環境
Mac OS10.12.6
Node 8.11.1
Selenium Server 3.12.0
Selenium WebDriver 4.0.0
ChromeDriver 2....
1
票
0
回答
136
閲覧数
Seleniumで複数階になっているドロップダウンメニューの選択の仕方を知りたい
単層での選択は可能なのですが、複数層になるとエラーが起きてしまいます。
できればnameやIDなど、日本語で表示されているものを入力して選択したいです。
driver.find_element_by_link_text(u"1段階目サンプル").click()
driver.find_element_by_link_text(u"2段階目サンプル").click()
driver....
1
票
2
回答
2,189
閲覧数
python + selenium + chromeでHTMLを読み込みたい
https://www.coin-laundry.co.jp/userp/shop_detail/10000543.html
上記サイトから稼働状況のテーブルを抜き出したいと考えています。
テーブル部分がjavascriptで生成されているようなので、headlessブラウザ(Chrome)をseleniumから操作して取得しようとコードを書いてみました。
import time
from ...
1
票
1
回答
1,051
閲覧数
python seleniumでjavascriptを無効にする
以下のようにwebdriverでFirefox起動時にjavascriptが無効になるように設定しているのですが、設定が反映しません。
from selenium import webdriver
profile = webdriver.FirefoxProfile()
profile.set_preference("javascript.enabled", False)
browser = ...
1
票
0
回答
1,596
閲覧数
SeleniumでFlashの操作をする時の誤動作?について
Seleniumを使ってあるブラウザゲームの自動プレイが出来たら良いなと思い、自動でログインから所定の動作をするPythonスクリプトを作成してみました。
スクリプトは以下の様な内容です。
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import time
## ...
1
票
0
回答
891
閲覧数
Selenium IDEからIEを指定するとJavaScriptError
環境は Windows 8 (64bit), IE11, Selenium IDE 2.8 です。
https://code.google.com/p/selenium/wiki/InternetExplorerDriver の "Required Configuration" に従って、レジストリの更新と保護モードを全てのゾーンでONに。
...
0
票
1
回答
193
閲覧数
デスクトップにあるcsvファイル名「fm_data20??_??_??」を検索してリネームさせたい
前提・実現したいこと
デスクトップにあるcsvファイル名「fm_data20??????」を検索して「アップロード.csv」に変更したいです。
「fm_data20??????」は日々変わるため、任意の一文字「?」を入れています。
import osとimport globをインポートするのだと思うのですが、
コードの書き方がイマイチよくわかりません。
よろしくお願いします。
...
0
票
1
回答
502
閲覧数
SeleniumでWebページ上の「もっと見る」ボタン以降のテキスト情報をスクレイピングする
Seleniumを使い、ページのテキスト情報をスクレイピングで取得しようとしています。
ページの途中に「もっと見る」ボタンがあり、以降の情報もすべて取得したいのですが、
「もっと見る」以前の情報しか取得されず困っています。
driver.get("https://r.nikkei.com/search?keyword=%E3%82%A4%E3%83%B3%E3%83%95%E3%83%AB%E3%...
0
票
1
回答
254
閲覧数
org.openqaをインポートして使うことができない
org.openqaをインポートして使うことができず、下記のようにnameエラーになってしまいます。
import org.openqa
No module named 'org'
-試したこと
・pythonを対話シェルにして、ひとつひとつ再確認致しまたが結果は一緒でした
・似たような事例を探してみましたが、同じような事例は発見できませんでした
ご教授いただけば幸いです、...
0
票
1
回答
121
閲覧数
ExcelからTwitter(selenium)で特定の条件がある場合、繰り返し処理を行う方法について
前提・実現したいこと
python:seleniumを使って
Excelから繰り返しデータを読み、Twitterで複数のデータを検索したいです。
B列に同じ国が2つ以上ある場合、Twitterで下記のように検索したいです。
Excel データ
1 アメリカ カリフォルニア
1 アメリカ フロリダ
2 フランス パリ
3 日本 東京
検索したい順番
アメリカ "...
0
票
1
回答
219
閲覧数
CSVに書いたURLのスクショをSeleniumで撮影する方法
下記のページを参考に試してみたのですがうまくいきませんでした。
CSVに書いたURLを順番に開いて全画面スクリーンショットを取るスクリプト - Qiita
urls.csv内のURL情報を read_csv.py で読み込むのは成功。
しかし、test_screenshot.py 内の ChromeDriverManager というモジュールが自分のPCに無いらしくスクショを撮影できません。
...
0
票
2
回答
1,322
閲覧数
C++で書いたwindowsアプリケーションにpythonを埋め込む
C++でwin64 apiを使ってガワだけ作ったアプリケーションにpythonを埋め込みたいのですがどうすればいいのでしょうか?
Pythonがインストールされていない環境でも動かしたいので、アプリケーションの中にPythonを同梱したいと考えています。
Windows x86-64 embeddable zip fileというものを使えば実現できそうなのですが、visual studio ...
0
票
2
回答
5,975
閲覧数
HeadlessモードでChromeDriverを起動したときにコンソールが表示されないようにする
GUIのアプリを作っています。
その中でスクレイピングをするために
chromedriverとseleniumを使ってHeadlessモードでChromeを動かしているのですが
起動するとコンソールが開きchromedriverのログが表示されてしまいます
GUIなので表示されないようにしたいのですがどうすればいいのでしょうか?
OS windows10
Python 3.6.3
...
0
票
1
回答
543
閲覧数
seleniumのPhantomJS上でHTML要素のheight,widthを取得する方法
目的
http://www.tenki.jp/forecast/3/16/4410/13208.html
このページの「調布市の警報・注意報」部分のheight,widthの取得
やったこと
from selenium import webdriver
URL = "http://www.tenki.jp/forecast/3/16/4410/13105-daily.html"
driver ...
0
票
1
回答
868
閲覧数
Microsoft Edge のSelenium用のWeb Driverについて
Windows 10 Anniversary Update(14393)後のMicrosoft Edgeに対応するSelenium用のWeb Driverを以下よりダウンロードしました。
https://developer.microsoft.com/en-us/microsoft-edge/tools/webdriver/
本来ダウンロードセンター(https://www.microsoft....
0
票
1
回答
157
閲覧数
seleniumで要素を取得できない
http://www1.river.go.jp/cgi-bin/SrchSiteSui2.exe
こちらのリンク先にある水系と観測項目をpythonのseleniumを使って自動入力したいです。
まずは一つずつ、水系から試そうと思い以下のコードを実行しました。
from selenium import webdriver
from selenium.webdriver.support.ui ...
0
票
1
回答
732
閲覧数
"NameError: name 'url' is not defined" の解決方法を教えてください
Windows10, ANACONDA.NAVIGATOR から JupyterLab 3.0.14 を起動して、
"【Selenium】スクレイピング対策を突破する方法" サイトを参照して、コードをコピーペーストして実行した所、エラーが表示されました。
エラーを検索して解決を試みましたが、自身のスキル不足で解決できません。
ご教授お願いします。
エラーメッセージ:
...
0
票
2
回答
1,258
閲覧数
Seleniumで取得保存したファイル名の特定
Ubuntu+Python+SeleniumでChromeを自動化し、Saveボタンをクリックしてファイルをローカルに保存するところまで出来ましたが、このファイル名が手動で制御出来ず、取得元のサイトが検索ワードに基づいて付けた適当な名前になります。
この、たった今保存されたファイルのファイル名をPythonで取得する場合、どの方法が賢いでしょうか。
ディレクトリを検索し、...
0
票
1
回答
432
閲覧数
Seleniumの要素を特定しているnameの取得方法が分からない?
こちらのQiita記事を参考にSeleniumの勉強をしています。
Ubuntu、Python3、Chromeを使っています。
以下のサンプルコードについて質門です。
import time
from selenium import webdriver
driver = webdriver.Chrome()
driver.get('https://www.google.com/')
time....
0
票
1
回答
207
閲覧数
for文でのappendについて
python・プログラミング初めて3日ほどのド初心者です。
今回、Python・SeleniumでのWebスクレイピングに挑戦しております。
質問に際して、至らない点ございましたら、申し訳ございません。
実現したいこと
next_page_url_all → 「次のページ」をクリックした際に表示されるをURLを事前に取得しています。(リスト)
...
0
票
1
回答
625
閲覧数
Edgeブラウザでseleniumを使用できない
Edgeブラウザでseleniumを使用しようとする際に
以下のようなエラーがありました。
selenium.common.exceptions.SessionNotCreatedException: Message: session not created: No matching capabilities found
...
0
票
1
回答
364
閲覧数
PythonでExcelからデータ読込後、ブラウザで検索
やりたいこと
Excelからデータを読み込み,yahooで交通費検索したいです。
各項フィルドごとで作業を繰り返したいです。
以下のサイトと同様な処理をPandasで実現したい。
参考:
PythonでExcelからデータ読込→サイトで交通費検索→Excelへデータ書込
Pythonでエクセルから情報を取得して検索エンジンに入力!
Excelのデータ
日付 出発 到着 ...
0
票
1
回答
1,732
閲覧数
Google Chromeの自動更新を停止したい
環境
macOS high sierra
Google Chrome 86.0.4240.80 (Official Build) (x86_64)
理由
seleniumを使用しており、バージョンが変更されるたびにwebdriverをインストールするのが大変なので、chromeの自動更新を停止したいです。
試した事
下記のサイトを参考に defaults write com.google....
0
票
1
回答
505
閲覧数
Seleniumを使ったスクレイピングで、最後のページが終了したらbreakさせたい。
目的
↓のURLに表示される全ての一覧ページの求人詳細URLを取得したい。
(ただし、求人の数は変動する。今回は291件)
https://next.rikunabi.com/eigyo/lst_jb0101020000/
期待する結果
[https://next.rikunabi.com/company/cmi2566412298/nx1_rq0016317040/?fr=cp_s00700&...
0
票
1
回答
1,202
閲覧数
seleniumのheadlessモードを使用した時に、iTunes Connectのログインページのスクショを取得したい
検証したこと
headlessモードの部分をコメントアウトして実行
⇒メアドやパスワードを入力してclickする部分も、問題なく動作する
chromeのトップページにheadlessモードでアクセスし、スクリーンショットを取れるか検証
⇒問題なく取得できた
以上のことから、iTunes Connectのサイト都合なのか、それ以外で回避方法あるのか教えていただけると幸いです。
...
0
票
1
回答
370
閲覧数
Ubuntu19.10のChromiumのログの場所がわからない
Ubuntu19.10を使っているのですが、Chromiumのログの場所がわかりません。どこにあるのでしょうか?
seleniumからChromiumを操作していて、なにかしらのエラーが起こるのでその時のChromiumのログを見たいです。
どうも起動時のオプションに--enable-loggingと --log-level=0を設定すると~/.config/chromiumに
...
0
票
1
回答
996
閲覧数
python selenium ログインIDとパスワードをコードの外に別ファイルにして管理したいです。
前提・実現したいこと
python selenium ログインIDとパスワードをコードの外に別ファイルにして管理したいです。
ネットで調べるとconfigparserとiniを使うとのことで試してみました。
config.iniファイルをデスクトップに置いて、それを読み込みにいくのだと思うのですが上手くいきません。
configparserとiniファイルを使う方法でなくてもいいのですが、...