[phantomjs] タグが付いた質問
10
質問
1
票
2
回答
2,397
閲覧数
python + selenium + chromeでHTMLを読み込みたい
https://www.coin-laundry.co.jp/userp/shop_detail/10000543.html
上記サイトから稼働状況のテーブルを抜き出したいと考えています。
テーブル部分がjavascriptで生成されているようなので、headlessブラウザ(Chrome)をseleniumから操作して取得しようとコードを書いてみました。
import time
from ...
0
票
1
回答
452
閲覧数
Google ColabにおけるPhantomJSの使い方
Google Colabでスクレイピングの練習をしているのですが、以下のコードを動かしても以下のようなエラーが出てしまいます。どのようにPATHを指定すればこの問題は解決するのでしょうか?
コードは https://review-of-my-life.blogspot.com/2017/10/python-web-scraping-data-collection-analysis.html ...
0
票
0
回答
2,745
閲覧数
PythonでPhantomJSが使えない
python3.4
PhantomJS 2.1.1
selenium 3.0.2
OS X 10.10.5
$which phantomjs
/usr/local/bin/phantomjs
$phantomjs
phantomjs>(起動してる。。?)
となっております。
PhantomJSは/usr/local/bin/phantomjsにあり、。
PATH=$PATH:/usr/...
1
票
2
回答
394
閲覧数
phantomjs 2.0.0以降にするとpoltergeistでstatus_codeが304になることがある
poltergeist gem の 1.9.0 がリリースされて、新しい phantomjs のサポートが入ったので、 phantomjs を更新してみたところ、リダイレクトを返す URL に2回目以降に visit したときに page.status_code が 200 ではなく 304 になってしまい困っています。
具体的には https://github.com/znz/test304/...
0
票
1
回答
202
閲覧数
Selenium(PhantomJSDriver / FirefoxDriver)で表示した特定ページのみ、HTMLが取得できない
環境は
CentOS7.0(CentOS Linux release 7.2.1511 (Core))
Selenium 2.45.0
PhantomJsDriver (jar) 1.1.0
PhantomJsDriver (本体) 1.9.7
java 1.8.0
Spring 4.2.0
ランダムに設定したURLを、Seleniumから表示し、取得結果をログ出力すると、
...
4
票
1
回答
971
閲覧数
scrollToBottomについて
環境
OS:CentOS release 6.6 (Final)
casperjs:1.1.0-beta3
phantomjs:1.9.8
概要
上記環境からスクレイピングを行い、指定したページの全画面をキャプチャしたいと考えております。
現状、指定ページの一部キャプチャは保存できるようになりましたが、そのページはマウスの↓スクロール操作で徐々にリストが表示されるタイプ動的サイトのため、...
1
票
1
回答
337
閲覧数
PhantomJSでCookieが動作しない
PhantomJSをDockerで構築し、試しにスクリプトをスクリプトを動かしてみたのですが、Receiveで受け取ったSet-CookieをRequestのヘッダーにセットしてくれないようで、困っています。
Dockerは、下記を使用しています。
https://hub.docker.com/r/cmfatih/phantomjs/
試したスクリプトは、下記です。
'use strict';...
1
票
1
回答
2,505
閲覧数
capybara(+ Poltergeist)でaタグがclick_on出来ない
前提・実現したいこと
rails+capybara(+Poltergeist)でスクレイピングをしようとしています。
aタグをクリックして次のページに移動する動きしようとしているのですがうまく動きません。
発生している問題・エラーメッセージ
Failures:
1) test next20
Failure/Error: click_on "次の20件"
...
1
票
0
回答
304
閲覧数
Selenium::WebDriverでphantomjsを使っている時のHTTPヘッダーの確認方法
Selenium::WebDriver.for :phantomjsで作成したDriverクラスが特定のページにアクセスする際のHTTPヘッダーを確認したいのですが、どうすれば見られますか?
ChromeやFirefoxの場合は開発ツールを使えば確認できるのですが、Phantomjsの時はどうすれば見れるかを調べられませんでした。
PC全体のパケットを監視するなどの方法しかないのでしょうか?
3
票
1
回答
832
閲覧数
Mac + Selenium2 + PhantomJS で PhantomJS が起動しない
環境
Mac OSX Yosemite (10.10.2)
Selenium: 2.44.0
PhantomJS: 2.0.0
症状
Mac で PHP のウェブアプリを、 PHPUnit を使ってエンドツーエンドのテストを書いています。
先週頃まで Selenium2 + PhantomJS がうまく起動していたのですが、最近になって起動しなくなってしまいました。
何か原因でしょうか?
...