[mechanize] タグが付いた質問
7 件の質問
2
票
1
回答
402
閲覧数
Rails+MechanizeでHeroku上でスクレイピングした時に500エラー
前提・実現したいこと
フォームにURLを入力した時に、Mechanizeを使い非同期でスクレイピングして情報を取得、そのままjqueryを使い他のフォームへ情報を書き込みたいです。
ローカルでの動作です。
Heroku上で動作させると、同じアドレスでも500エラーで返ってきます。
発生している問題・エラーメッセージ
ローカルではうまく動いているものが、...
0
票
1
回答
1,155
閲覧数
rubyでスクレイピングをしたいが、mechanizeがrequireできない
スクレイピングをしようとして実行すると以下のように表示されます。
調べてもわからず困っています。どなたか解決方法をお願いいたします。
$ ruby scraping_image.rb
/Users/〇〇〇/.rbenv/versions/2.3.1/lib/ruby/2.3.0/rubygems/core_ext/kernel_require.rb:55:in `require': ...
0
票
1
回答
171
閲覧数
Mechanize::Formの動的に生成されるメソッドに関するドキュメント
Mechanize::Formでは以下のようにname要素での指定と等価の事が動的に生成されるメソッドでも実現できるようですが、それに関する記述はドキュメントのどこにあるのでしょうか?
agent.get(login_url).form_with(action: '/foo/login.do') do |f|
f.username = 'username'
# f.field_with(...
0
票
1
回答
1,934
閲覧数
Ruby/Mechanizeでのスクレイピングで対象の要素を絞り込む方法と複数のURLを処理する方法
RubyでMechanizeを使用しでスクレイピングを行いたいです。
<div id="movie_photo">
<a href="movie/83603/">
<img alt="ポスター画像" src="画像のURL">
という構成のWEBサイトから、画像のURLを取得したいです。
問題が2つあります。
1つめが
require '...
0
票
1
回答
280
閲覧数
railsのMechanizeでのスクレイピングについて
<table class ="profile">
<tr>
<td class="title">ほげ1</td>
<td class="content"ほげ</td>
</tr>
<tr>
<td class="title">ほげ2</td>
<...
5
票
4
回答
2,204
閲覧数
「パスワードを入力しダウンロード」を自動化
kienuというファイルアップローダーで,パスワードを入力しダウンロードする作業を自動化したいと思っています.
web上ではフォームにパスワードを入力し,送信すると自動的にダウンロードが開始されます.
例えば以下のリンクでは「full123」と入力し,DOWNLOADボタンをクリックします.
https://kie.nu/22W5
pythonのmechanizeでフォームに入力しsubmit()...
1
票
1
回答
157
閲覧数
pythonのmechanizeで応答がない
以下のスクリプトを実行すると、応答が返ってきません。
import mechanize
b = mechanize.Browser();
b.set_handle_robots(False);
h = b.open('http://stocks.finance.yahoo.co.jp/stocks/detail/?code=2726');
他のurl(http://www.google....