Webスクレイピングとかいう糞つまらないプログラミング [991549713]
■ このスレッドは過去ログ倉庫に格納されています
画像や動画のURL抽出に一生懸命になったことある人いるでしょ むしろめっちゃ面白くね?
禁止してるサイト増えてるから仕事でやるにはつまらないけど
>>3
なんかデコーダ作りと同じようなもんで創造性がない それ系で飯食ってるけど早く役所の出すフォーマットを統一してくれ スクレイピングは面白いけど、逮捕される可能性があるからやめた スクレイピング以外でウェブサイトから情報引っ張ることできるの? >>11
サービス提供側がAPI出してくれればいいんだよな Amazonのスクレイピングってどうやんの?アクセス頻度すごい落としてもすぐフォビドゥンになる 昔エロサイトの画像のURLだけ抽出して片っ端からダウンロードソフトに突っ込んでダウンロードしたりしてた スクレイピング禁止のサイトなんてあるの?
それ禁止ならWebブラウザ禁止って言ってるようなもんじゃん
どっちもレスポンスを何らかの処理して何処かへ出力するだけじゃん >>28
禁止は無理
そして業務妨害とみなされるような過剰なアクセスしない限り犯罪にもならない seleniumでコーディングしたらすぐだわ。マネタイズしたい 副作用報告とか表に出さず検索画面しかないやつをスクレイピングすると大変興味深いものが見られる ■ このスレッドは過去ログ倉庫に格納されています