スクレイピング禁止のサイトなんてあるの？
それ禁止ならWebブラウザ禁止って言ってるようなもんじゃん
どっちもレスポンスを何らかの処理して何処かへ出力するだけじゃん