アカウント名:
パスワード:
普通のブラウザを使ってクローニングされたら全く今までと同じようにscにクロールされちゃうんだけどそれはどうするの?ブラウザからのアクセスを弾くわけにもいかないでしょ?
API以外への連続アクセスや転送量の多いホスト弾くぐらいじゃね
ボットネットを使った分散処理とマージでなんとかなりそう。
そこまでするメリットがないのはおいといて。
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
皆さんもソースを読むときに、行と行の間を読むような気持ちで見てほしい -- あるハッカー
ウェブスクレイピング禁止はどうするの? (スコア:0)
普通のブラウザを使ってクローニングされたら全く今までと同じようにscにクロールされちゃうんだけどそれはどうするの?
ブラウザからのアクセスを弾くわけにもいかないでしょ?
Re: (スコア:0)
API以外への連続アクセスや転送量の多いホスト弾くぐらいじゃね
Re:ウェブスクレイピング禁止はどうするの? (スコア:0)
ボットネットを使った分散処理とマージでなんとかなりそう。
そこまでするメリットがないのはおいといて。