たつをの ChangeLog
: 2022-08-30
前後の日:
2022-08-29
< >
2022-08-31
この月:
2022-08
別の年の同じ日:
2000
2001
2002
2003
2004
2006
2007
2008
2009
2010
2012
2013
2015
2016
2017
2018
2019
2020
2022
お行儀が悪い暴走クローラーは排除
2022-08-30-1 [
Kndlsl
][
Maintenance
]
たぶん同じ人が動かしているクローラーなのだろうが、キンセリ内の同じページに短時間に連続で100回とかアクセスするIPがいくつかある。
キンセリの個別セールページへのアクセスの半分がこれ。
キンセリは1ページあたりのデータサイズが大きいので、こういうのほんと困る。
DoS攻撃とまではいかないけどご迷惑。
さくらインターネットの500円サーバ
でエコくやっている身として。
調べてみるとどれも GOOGLE CLOUD の IP みたい。
2020年12月あたりからアクセスがあり、暴走(連続アクセス)は今年8月20日ごろから。
その後、毎日着実に暴走連続アクセスが増加。
まあ、DB が壊れたかなんかでアクセス先 URL の redup に失敗したのかと。
身につまされる感あり。
ということで、サクッとIP制限。
UA はほとんどが python-requests でときどき HeadlessChrome とかなので、一般の方にはなんの影響もないでしょう。
アデュ〜!
前後の日:
2022-08-29
< >
2022-08-31
この月:
2022-08
別の年の同じ日:
2000
2001
2002
2003
2004
2006
2007
2008
2009
2010
2012
2013
2015
2016
2017
2018
2019
2020
2022
たつをの ChangeLog
Powered by
chalow