にしし ふぁくとりー:西村文宏 個人サイト

No.3140 - 今日のひとことログ

更新

■LOG No.3140

にししふぁくとりーHOMEに掲載している「今日のひとこと」の過去ログ(掲載履歴)です。 RSS

No.3140 〔314文字〕 📖

私が管理しているとあるウェブサイト(ここではない)で昨日にBotからのアクセス頻度を制限するようフィルタを調整したところ、APIリクエスト数を6割減くらいにまで削減できた。ちょっと制限しすぎたかな、と思わないでもない。Bingbot(=Microsoftの検索サイトBingから来るクローラー)が凄まじく大量にアクセスしまくっていたことに驚いたのだが、robots.txtに制限(Crawl-delay)を書くだけであっという間に制限に従ってアクセス頻度を低下してくれたことにも驚いた。さすがにMicrosoftの名前を冠してアクセスしてくるだけあって、(デフォルトの行儀はともかく)明示的な制限にはきっちり従ってくれるようだ。
2020年12月
12345
6789101112
13141516171819
20212223242526
2728293031
2021年1月
12
3456789
10111213141516
17181920212223
24252627282930
31
2021年2月
123456
78910111213
14151617181920
21222324252627
28

Powered by てがろぐ Ver 3.7.0

--- 当サイト内を検索 ---