にしし ふぁくとりー:西村文宏 個人サイト

No.1778 - 今日のひとことログ

更新

■LOG No.1778

にししふぁくとりーHOMEに掲載している「今日のひとこと」の過去ログ(掲載履歴)です。 RSS

No.1778 〔233文字〕

クローラーの中には1日に数万回もリクエストを送ってくるような悪質なBotもある。外部サービスのAPIを利用して生成しているページでは、APIの利用権を使い切ってしまうと困るので、Botからのアクセスは8~9割方拒否する(=HTTPステータスコードの429を返す)ような設定にしてある。ただし、良心的なアクセス頻度に留めてくれる(上に検索でも役立つ)GooglebotとBingbotは除いている。その例外リストにApplebotも含めておいた方が良いのかも知れない。
2020年5月
12
3456789
10111213141516
17181920212223
24252627282930
31
2020年6月
123456
78910111213
14151617181920
21222324252627
282930
2020年7月
1234
567891011
12131415161718
19202122232425
262728293031

Powered by てがろぐ Ver 3.7.3

--- 当サイト内を検索 ---