とあるウェブサイトで数日前からGoogleに対して本格的にサイトマップ(自動生成)を送信するようにしてみたら、昨日1日で85,082回ほどクロールされていた。ほとんど1秒1回ペースだ（1日は86,400秒である）。しかし、外部サービスのAPIはそこまでの高頻度では使えないので、正しくコンテンツを返せたのは28,568回(33％)で、54,512回(64％)は429（Too Many Requests）エラーを返すことになった。残りの多くはたぶん404（Not Found）なのだが、949回ほど406（Not Acceptable）が返されていた。429エラーは（API利用権の消費を調整するために）自前のPHPであえてそのレスポンスコードを返しているのだが、406を返すような処理は書いていないので、なぜこんなレスポンスコードが返されているのか原因は分からない。もっとも、Googlebot以外も含めて24時間で1,006回(＝全体の0.87％)でしか返していないので、まあ無視していても良いとは思っているのだが。とりあえず、5万回も429エラーを返しているので、そのうちGooglebotも望ましいアクセス頻度を学習してくれるものと期待したい。