カオスゼロナイトメア、クラウドフレア-ガリとモノリス

カオスゼロナイトメアのwiki、海外からのボット弾くためにクラウドフレアっていうネットファイアウォールを入れて負荷をちょっとでも軽減しようとしてる。

で、9月15日。

クラウドフレアの更新があってAI学習のためのクローラーをブロックするかどうするか、っていう設定が追加されたんよね。

特に何も設定してなかったんで一応確認しとくかーで無駄に長い公式ガイドを読み進めていくと、

……

…

これあれだな。初期設定だとダメなやつだな。

少なくともブロックじゃなくてdisallowにしとかないとかなりヤバい気がする。

クラウドフレア公式の英語記事を翻訳して読んでるから間違ってるかもしれないけど、

となってるみたい。

…なんか通す通さないってあれだな。キマリみたいだな。どうでもいいか。そか。

で。

グーグルのAIクローラーとかって混合なんよな、これもクラウドフレアのガイド読む限りそう書いてある。

ちなみに混合クローラーっていうのは一回のクロールでAI用にも検索用にも、さらにAIトレーニング用にもクロールしまっせ！っていうハイブリッドクローラーの事…らしい。

で、つまり「ブロック」にしてしまうとグーグルの検索結果にすら上がらなくなるという事みたい。disallowにした場合はこれはもうrobots.txtを見れば一番わかりやすいけど、グーグルのAI目的のクロールははじくようになっていて、通常の検索用途にはクロールしてほしいというように書かれてる。

いや説明と違うじゃん。用途別で別れてるなら混合じゃなくない？「ブロック」の場合でもそこ見分けるようにしてほしい、と思うけど、なんかそうなってないっぽい。

なのでとりあえずクラウドフレア使ってる人はブロックにするんじゃなくてdisallowにするのがいいと思う。

…でもまーあれだな。クラウドフレアのデフォルト値がグーグルを遮断する形になっているのは、グーグルの検索がもうほぼ機能してないってことの象徴なんかもしれない。

AI要約やAIチャットで聞いてそこで答えが出るからその情報源のサイトに人が来なくなってるんだよな。んじゃグーグルに取り立ててもらう事にこれまでのような価値がもうないってコト。逆にグーグルにクロールされることでサイトの情報がある意味盗まれるから遮断するのをデフォルトにしてる。

それを今回のアップデートでクラウドフレアが強く主張してる気がする。

こうなると何が怖いって、こんごAI要約がどんどんバカになる可能性があるってコト。

学習できないから言ってることがどっかのようわからん記事を鵜呑みにしたことしか言わなくなる可能性がある。

まとめ

何が言いたいかっていうとカオゼロのwikiが一時的にグーグルとかその他だいたいのクローラーがこれない状態になってたっぽい、ってこと。

早めに気づけてよかったのか、翻訳が間違ってて特に何もしなくてもよかったのか。真相は闇の中。