AI Apr 19, 2026 1 min read
Cloudflareはpaid plan向けに、verified AI training crawlerをcanonical URLへ301 redirectする機能を出した。自社docsで30日間にAI crawler訪問4.8M回を見たうえで、deprecated contentをtraining dataへ流さないためのHTTP layerの対策に踏み込んだ。
Cloudflareはpaid plan向けに、verified AI training crawlerをcanonical URLへ301 redirectする機能を出した。自社docsで30日間にAI crawler訪問4.8M回を見たうえで、deprecated contentをtraining dataへ流さないためのHTTP layerの対策に踏み込んだ。
OpenUIは、openui-lang parserをRust/WASMからTypeScriptへ書き直すことで、one-shot parsingが2.2倍から4.6倍高速化し、streaming parse costも最大3.3倍下がったと報告した。主因はJS-WASM boundary overheadとO(N^2)の再parseだった。