AI Apr 19, 2026 1 min read
Cloudflare가 paid plan 고객에게 AI training crawler를 최신 canonical URL로 301 redirect하는 기능을 열었다. 자체 docs에서 30일간 AI crawler 방문 4.8M회를 본 뒤, deprecated content를 학습 데이터로 흘려보내는 문제를 HTTP status code로 막겠다는 접근이다.
Cloudflare가 paid plan 고객에게 AI training crawler를 최신 canonical URL로 301 redirect하는 기능을 열었다. 자체 docs에서 30일간 AI crawler 방문 4.8M회를 본 뒤, deprecated content를 학습 데이터로 흘려보내는 문제를 HTTP status code로 막겠다는 접근이다.
OpenUI는 openui-lang parser를 Rust/WASM에서 TypeScript로 다시 쓰면서 one-shot parsing이 2.2배에서 4.6배 빨라졌고, streaming parse cost도 최대 3.3배 줄었다고 밝혔다. 핵심 원인은 JS-WASM boundary overhead와 O(N^2) 재파싱이었다.