httpx

「Screaming Frogを自作しようぜ」とClaude Codeに話しかけたら1セッションで動くSEOクローラーが完成した話。非同期クロールの設計とbase_netloc問題の対処、競合クロールで見えてきたものを書く。