ポスト
国に言っても埒があかなそうなので、もしも関心があって、「どうにか自分の使っているサイトでもスクレイピングの拒否をしてほしい」と思っている方は、メールしてみてください。 チェック方法：URLの最後にrobots.txtをつけて送信 User-agent: * Disallow: / すべてのbotが拒否されています。個別は↓ pic.twitter.com/Cj1kdOT6mC
メニューを開くみんなのコメント
メニューを開く
NICT収集拒否方法の解説ページ ucri.nict.go.jp/icccrawler/ User-agent: ICC-Crawler Disallow: / OpenAIの拒否設定 User-agent: OpenAI Disallow: / 自サイトで拒否するときも↑でOKです。 皆で問い合わせてみるのが一番だと思います。
