ElevenLabsボット
robots.txtでElevenLabsボットによるサイトへのアクセスを管理
ElevenLabsは、AIモデル用に公開コンテンツを収集し、プロダクト用にページを取得するため、Webクローラーを使用しています。サイト所有者は、以下のユーザーエージェントトークンをrobots.txtに記述して、アクセスを管理できます。各設定は独立しています。たとえば、ElevenlabsCrawlerを拒否しながら、ElevenlabsBotを許可してElevenLabsエージェントがサイトのページを利用できるようにすることができます。robots.txtの変更は、約24時間以内に反映されます。