BOT PROFILE / 001
Bytespiderとは?
実測ログから、ボットの量・扱い・判断材料を分けて見ます。
THIS MONTH / AUTO UPDATE
今週の実測
2026-08-03〜2026-08-30(28日間)・全ステータス計・自社観測サイト n=1(effect.moe)・同一観測窓- Googlebot
- 950件
- ClaudeBot
- 888件
週次推移
初観測日 2026-08-01 / 最終更新 2026-08-31- 8/10週655件
- 8/17週797件
- 8/24週400件
- 8/31週36件集計中
Bytespiderとは何のクローラーですか?
Bytespider(バイトスパイダー)は、TikTokの親会社であるByteDance社が運営するクローラーです。AI開発のためのデータ収集が目的とみられていますが、GoogleやOpenAIのクローラーと違い、公式の説明ドキュメントや管理方法がほとんど公開されていません。
海外の調査では、世界で最もリクエスト数の多いAIクローラーと報告されたこともあります。
なぜBytespiderは問題視されているのですか?
理由は3つあります。
- アクセス量が多い 当サイトの実測でも、2026-08-03〜2026-08-30(28日間)で2,274件と全クローラー中最多でした。検索エンジンのGooglebot(950件)の2倍以上です。
- robots.txt に従わないという報告が多い サイト側が「読まないでください」と指定しても従わないケースが第三者の検証で繰り返し報告されています。
- 素性の確認手段がない 公式のIPアドレス一覧が公開されていないため、「Bytespiderを名乗るアクセスが本物かどうか」を名乗りから確認できません。
FAQ
Bytespiderのよくある質問
Bytespiderとは何のボットですか?
TikTokの親会社ByteDance社のクローラーです。AI開発のためのデータ収集が目的とみられますが、公式の説明はほとんど公開されていません。
Bytespiderはブロックすべきですか?
判断の材料は「得られるものと負担の比較」です。Bytespiderを許可して得られる露出のメリットは現時点で不明確な一方、アクセス量は多く、挙動への懸念報告もあります。当観測所の分類では「悪質・不明系」です。ブロックを選ぶサイトが増えていますが、実施の際は影響確認とセットで行ってください。
Bytespiderはrobots.txtに従いますか?
従わないという報告が第三者の検証で繰り返し共有されています。robots.txtは「お願い」であり、従うかどうかはボット側次第です。確実に止めたい場合は、サイトに届く前の段階で制御する方法が現実的です。
BytespiderをブロックするとSEOやAI検索に影響はありますか?
Google・Bingの検索順位や、ChatGPT・Perplexity等のAI検索での紹介には影響しません(それぞれ別のクローラーが担当しているためです)。TikTok系サービスでの露出への影響は不明です。
Bytespiderはどれくらいアクセスしてきますか?
当サイトの実測では、2026-08-03〜2026-08-30(28日間)で2,274件でした。これは検索エンジンのGooglebot(950件)を大きく上回り、全クローラー中で最多です。(数字は毎週更新されます)
BytespiderはTikTokと関係がありますか?
運営元のByteDance社はTikTokの親会社です。ただし、収集したデータがどのサービスにどう使われるかの詳細は公開されていません。
Bytespiderを名乗るアクセスが本物か確認できますか?
公式のIPアドレス一覧が公開されていないため、名乗りだけでは確認できません。発信元や挙動から総合的に判定する必要があり、当社ではこの判定を継続的に行っています。
AI SHIELD / NEXT STEP