サイトオーナー・ウェブマスター向け情報

ビカム株式会社のクローラー（BecomeJPBot）と関係のない他社のクローラーを混同された方からご連絡をいただいております。

BecomeJPBotには64.124.85.0～64.124.85.255というIPアドレスが割り当てられています。上記IPアドレス以外からのアクセスかどうかをご確認ください。

ビカム株式会社

BecomeJPBotについて教えてください。: BecomeJPBotはBecome.co.jpウェブクローラーのユーザーエージェントです。
BecomeJPBotを活用し、弊社インデックスに追加するショッピング関連のウェブサイトを識別し、ショッピングガイド、商品レビュー、商品に関する記事、スペック情報、フォーラムなど、ショッピング関連のリサーチがあるサイトを特に重視しています。

BecomeJPBotにサイトをクロールさせる方法を教えてください。: BecomeJPBotは新しいショッピング関連ページや更新されたページを見つけるために定期的にウェブ上をクロールしています。そのためサイトオーナー様より改めてクロールをご依頼いただく必要はありません。

BecomeJPBotにサイトをクロールさせない方法を教えてください。: BecomeJPBotは標準的なrobot exclusion file（英語）を遵守しており、 exclusion fileでクロールが禁止されているサイトはクロールしません。サイト内の/cgi-binディレクトリをBecomeJPBotがクロールすることを全面的に禁止するには、下記の2行をファイル内に追加します。
User-agent:BecomeJPBot
Disallow:/cgi-bin/

BecomeJPBotがサイトをクロールする際のスピードをコントロールする方法を教えてください。: BecomeJPBotはポライトネスポリシーに基づいて各サイトをクロールするスピードを動的に変更することが可能です。初めてクロールするサイトでは BecomeJPBotは時間をかけてウェブページをダウンロードします。帯域幅やサイト内のウェブページ数をはじめとする諸条件に基づき BecomeJPBotは自動的にクロールのスピードを調節します。
Crawl-Delay機能を使用するとサイトへのアクセス間隔を秒単位でスピードコントロール指定ができます。サイト内のページ数が多く、Crawl- Delay機能が高く設定されている場合には、クロールの所要時間が長くなることがあります。サイトアクセスのリクエスト間隔の設定方法については下記を参照してください。
例：リクエスト間隔を 30 秒に設定する方法：User-agent: BecomeJPBot
Crawl-Delay:30
Disallow:/cgi-bin

その他ご質問、ご不明な点などがございましたら、info@become.co.jpまでお問い合わせください。