クローラーは、コンテンツやメタデータなど、ウェブページにあるものを自動的にスキャンするプログラムです。広告主として、クローラーの仕組みを理解することは重要です。キャンペーンを開始・実行するには、Taboolaのシステムがランディングページをうまくクロールする必要があるからです。
Taboola Crawlerの仕組み
広告主としてページのコンテンツをスキャンするため、キャンペーンに追加するURL はすべてクローラーによってクロールされます。クローラーはサイトのメタデータからタイトルとサムネイルも取得します。
クローラーがページのクローリングに初めて失敗した場合は、その後何度か試行を繰り返します。
重要事項!
クローラーにサイトコンテンツのクロールを許可する必要があります。また、クローラーが取得したコンテンツは、ユーザーがランディングページを訪れたときに閲覧するコンテンツと同じでなければなりません。これら2つの要件が満たされていない場合、システムはあなたのキャンペーンを実行することができません。
クローリングエラーの回避方法
http://www.taboola.com/" ウェブページをクロールさせるためには、クローラーをホワイトリストに登録しなければならない場合があります。登録に必要な情報はこちら： User agent: Mozilla/5.0 (compatible; Taboolabot/3.7; +http://www.taboola.com)
警告!
「bot」という単語でサイトのクローリングをブロックしている場合、クローラーをホワイトリストに登録することは特に重要です。
また、クローラーが検索できるようにサイトコードにタイトルとサムネイルの情報を必ず記載してください。
- クローラーはキャンペーンアイテムタイトルとしてタイトルが使用されているかを検索します。2つの事例をご紹介します：
<meta property="og:title">
<meta name="title">
- クローラーはキャンペーンアイテムサムネイルとしてサムネイル画像が使用されているかを検索します。2つの事例をご紹介します：
<meta property="og:image">
<meta name="item-image">
<meta property="thumbnail-taboola-internal-key">
<link rel =’image_src’>
問題が発生した場合は、アカウントマネージャーまたはsupport@taboola.comまでご連絡ください。
重要事項!
必要であれば、Backstageでタイトルとサムネイル画像を変更することができます。詳細はこちらをご覧ください。
パブリッシャーに対してクローラーはどのように使用されるか
クローラーはTaboolaのパブリッシャーページもすべてクロールします。言い換えれば、コンテンツアイテムが表示されるページをクロールするということです。クローラーは、キャンペーンアイテムの設置場所を賢く決めるために、パブリッシャーページのコンテンツを確認するのです。