はてなブログのクローラについて

はてなブログでは、はてなブログ内の様々な機能を提供するために、ユーザーの指定に応じて自動的に他のページへアクセスし情報を収集することがあります。その際、以下のUser-Agentを指定してアクセスします。

HatenaBlog-bot/0.02 (+https://help.hatenablog.com/entry/about-hatenablogbot)

User-Agent は、はてなブログ以外のシステムでも同じ値を指定することができます。参考情報としてご利用ください。

取得した情報の主な用途は、以下の通りです。

  • はてな記法 URL記法の :title オプション
    • タイトルの自動表示に利用します
  • はてな記法 URL記法の :embed オプション
    • ブログカードの情報取得に利用します (ページタイトル, 概要, ファビコン等)