仮想 robots.txt に記述を追加する

投稿日 2013/08/11

WordPress 3.6 を使用。

WordPress は robots.txt¹ を自動で作成してくれる²。

複雑な制御を行う場合は robots.txt を手動で作成しルート上に配置してしまう方が手っ取り早いが、自動で作成してくれる robots.txt を活かしたい場合もあるはず。

そのような場合は robots_txt フィルターフックを使用する。

functions.php（Themify のテーマ使用時は custom-functions.php）に以下を追加。

add_filter("robots_txt", "add_robots_txt");
function add_robots_txt($output) {
    // Disallow: /dir001/ の一行を追加する
    $output .= "Disallow: /dir001/\n";
    return $output;
}

add_filter("robots_txt", "add_robots_txt");

function add_robots_txt($output) {

// Disallow: /dir001/ の一行を追加する

$output .= "Disallow: /dir001/\n";

return $output;

}

robots.txt のルールそのものは他サイトを参照。

ロボット型サーチエンジンのアクセス制御ルールを記述するファイル。 ↩
正確には実ファイルそのものを作成するわけではなく「WordPressルート/robots.txt」という URL にアクセスすると内容を生成してレスポンスを返してくれる。 ↩