BugTrack/2366

デフォルトコンテンツのページが検索エンジンに引っかからないようにする†

• ページ: BugTrack2
• 投稿者: umorigu
• 優先順位: 低
• 状態: 完了
• カテゴリー: その他
• 投稿日: 2015-07-14 (火) 23:12:27
• バージョン: 1.5.0
• リリース予定バージョン: 1.5.1

メッセージ†

標準配布状態で Plugin Manual 等が デフォルトコンテンツとして含まれています。 これらのページが通常コンテンツとして検索エンジン等から扱われるため、PukiWiki設置サイトの数だけPlugin Manual が検索結果に含まれてしまいます。

nofollow,noindex等を使って、これらのページが検索対象にならないようにします。

対象:

• BracketName
• FormattingRules
• Help
• InterWiki
• InterWikiName
• InterWikiSandbox
• PHP
• PukiWiki
• PukiWiki/1.4
• PukiWiki/1.4/* 以下すべて (PukiWiki/1.4/Manual/Plugin/A-D etc)
• SandBox
• WikiEngines
• WikiName
• WikiWikiWeb
• YukiWiki

対象外:

• FrontPage
• MenuBar

なお、公式サイトofficial:FrontPageのコンテンツは対象外です。（検索エンジンの検索対象になった方が都合がよいため）

実装†

• commit:6c30f54868803dfa23c9e803215c05562f8e9aa0 $nofollow / non read のときに X-Robots-Tag: nofollow,noindex HTTPヘッダを出力する

• デフォルトコンテンツのうち、マニュアル類にはnofollow プラグインが仕込まれていたような気が→BugTrack2/72。
  なので、公式サイトのページは

  <meta name="robots" content="NOINDEX,NOFOLLOW" />

  を発行していて、凍結されていない開発サイトのページでは

  #nofollow: Page not freezed

  エラーメッセージが出ています。 -- 2015-07-16 (木) 21:51:18
  • お、ほんとですね。これは気が付いていませんでした。そうするとたまに引っかかるページは、なんでしょうね。スキンに nofollow の指定があるので、スキンをカスタマイズしてると入らないこともありそうです。 -- umorigu 2015-07-16 (木) 22:56:35
  • X-Robots-Tag のHTTPヘッダを出力するのが安全なのかな -- umorigu 2015-07-16 (木) 22:57:27
• 注ぎ足し注ぎ足しアップデートして使い続けているからスキンやデフォルトコンテンツをアップデート対象外にして昔のままに、なんてパターンもありそうですね -- 2015-07-18 (土) 21:24:46
• 検索エンジンのインデックス対象外にしたいファイルに対しては、これまでスキンファイルで HTML metaヘッダとして robots: nofollow,noindex を出力していました。これに加えて、HTTPヘッダの X-Robots-Tag: nofollow,noindex を出力するようにしました。これによりスキンをカスタマイズしていても意図通り「検索エンジンにキャッシュさせない」ことを期待できます。対象はデフォルトで含まれるマニュアルページ（#nofollow + #freese）、それから編集画面などread以外の画面です。 -- umorigu 2016-02-06 (土) 06:58:25
• cmd=list もX-Robots-Tagでnoindexが出力されますが、このようなURLを示すタイプのプラグインはむしろインデックスしてもらった方が良いのではないでしょうか。 -- m0370 2022-04-27 (水) 08:19:07
  • (BugTrack/2569に移動しました)

• BugTrack
• 開発版
  • リポジトリ
  • 開発日記
• :CategoryDev
  • PukiWiki2
  • PukiWiki/1.5
  • PukiWiki/1.4
  • PukiWiki/1.3
  • メーリングリスト
  • 開発談義
  • 雑談
• 開発者向け情報
  • Books
  • プラグイン

最新の16件