東京・小金井市のWEB制作会社の豆知識

MEMORANDUM

「robots.txt」を使ってPDFファイルを検索エンジンにクロールさせなくする

ホームページ制作を行っていると、稀に検索エンジンにヒットさせたくないファイルが出てくることもあります。
サーバーから削除するのが確実ではありますが、諸事情もあるため削除せずにクロールをさせない実装方法をメモ。

User-agent: *
Disallow: *.pdf$

上記はファイル（拡張子）対象とした方法。
ディレクトリを指定する場合は下記

User-agent: *
Disallow: /pdf/

「robots.txt」はホームページのディレクトリ直下に設置します。

このようなお悩みはありませんか？

「まだアイデアだけだけど、意見を聞いてみたい…」そんなご状況下でのご相談も受け付けております。
過去の実績等を参考に、ご要望に近づけるホームページをご提案いたします。

RANKING