Wayback Machine にサイトを保存させない

投稿日:

robots.txt ファイルとは? にも書いたのですが、Wayback Machine というサイトがあります。

Wayback Machine
Wayback Machine

Wayback Machine は、世界中のウェブサイトをクロールして保存し、誰でもが保存されたサイトを検索して見ることができるようになっているサービスです。1つのウェブサイトに対して、期間をおいて何度も保存するため、時系列で複数時期の姿を見ることができます(1つのウェブサイトの全てのページが保存されるわけではありません)。

これはこれで便利な面もあるのですが、自分が運営するサイトが勝手に保存されていつまでも見られるようになっていることを気持ちが悪いと思う人もいるのではないでしょうか?

しかも、保存されたページを削除させるには、削除依頼を出す必要があり結構な手間が掛かります。この点において、悪質なサービスである印象も強いです。(Google もやっていることはほとんど同じなのですが、削除方法がきちんと用意されています)

ということで、Wayback Machine に自分のウェブサイトを保存させたく場合は、新しくウェブサイトを作成した時点で robots.txt ファイルに以下を記述しておくことをお勧めします。

User-agent: ia_archiver
Disallow: /

robots.txt ファイルについては、以下のページを参照してください。

robots.txt ファイルとは?

2018.05.24

-Tips

執筆者:fitallright

関連記事

no image

ロリポップ!マネージドクラウドを使ってみた感想と記録

ここでは、ロリポップ!マネージドクラウド を使ってみた時のメモを書いていきます。(2018年10月時点) 目次疑問点ディスク容量についてメモリについて転送量の目安メモコンテナの起動時間SSHログイン後 …

エックスサーバーに tig コマンドを導入する

エックスサーバーに tig コマンドを導入する

エックスサーバーに tig コマンドを導入する手順について説明します。

エックスサーバー

エックスサーバーのWAF機能について

エックスサーバーの WAF (Web Application Firewall) 機能について書きます。 目次1. WAF機能(エックスサーバー)の良いところ2. WAF機能(エックスサーバー)の残念 …

エックスサーバーで logrotate を使う

エックスサーバーで logrotate を使う

目次1. はじめに2. logrotate とは?3. エックスサーバーで logratote を使う手順1. logrotate 関連のファイルを配置するディレクトリを作る2. logrotate …

WordPressのウィジェットに特定のカテゴリの最近の投稿を表示する

WordPress のウィジェットに、特定のカテゴリの「最近の投稿」を表示する方法

WordPress において、特定のカテゴリ内の「最近の投稿」をウィジェットに表示する方法をご紹介します。 目次WordPress のウィジェットとは?手順設定方法TitleFilterPost de …

ロリポップ!「スタンダードプラン」
さくらのレンタルサーバ「スタンダードプラン」