香港在住アラサー男のメモ

SEO的には全く同じページが２つあるのは良くないらしい。

だからnoindex を使用して検索インデックス登録をブロックする必要がある。

良かれと思ってテストサイトを作っていて、それが本番サイトの集客の足を引っ張ったら元も子もない。

テストサイトのページには片っ端からnoindexを設置した。

noindexでインデックス登録を拒否する方法

サイト全体を制御するためにはrobots.txtを使う方法もある。

テストページは要注意！noindexとrobots.txtでインデックス防止

一応両方やっといたけど、robots.txtについては以下の記述が気になる。

クローラーはrobots.txtを読み込んだ後にrobots metaタグを読むので、現在インデックスされているページのインデックスを削除しようとして、robots.txtにクロールさせない指示を書いてしまうと、robots metaタグが読み込まれず、インデックスが削除されずに残ってしまいます。