認証が必要なページをクロールさせる方法

認証が必要なファイルについて、コントロールパネルでクローラ用のIDとパスワードを設定することで、中身をクロールさせることができます。ただし、「Google Account」にアップデートされていなければならず、少なくとも自分のアカウントは今日時点でまだの様です。

ということは、認証が必要なページにAdSenseを貼っても良いということでもあります。

操作は簡単、「AdSense 設定」のタブを開くと、

「プロダクト | カラー パレット | チャネル | フィルタ」

の右に「サイト認証」のタブが現れるはずで、そこから設定可能です。
後は自分のところで使えるようになってからページを作ります。

コメント