クローラー IP

google

yahooクローラー

  • Y!J-DSC
  • Y!J-VSC/ViSe
  • Y!J-PSC
  • Y!J-NSC/1.0
  • Y!J-SRD/1.0
  • Y!J-BRG/GSC
  • Y!J-BRI
  • Y!J-BRE
  • Y!J SearchMonkey/1.0
  • Y!J-BRO/YFSJ
  • Y!J-BRP/YFSBJ
  • Y!J-BRQ/DLCK

Bingクローラー
携帯クローラー
google
Google のモバイル クロールでは、「Googlebot-Mobile」という文字列を含む user-agent ヘッダーが送信されます。

Google のモバイル クロールでは以下の IP アドレス帯域を利用します。

  • 72.14.199.0/25 (72.14.199.0 – 72.14.199.127)
  • 209.85.238.0/25 (209.85.238.0 – 209.85.238.127)

モバイル版Yahoo!検索の検索エンジン(クローラー)について

【User Agent (ユーザーエージェント)】

クローラーのユーザーエージェントの共通部分

  • Y!J-SRD/1.0
  • Y!J-MBS/1.0

124.83.159.146 ~ 124.83.159.185
124.83.159.224 ~ 124.83.159.247
yahoo モバイルにインデックスされるには

htmlファイルにphpをよみこませる access制限 .htaccess

access制限 .htaccess
htmlファイルでphpをよみこませる
(htmlで書かれたファイルなどにphpを使う場合)
.htaccessファイルに

AddType application/x-httpd-php .html

参考
さくらサーバーで、HTML上にPHPを読み込ませる方法
フレームの代わりにPHPを使う
小粋空間

無料SEOツール

SEOアクセス解析ツール(SEOツールズ)
http://www.seotools.jp/
SEO診断ツール Dipper Septeni
http://dipper.septeni.co.jp/

SEO順位検索ツールdw230
http://dw230.bglb.jp/rank/
検索エンジン一括順位チェックツール ランキングチェッカー
http://broadentry.com/rankingchecker/

googleキーワード ツール

https://adwords.google.co.jp/select/KeywordToolExternal

SEO  www有り 無し

ドメイン名の違いによる重複

* .htaccessが編集できる場合
下記のリライトルールを.htaccessに記述します。

RewriteEngine on
RewriteCond %{http_host} ^example.com[NC]
RewriteRule (.*) http://www.example.com/$1 [L,R=301]

* .htaccessが編集できない場合
下記のようなPHPスクリプトを、全てのページで実行されるようなスクリプトに仕込みます。

* サイト内のURLはリライト済みのURLのみを使用する。
* 無効なURLは全て404ページに飛ばしてしまうくらいリライトルールは厳重にする。
* サイト内に使用するURLは、それを有効なURLに書き換える関数に全て通す。