うわー、こないだフォームの送信先はクロールしないよって書いた矢先だったのに。。。
Google様がフォームの送信先もクロール対象にするそうです。
【追記】・・・と、思ったら「Only a small number of particularly useful sites receive this treatment.」ってことで、あくまで実験だから一般サイトには及ばないっぽいっすね。すんません。
秋元@サイボウズラボ・プログラマー・ブログ
張られているリンクをより多く見つける目的で、GooglebotにHTML Formを送信させて出てきたページもクロールさせる、という発表があった。
(中略)
クロールされるフォームは以下のようなものに限定されるようだ。
- GETメソッドであること
- robot.txtなどで除外指定されていないこと
- passwordフィールドを持たないこと
- user, id, accountなどのフィールドを持たないこと
POSTはダメなのか・・・
これって id とか user っていうGETのパラメータをもってるとダメってことかな。
フォーム送信されていない、普通のリンク(href)の場合は &id=xxxx があってもインデックスされているから、これはフォーム送信されるときだけのルールなんだろうね。多分。
ところでスパイダートラップにならないのかなあ・・・

コメントする