PHPであってもなくても確実に避けられる方法が以下に紹介されています｡

robots.txt ﾌｧｲﾙを使用してﾍﾟｰｼﾞをﾌﾞﾛｯｸまたは削除する

Google公式 http://support.google.com/webmasters/bin/answer.py?hl=ja&answer=156449

googleはrobots.txtに従いますが､
ｻｲﾄの利用者や､他の検索ｴﾝｼﾞﾝが従うというものでもないため､
他の検索ｴﾝｼﾞﾝ経由で漏れます｡つまりは完璧どころか穴だらけです｡

完璧を目指すのであれば物理的遮断しかありません｡


それはさておき本題にもどりますが､
phpで作ったｱﾌﾟﾘｹｰｼｮﾝのｶﾊﾞｰ範囲で出来ることは非常に限られています｡

phpのｱﾌﾟﾘｹｰｼｮﾝの前にはphp本体がありますが､
そこの脆弱性を衝かれたらどうしますか？
php本体の前にはapacheなどのwebｻｰﾊﾞｰｿﾌﾄがありますね｡
webｻｰﾊﾞｰｿﾌﾄの前にはOSのﾈｯﾄﾜｰｸ関連ｿﾌﾄがありますよね｡
さらにその前にはﾈｯﾄﾜｰｸのﾃﾞﾊﾞｲｽﾄﾞﾗｲﾊﾞｿﾌﾄもありますよね｡
さらにその前にはﾙｰﾀもありますね…｡

上に挙げたようなｿﾌﾄの脆弱性に関してはｾｷｭﾘﾃｨｱｯﾌﾟﾃﾞｰﾄや､
ｾｷｭﾘﾃｨｿﾌﾄで対処しますが､通信者の成りすましや､
他所からの侵入を防ぐために､銀行などの金融機関やmixiなどは､
httpsﾌﾟﾛﾄｺﾙを採用して他所からの通信を阻害するようにしています｡
(はてなでは､ﾕｰｻﾞｰ設定ﾍﾟｰｼﾞなど一部のﾍﾟｰｼﾞで､
httpsを選択できるようになっています｡)

ちなみにmixiのｻｰﾊﾞｰ証明書はｻｲﾊﾞｰﾄﾗｽﾄが担当しています｡
https://www.cybertrust.ne.jp/ssl/news/120419.html


なお､
httpsも共用SSLだと契約者単位ではなくｻｰﾊﾞｰ単位での契約となるため､
同一ｻｰﾊﾞｰ上で運営される他者ｺﾝﾃﾝﾂ経由でのｱｸｾｽなどの危険性があります｡

ちょっとした物販程度であればﾒｰﾙでの通信と変わらない程度の問題になりますが､
取引が大量に発生するような人気ｻｲﾄになる前に､
占有ｻｰﾊﾞｰ＋専用SSLへの移行が必要になってくるでしょう｡

完璧にというのは無理ですが､簡単に避ける方法にはこのようなものがあります｡
http://web-tan.forum.impressrd.jp/e/2009/01/06/4733