伪装成Google Bot突破收费网站页面
来源：est's blog
Q:为什么有的网站能够被Google搜索到，点击链接进去以后却显示“未注册”、“还不是会员”呢？这是一种网站专门针对对搜索引擎优化的技术。我们如何伪装成搜索引擎来进入这些页面呢？
A:修改浏览器的User-Agent值。
IE用户: 把下列代码保存为 ua.reg，双击导入到注册表中：
Windows Registry Editor Version 5.00
[HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Internet Settings\5.0\User Agent]
@="Googlebot/2.1"
"Compatible"="+http://www.googlebot.com/bot.html"
FF用户: 下载一个名字为 Agent-Switcher的插件，把User-Agent修改成 Googlebot/2.1 (http://www.googlebot.com/bot.html) 就行了。