【老谭创业网】学习,提升,成长
创业改变人生,为网络创业者提供源动力!

DuckDuckGo Favicons Bot是什么蜘蛛爬虫?可以禁用或者屏蔽吗?

DuckDuckGo Favicons Bot是DuckDuckGo的爬虫

DuckDuckGo是美国的一个互联网搜寻引擎,其总部位于美国宾州Valley Forge市。

DuckDuckGo强调在传统搜寻引擎的基础上引入各大Web 2.0站点的内容。其办站哲学主张维护使用者的隐私权,并承诺不监控、不记录使用者的搜寻内容。
DuckDuckGo-Favicons-Bot

一般默认的形式是 Mozilla/5.0 (compatible; DuckDuckGo-Favicons-Bot/1.0; +http://duckduckgo.com)” – 0.047 0.047

传统搜索引擎为了优化搜索结果,必须对用户数据进行尽量全面的收集和分析,这是对用户隐私的一种侵犯。而 DuckDuckGo 则成功地避开了这样的缺陷。在 DuckDuckGo 的隐私政策中非常明确的声明网站不会记录用户的浏览器 UA、IP 地址、搜索行为等任何相关数据,默认情况下也不会使用 Cookie 来记录数据。此外,DuckDuckGo 还对用户点击搜索结果后跳转到目标网页的过程进行了重定向处理,目标网站无法获知用户是通过输入哪些搜索词跳转到自己的网站。这进一步保护了用户的隐私安全。同时,DuckDuckGo 鼓励用户使用 Firefox 浏览器的强制 https 扩展和 Tor 匿名网络等方式来保护自己的隐私,而 DuckDuckGo 自身也运营着一个 Tor 的跳出节点,以便用户在使用相对速度较慢的 Tor 匿名网络时也能够快速而安全地访问 DuckDuckGo 进行搜索。

可以禁用或者屏蔽吗?

如果网站是中文网站,网站用户是国内用户,这种情况可以禁用或者屏蔽DuckDuckGo的爬虫,因为国内用户使用DuckDuckGo搜索引擎很少的,绝大部分人都没听说过DuckDuckGo搜索引擎;开着它浪费服务器资源。

如果网站是英文网站,且绝大部分用户是美国用户的话,那建议不要禁用或者屏蔽DuckDuckGo爬虫。

赞(0)
未经允许不得转载:老谭创业网 » DuckDuckGo Favicons Bot是什么蜘蛛爬虫?可以禁用或者屏蔽吗?

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址