欢迎光临网贷家门官方网站! 官方交流群:1481526 薅羊毛群:1481529 
资讯
资讯
帖子
用户
股权众筹   已有6人关注
1473321170

二级

  1. 385 积分
  2. 760 经验
他的主页 发消息 加好友
板块导航

新宝开户+222111不要随时注销

发表在 股权众筹 2017-07-28 19:34:02 0 3638

www.xb5pt.net

聚焦搜索策略

  聚焦爬虫的爬行策略只跳出某个特定主题的页面,根据“最好优先原则”进行访问,快速、有效地获得更多的与主题相关的页面,主要通过内容与Web的链接结构指导进一步的页面抓取。聚焦爬虫会给它所下载的页面一个评价分,根据得分排序插入到一个队列中。最好的下一个搜索对弹出队列中的第一个页面进行分析后执行,这种策略保证爬虫能优先跟踪那些最有可能链接到目标页面的页面。

  决定网络爬虫搜索策略的关键是如何评价链接价值,即链接价值的计算方法,不同的价值评价方法计算出的链接的价值不同,表现出的链接的“重要程度”也不同,从而决定了不同的搜索策略。由于链接包含于页面之中,而通常具有较高价值的页面包含的链接也具有较高价值,因而对链接价值的评价有时也转换为对页面价值的评价。这种策略通常运用在专业搜索引擎中,因为这种搜索引擎只关心某一特定主题的页面。


精彩评论 0
     
    关闭
    关闭
    广告合作咨询 设计服务咨询 导航档案申请 投诉建议咨询
    X