24小时服务热线
效率高速
品质保障
厂家直供
售后保障
行业新闻
当前位置:行业新闻>

一种爬虫抓取的方法及其装置专利

发布时间:2026-06-16

【摘要】 本发明公开了一种爬虫抓取的方法及其装置,用于解决现有爬虫抓取技术时效性差的问题。主要技术方案包括:根据网页在当前结果中的排序或/和网页被用户点击的顺序,确定所述网页的当前权值;根据所述网页的当前权值以及历史权值,确定所述网页的结果权值;当所述结果权值达到设定阈值时,重新抓取所述网页中的信息。通过该技术方案,能够根据网页在当前结果中的排序或/和网页被用户点击的顺序,影响爬虫抓取该网页中信息的周期,对用户度高的网页可以缩短爬虫抓取网页信息的周期,从而保证这类网页中的信息具有很好的时效性,提高用户的使用感受。 【专利类型】发明申请 【申请人】中国移动通信集团公司 【申请人类型】企业 【申请人地址】100032 北京市西城区金融大街29号 【申请人地区】中国 【申请人城市】北京市 【申请人区县】西城区 【申请号】CN200810226245.0 【申请日】2008-11-10 【申请年份】2008 【公开公告号】CN101739427A 【公开公告日】2010-06-16 【公开公告年份】2010 【授权公告号】CN101739427B 【授权公告日】2012-07-04 【授权公告年份】2012.0 【IPC分类号】G06F17/30 【发明人】孙宏伟; 胡珉; 罗治国 【主权项内容】一种爬虫抓取的方法,其特征在于,包括:根据网页在当前结果中的排序或/和所述网页被用户点击的顺序,确定所述网页的当前权值;根据所述网页的当前权值以及历史权值,确定所述网页的结果权值;当所述结果权值达到设定阈值时,重新抓取所述网页中的信息。 【当前权利人】中国移动通信集团公司 【当前专利权人地址】北京市西城区金融大街29号 【专利权人类型】国有企业 【统一社会信用代码】911100007109250324 【被引证次数】25 【被他引次数】25.0 【家族被引证次数】25

  • 【摘要】: 。本发明公开了一种硅纳米线装配的方法,通过温度场的控制,应用硅纳米线在温度场中具有自组织的特性,能够用来装配平行的纳米线;硅纳米线通过稀磁杂化的方法,使之具有弱磁性,然后通过外加磁场控制的方法进行正交装配。既能装配互相平行的硅纳
  • 【摘要】本发明公开了一种延缓男性衰老的组合物及其制备方法。该组合物是由人参、绞股蓝、冬虫夏草菌丝体固体发酵粉、维生素C按一定重量配比制备而成。它可以被制备成任何一种常用剂型。该组合物具有补气、强壮、降血压、降血脂、清除自由基的作用,特别适合
  • 【摘要】本发明公开了一种实现数字电视版权管理的方法。该方法使用抽象语法标记表示版权管理方法中的基本信息单元、内容许可证和内容许可证获取协议中的消息。数字电视前端按要求将许可证信息及其数字签名信息打包成所述内容许可证;终端采用所述内容许可证获
  • 【摘要】本发明公开了一种播放媒体信息的方法,该方法包括:在用户通过终端点 击播放媒体信息后,获取订购关系表,并根据所述订购关系表确定所述媒体信 息已订购;对接收到的包含媒体信息的加密信息包进行处理;获取业务密钥; 利用所述业务密钥在终端播放
  • 【摘要】本发明公开了对移动终端进行导航的方法和系统,主要方案是:辅助全球 卫星定位系统AGPS服务器接收源终端发起的包含处于运动状态目的终端的终 端标识的导航请求,并周期性地返回所述终端标识对应的目的终端的位置信 息;导航服务器接收所述目的
  • 【摘要】本发明属于资源综合回收利用及超细金属预合金粉体制备领域,特别涉及一种废弃金刚石工具资源化综合回收利用的方法。通过对废旧金刚石工具酸浸、过滤工艺首先回收其中的金刚石及碳化钨颗粒;采用原子吸收光谱检测浸出液成分,通过添加对应的可溶性盐及