下载此文档

北邮毕设答辩网络爬虫设计及算法研究(课堂ppt).ppt


文档分类:IT计算机 | 页数:约20页 举报非法文档有奖
1/20
下载提示
  • 1.该资料是网友上传的,本站提供全文预览,预览什么样,下载就什么样。
  • 2.下载该文档所得收入归上传者、原创者。
  • 3.下载的文档,不会出现我们的网址水印。
1/20 下载此文档
文档列表 文档介绍
网络爬虫设计及相应算法研究姓名:指导教师:1项目介绍1完成内容4选题背景2主要工作3总结及展望52项目名称:网络爬虫设计及相应算法研究TheResearchandDesignofWebCrawler项目类别:软件研究设计类项目来源:科研项目项目简介13项目介绍1完成内容4选题背景2主要工作3总结及展望54搜索引擎介绍:互联网的迅速发展,使得网上信息越来越多,搜索引擎正是为了解决在浩瀚的信息海洋中快速高效的寻找信息的问题。搜索引擎是通过互联网搜索信息的重要途径,涉及到多个领域的理论和技术,具有很高的综合性和很强的挑战性。本课题研究的内容是搜索引擎的关键部分——网络爬虫。选题背景25网络爬虫介绍:网络爬虫是搜索引擎系统中十分重要的组成部分,它负责从互联网中搜集网页、采集信息,这些网页信息用于建立索引从而为搜索引擎提供支持,它决定着整个引擎系统的内容是否丰富,信息是否即时,因此其性能的优劣直接影响着搜索引擎的效果。选题背景26网络爬虫的基本原理:1)从一个初始URL集合中挑选一个URL,下载该URL对应的页面;2)解析该页面,从该页面中抽取出其包含的URL集合,接下来将抽取的URL集合再添加到初始URL集合中;3)重复前两个过程,直到爬虫达到某种停止标准为止。选题背景27项目介绍1完成结果4选题背景2主要工作3总结及展望58学习爬虫的基本技术网页抓取技术网页去重技术多线程技术主要工作39网页抓取技术宽度优先遍历算法和广度优先算法PageRank算法——基于链接的搜索算法主要工作310

北邮毕设答辩网络爬虫设计及算法研究(课堂ppt) 来自淘豆网m.daumloan.com转载请标明出处.

非法内容举报中心
文档信息
  • 页数20
  • 收藏数0 收藏
  • 顶次数0
  • 上传人精品小课件
  • 文件大小1.07 MB
  • 时间2020-09-06
最近更新