郑州轻工业学院大学生实践创新项目任务书.docx

《郑州轻工业学院大学生实践创新项目任务书.docx》由会员分享，可在线阅读，更多相关《郑州轻工业学院大学生实践创新项目任务书.docx（2页珍藏版）》请在第一文库网上搜索。

1、郑州轻工业学院大学生实践创新项目任务书为充分发挥大学生创新实践平台的作用，促进创新实践项目的有效开展，工程训练中心与使用创新实践平台的项目负责人订立本任务书，请遵照执行。项目名称大数据需求下的分布式爬虫系统项目类别大创项目项目负责人（联系方式）贾启O指导教师（联系方式）谷培培房间号351项目成员（联系方式）姓名学号专业班级手机号贾启软件工程（JaVa技术）15-02李思雨软件工程（移动互联网15-02）项目主要研究内容人类社会已经进入大数据时代，传统的信息存储和传所替代，并呈现出指数增长的趋势，成为21世纪最为重要爬虫是SPider（或RObots、CraWIer）等词的意译,是一种南它集成了

2、搜索引擎技术，并通过大数据技术手段进行优化抓取并保存任何通过HTM1（超文本标记语言）进行标准化的系统是在计算机集群之上运转的爬虫系统，集群每一个节集中式爬虫系统的工作原理相同，所不同的是分布式需要任务分工、资源分配、信息整合。分布式爬虫系统的某一一个主节点，并通过它来调用本地的集中式爬虫进行工作点之间的信息交互就显得十分重要，所以决定分布式爬虫于能否设计和实现任务的协同，此外，底层的硬件通信网:以采用多节点抓取网页，并能够实现动态的资源分配，因J布式爬虫系统远高于集中式爬虫系统。随着互联网技术的发展和数据爆炸，网络爬虫技术为息整合应用提供了全新的技术路径。站在商业银行应用实银行日常经营管理中

3、的发展潜力巨大。网络爬虫技术的应为最了解自身、最了解客户、最了解竞争对手、最了解经行”。可以预见，网络爬虫技术将成为商业银行提升精细智能化水平的重要技术手段。播媒介已逐渐为计算机的经济资源之一。网络，效的信息抓取工具，用以从互联网搜索、网页信息。分布式爬虫点上运行的爬虫程序与协调不同计算机之间的台计算机终端中植入了在此基础上，不同节系统成功与否的关键在络也十分重要。由于可此就搜索效率而言，分商业银行数据采集和信践的角度，网络爬虫在用可以助力银行转型成管环境的“智慧银化管理能力、提高决策预期提供成果形式研究论文：相关技术性文档，包括需求分析、系统设计、相关技术、技术实现专利;相关软件著作权。产品

4、：分布式爬虫系统。鉴定：完成合同或计划任务书规定的指标；技术资料是否齐全完整，并符合规定；应用技术成果的创造性、先进性和成熟程度；应用技术成果的应用价值及推广的前景和条件；存在的问题及改进意见。推广与应用：商业银行应用实践学校资助经费金额（元）IOOOO项目负责人自筹及其他经费金额（元）中期检查项目负责人应于2018年5月30日前向甲方书面汇报项目进展情况。结题报告项目负责人应于2018年10月30日前向甲方提交项目结题报告。同意以上所列内容，在此签字盖章甲方：工程训练中心（公章）负责人：年月日乙方：项目负责人：指导教师：承担项目学院（盖章）年月日注：1.本任务书仅针对进入工程训练中心的项目，一个项目对应一个项目任务书;2.本任务书一式三份，工程训练中心、团队负责人、项目负责人各留一份。