文件格式:pdf
文件大小:2.18MB
适用专业:机电一体化
适用年级:研究生
下载次数:0 次
我要下载:客服QQ:5739126论文编号:218364
资料简介:
硕士研究生学位论文 面向网络化制造资源的垂直搜索技术研究与应用。
摘要
本文是在谢庆生教授主持的中国国家自然科学基金资助项目”面向协同商务制造资源管理的关键技术研究”(计划批准号:50475185),国家863 计划项目”面向机电行业的ASP 应用服务平台开发与应用”(课题编号:2003AA414013 、2004AA414070),国家863 计划项目”面向ASP 平台的产品创新设计与制造资源管理构件的研究和应用”(课题编号:2002AA415310)等项目的支撑下,以制造业信息化理论方法为基础,以区域汽车零部件等行业为应用背景,对网络化制造系统建模及应用实现等进行研究。
网络化制造资源检索是企业信息化的基础,也是实现网络化制造的有效途径。
其核心是利用网络,寻求合适的企业合作伙伴,实现企业间的资源共享、优势互补,提高企业竞争力。这也是本论文的研究目的。在实验室现有研究的基础上,本文着重研究了面向网络化制造资源检索系统的主题爬虫设计和中文分词技术。
主题爬虫技术主要包括种子链接的获取、爬行算法、相似度分析、页面解析、摘要技术等。通过在主题爬虫中增加评价网页模块,让程序优先抓取与主题相似度高的网页中的链接,提高了爬虫的工作效率。在中文分词模块,通过一种改进的词典存储格式及相应的切词算法提出了一种改进的RMM 中文分词算法。
系统的索引与检索模块,主要应用Lucene 技术。并在研读Lucene 源码的基础上,封装了自行设计的中文分词模块,改善了Lucene 的中文分词性能,以达到系统对中文分词的需求。系统后端编码采用面向对象的Java 语言,特别是用Java 的多线程技术来协调各模块的工作,以充分利用计算机资源。前端设计主要采用JSP技术。主要利用它生成的结果与显示可以相分离、简洁的WEB 页面和它拥有Java所有优点等特点。最后对系统进行了测试分析。
关键词:网络化制造;制造资源;页面解析;主题爬虫;中文分词;Lucene
分类号:TP391
目 录
第一章 前言........................................................ 1
1.1 课题背景及来源............................................... 1
1.2 研究目标及意义............................................... 1
1.3 国内外研究进展............................................... 2
1.4 已具备的基础和科研条件...................................... 3
1.5 本论文组织结构及主要创新点.................................. 4
第二章 网络化制造资源与搜索引擎概述................................. 5
2.1 网络化制造资源............................................... 5
2.1.1 制造资源定义及分类..................................... 5
2.2 搜索引擎..................................................... 7
2.2.1 搜索引擎的起源及发展.................................. 7
2.2.2 搜索引擎的原理......................................... 8
2.2.3 搜索引擎的分类......................................... 9
2.2.4 搜索引擎的主要评价指标............................... 10
2.3 网络化制造资源垂直搜索系统的特点........................... 11
2.4 网络化制造资源垂直搜索系统的模式........................... 11
2.5 本章小结................................................... 13
第三章 系统与算法设计.............................................. 14
3.1 系统定位及功能............................................. 14
3.2 系统设计总体架构.......................................... 14
3.2.1 主题爬行器概述........................................ 14
3.2.2 页面结构.............................................. 17
3.2.3 中文分词简述.......................................... 19
3.3 数据存储与数据结构.......................................... 19
3.3.1 页面存储库............................................ 19
3.3.2 链接库................................................ 20
3.3.3 Hit 列表.............................................. 20
3.4 本章小结.................................................... 21
第四章 主题爬虫设计................................................ 22
4.1 国内外主题爬行算法.......................................... 22
4.2 主题爬行器.................................................. 29
4.2.1 种子链接.............................................. 30
4.2.2 页面解析.............................................. 34
4.2.3 相似度计算............................................ 37
4.2.4 摘要技术.............................................. 38
4.3 测试分析................................................... 41
4.4 本章小结................................................... 41
第五章 中文分词设计................................................ 42
5.1 分词算法................................................... 42
5.2 词典机制................................................... 43
5.3 改进的RMM 算法............................................. 47
5.4 性能分析................................................... 48
5.5 本章小结................................................... 49
第六章 基于Lucene 的索引与检索技术................................. 50
6.1 索引........................................................ 50
6.1.1 索引的功能............................................ 50
6.1.2 索引的原理............................................ 50
6.2 检索技术................................................... 51
6.3 Lucene 简介................................................. 52
6.3.1 Lucene 的概念......................................... 52
6.3.2 Lueene 的组成结构..................................... 53
6.3.2 Lueene 数据流分析..................................... 54
6.4 Lucene 的应用............................................... 55
6.4.1 改善分词.............................................. 55
6.4.2 建立索引.............................................. 57
6.4.3 检索配置.............................................. 58
6.5 用户接口................................................... 58
6.6 本章小结................................................... 59
第七章 系统实现.................................................... 60
7.1 系统程序框架............................................... 60
7.2 系统界面................................................... 61
7.3 运行结果................................................... 62
7.4 本章小节................................................... 64
第八章 结论........................................................ 65
8.1 论文总结................................................... 65
8.2 进一步工作................................................. 65
参考文献........................................................... 66
致 谢............................................................. 68
附 录............................................................. 69
附录一............................................................. 70
附录二............................................................. 71
附录三............................................................. 72
资料文件预览:
共1文件夹,1个文件,文件总大小:2.18MB,压缩后大小:2.12MB
- 硕士研究生学位论文-面向网络化制造资源的垂直搜索技术研究与应用
毕业设计 面向网络化制造资源的垂直搜索技术研究与应用.pdf [2.18MB]
我要下载:硕士研究生学位论文-面向网络化制造资源的垂直搜索技术研究与应用(客服QQ:5739126)