基于Heritrix的视频垂直搜索引擎

发布时间：2017-07-17 13:27

  本文关键词：基于Heritrix的视频垂直搜索引擎

  更多相关文章： 垂直搜索引擎 视频 lucene heritrix

【摘要】：针对目前精品课程网站视频信息多、分布散的特点,通过lucene与heritrix,设计了专门针对视频信息的垂直搜索引擎,使用BKDRHash算法,实现了对视频信息的针对性搜索.搜索时将网页抓取、内容筛选和建立索引的过程结合在一起,大大减少了系统的开销,改变了以往传统搜索引擎网页全文收录的做法,筛选了无用信息,对页面信息的提取,以及播放链接的提取过程具有一定的创新性.
【作者单位】： 商洛学院数学与计算机应用学院;
【关键词】： 垂直搜索引擎 视频 lucene heritrix
【基金】：陕西省自然科学基金(2014JM2-6122)
【分类号】：TP391.3
【正文快照】： 从上世纪80年代开始,国家在教育信息化建设方面投入大量资金,推出了基础教育资源库、高等教育精品课程资源库等许多优秀资源共享系统,力图通过这些手段来缩小各地区之前的教育资源差距,平衡教育发展.有数据显示,国家投入了大量的资金建立的精品课程网,却远没有达到期望的利用

【参考文献】

中国期刊全文数据库 前7条

1 于娟;刘强;;主题网络爬虫研究综述[J];计算机工程与科学;2015年02期

2 王帅;周国民;王健;;主题爬虫相关度算法研究综述[J];计算机与现代化;2013年04期

3 白玉昭;梁久祯;;基于概率模型的主题爬虫的研究和实现[J];计算机工程与科学;2013年01期

4 朱敏;罗省贤;;基于Heritrix的面向特定主题的聚焦爬虫研究[J];计算机技术与发展;2012年02期

5 白坤;耿国华;;基于Lucene/Heritrix的垂直搜索引擎的研究与应用[J];计算机应用与软件;2009年01期

6 严莉莉;王倩倩;孟杰;张燕平;;基于聚类的个性化元搜索引擎设计[J];计算机技术与发展;2007年04期

7 沈贺丹;潘亚楠;邵良杉;;关于搜索引擎的研究综述[J];计算机技术与发展;2006年04期

【共引文献】

中国期刊全文数据库 前10条

1 冯劲苗;张恩海;王铎;洪满;;基于移动流量的用户偏好模型设计与实现[J];信息技术;2016年09期

2 胡博;蒋宗礼;;融合位置相关和概率排序的Lucene排序算法改进[J];计算机科学;2016年09期

3 张林;;基于Heritrix的视频垂直搜索引擎[J];计算机系统应用;2016年09期

4 荆文鹏;王育坚;董伟伟;;自适应遗传算法在主题爬虫搜索策略中的应用研究[J];计算机科学;2016年08期

5 孙国超;;主题搜索引擎中网络爬虫的实现研究[J];电脑知识与技术;2016年17期

6 丁晟春;龚思兰;周文杰;王曰芬;;基于知识库和主题爬虫的南海舆情实时监测研究[J];情报杂志;2016年05期

7 李应;;基于Hadoop的分布式主题网络爬虫研究[J];软件导刊;2016年03期

8 黎柯;蔡永香;干佳林;王居远;杨鼎;胡森勇;;行业动态信息采集系统关键问题解决方案[J];测绘科学;2016年03期

9 陈旺;徐天晟;;互联网个人信息垂直搜索系统的设计与实现[J];科技创新与应用;2015年26期

10 张瀚驰;杨璐;方雄武;郑丽敏;;基于本体的食品安全新闻爬虫的设计与实现[J];农业网络信息;2015年05期

【二级参考文献】

中国期刊全文数据库 前10条

1 王帅;周国民;王健;;主题爬虫相关度算法研究综述[J];计算机与现代化;2013年04期

2 白玉昭;梁久祯;;基于概率模型的主题爬虫的研究和实现[J];计算机工程与科学;2013年01期

3 宋海洋;刘晓然;钱海俊;;一种新的主题网络爬虫爬行策略[J];计算机应用与软件;2011年11期

4 蒋国瑞;王秋利;;基于本体的TBT电子信息产品领域主题爬虫研究[J];情报杂志;2011年07期

5 唐苏;刘循;;基于超链接引导和链接图分析的主题搜索引擎[J];计算机技术与发展;2011年02期

6 杨颂;欧阳柳波;;基于Heritrix的面向电子商务网站增量爬虫研究[J];软件导刊;2010年07期

7 张翔;周明全;李智杰;董丽丽;;基于PageRank与Bagging的主题爬虫研究[J];计算机工程与设计;2010年14期

8 胡富茂;;平行语料库在商务信函机器翻译中的应用[J];中国商贸;2010年14期

9 曾广朴;范会联;;基于遗传算法的聚焦爬虫搜索策略[J];计算机工程;2010年11期

10 彭涛;孟宇;左万利;王英;胡亮;;主题爬行中的隧道穿越技术[J];计算机研究与发展;2010年04期

【相似文献】

中国期刊全文数据库 前10条

1 杨坚争;李朝平;;垂直搜索引擎及其应用[J];电子商务;2006年10期

2 罗丽姗;;垂直搜索引擎发展概述[J];图书馆学研究;2006年12期

3 严宏伟;何俊;;基于房源分析系统的垂直搜索引擎关键技术的探讨[J];中国科技信息;2007年05期

4 胡华梁;何进;钟元生;;图书垂直搜索引擎的设计[J];计算机与现代化;2007年08期

5 郑凯明;李义杰;;垂直搜索引擎及其应用价值[J];信息技术;2008年04期

6 毕建涛;霍云福;;垂直搜索引擎赢利模式探讨[J];大连大学学报;2008年03期

7 许鑫;黄仲清;;垂直搜索引擎应用中的若干策略探讨——以12580餐饮垂直搜索为例[J];现代图书情报技术;2009年02期

8 孔祥春;李义杰;郑凯明;;垂直搜索引擎应用研究[J];计算机系统应用;2009年07期

9 杨皖苏;闫冬;;垂直搜索引擎发展策略探讨[J];商业时代;2009年23期

10 肖婷;;垂直搜索引擎与旅游行业探讨[J];农业网络信息;2009年11期

中国重要会议论文全文数据库 前4条

1 褚蓓蓓;刘丹;;垂直搜索引擎:搜索引擎发展方向[A];2007年河北省电子学会、河北省计算机学会、河北省自动化学会、河北省人工智能学会、河北省计算机辅助设计研究会、河北省软件行业协会联合学术年会论文集[C];2007年

2 林欢欢;王文杰;史忠植;;移动环境下垂直搜索引擎[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年

3 王上;于海;王钲旋;;Deep Web垂直搜索引擎设计与实现[A];第26届中国数据库学术会议论文集（B辑）[C];2009年

4 毛华扬;刘卫;;会计信息搜索方法研究[A];第十届全国会计信息化年会论文集[C];2011年

中国重要报纸全文数据库 前10条

1 北大纵横管理顾问公司高级顾问戴晓东;“商搜”变法 垂直搜索引擎的春天还远吗？[N];中国经营报;2006年

2 王艳;垂直搜索引擎市场看好[N];中国旅游报;2000年

3 王靖;赛迪网推出垂直搜索引擎[N];人民日报海外版;2000年

4 杨国民;国内生物医药行业 垂直搜索引擎诞生[N];经济日报;2007年

5 本报记者 王晓雁;垂直搜索引擎著作权之争未破题[N];法制日报;2009年

6 电子工业出版社 董娅　工业和信息化部电子科学技术情报研究所 周峻松;用开源软件建垂直搜索引擎[N];计算机世界;2010年

7 中新;生意宝推“生意搜”搅局电子商务搜索市场[N];经理日报;2008年

8 源讯 编译;搜索巨头的下一步[N];计算机世界;2006年

9 赛迪网 方刚;不只是网站才垂直[N];中国计算机报;2000年

10 ;沱沱网“亮剑”国际消费电子博览会 专业服务带来B2B差异化变革[N];中国贸易报;2007年

中国博士学位论文全文数据库 前5条

1 王晔;垂直搜索引擎若干问题研究[D];复旦大学;2011年

2 吴羽;面向时间敏感对象的垂直搜索引擎关键技术研究[D];浙江大学;2011年

3 胡宜敏;农业垂直搜索引擎语义化若干问题的研究与实现[D];中国科学技术大学;2012年

4 陈竹敏;面向垂直搜索引擎的主题爬行技术研究[D];山东大学;2008年

5 王桂红;农产品市场价格web信息分析方法研究[D];沈阳农业大学;2013年

中国硕士学位论文全文数据库 前10条

1 韩冰;垂直搜索引擎个性化推荐研究与应用[D];大连理工大学;2009年

2 关小敏;垂直搜索引擎的研究与实现[D];北京邮电大学;2012年

3 吴燕玮;基于行业知识垂直搜索引擎的研究与实现[D];北京邮电大学;2012年

4 柳力丽;旅游垂直搜索引擎的品牌传播研究[D];西南大学;2015年

5 钱永杰;面向网络文学的垂直搜索引擎的研究与实现[D];曲阜师范大学;2015年

6 袁凤云;垂直搜索引擎关键技术研究与实现[D];电子科技大学;2014年

7 任睿丽;面向旅游业的垂直搜索引擎的设计与实现[D];电子科技大学;2014年

8 张高伟;基于ElasticSearch的分布式视频垂直搜索引擎的设计与实现[D];哈尔滨工业大学;2014年

9 朱鹏;英文语料库垂直搜索引擎的研究与实现[D];北京邮电大学;2015年

10 杨小丹;面向教育资源c\索引擎的研究与实现[D];电子科技大学;2015年

，

本文编号：553828