基于云计算的定向搜索监控研究

被引:4
作者
屈振新
朱文昌
机构
[1] 中南财经政法大学信息与安全工程学院
关键词
Google云平台; 定向; 搜索; 监控; 计划任务管理; 定向网络爬虫;
D O I
暂无
中图分类号
TP391.3 [检索机];
学科分类号
080201 [机械制造及其自动化];
摘要
传统的搜索引擎不能代替用户实行实时监控,为了解决这个问题,提出了定向搜索监控技术,用户可以根据自己的需求定制任务,包括指定搜索范围和搜索主题,系统按用户定义周期监控,并将结果及时主动地反馈给用户。以Google云平台Google App Engine作为开发平台,利用其提供的多项云服务,有效地解决了计划任务管理、多任务触发以及高并发等问题。重写了通用网络爬虫,通过算法改进提出了定向网络爬虫模型,定向网络爬虫与云端强大的服务器相结合,极大地缩短了爬行时间,提高了搜索监控效率。云平台和搜索监控技术的结合是平台即服务思想的一次成功实验。
引用
收藏
页码:82 / 87
页数:6
相关论文
共 7 条
[1]
基于综合形式(PAAS+IAAS)的云计算平台的研究与构建 [J].
徐风 ;
王伟平 .
科技资讯, 2010, (32) :19+21
[2]
基于Shark-Search和Hits算法的主题爬虫研究 [J].
罗林波 ;
陈绮 ;
吴清秀 .
计算机技术与发展, 2010, 20 (11) :76-79
[3]
基于网页内容和链接价值的相关度方法的实现 [J].
郑国良 ;
叶飞跃 ;
张滨 ;
林国俊 .
计算机工程与设计, 2008, (23) :6020-6022+6046
[4]
[5]
Billing and budgeting resources-Google app engine...http://code.google.com/intl/zh-CN/appengine/docs/billing.html.2011,
[6]
Document Categorization and Query Generation on the World Wide Web Using WebACE [J].
Daniel Boley ;
Maria Gini ;
Robert Gross ;
Eui-Hong (Sam) Han ;
Kyle Hastings ;
George Karypis ;
Vipin Kumar ;
Bamshad Mobasher ;
Jerome Moore .
Artificial Intelligence Review, 1999, 13 :365-391
[7]
The AT&T Internet Difference Engine: Tracking and viewing changes on the web [J].
Douglis F. ;
Ball T. ;
Chen Y.-F. ;
Koutsofios E. .
World Wide Web, 1998, 1 (1) :27-44