共查询到20条相似文献，搜索用时 125 毫秒
1.
六搜的研发
在IPv6建设过程中,有必要建立一个专用的IPv6搜索引擎.因为:第一,专用IPv6搜索引擎可以集中体现IPv6网络上的资源,总的来说,IPv6网络的性能高过IPv4网络的性能,IPv6网站的速度也快过纯IPv4网站的速度.第二,其可以使用户熟悉IPv6.第三,可以从爬虫收集网页的数据中得到IPv6网站的数目,虽然不能保证每一个IPv6网站爬虫都能访问到,但也可以得到比较接近的数据. 相似文献
2.
网络爬虫是搜索引擎的一个基本组件,网络爬虫抓取页面的效率直接影响搜索引擎提供的服务质量。除了可以通过改进网络爬虫的爬行策略来提高网络爬虫效率之外,也可以通过优化网络爬虫程序某方面的设计来消除特定的效率瓶颈。通过对网络爬虫结构和实际运行数据的分析,针对爬虫的DNS解析瓶颈,设计了一种带缓存异步域名解析器模型,并通过实验和一般DNS解析器模型进行了比较,实验结果证明这种模型对于减少程序等待解析域名的这一操作时间十分有效,显然也能够提高爬虫的整体效率。 相似文献
3.
4.
5.
搜索引擎技术随着互联网的日益壮大而飞速发展。作为搜索引擎不可或缺的组成部分,网络爬虫的作用显得尤为重要,它的性能直接决定了在庞大的互联网上进行网页信息采集的质量。设计并实现了通用爬虫和限定爬虫。 相似文献
6.
2018年6月6日,是世界IPv6启动六周年纪念日。2012年6月6日是World IPv6 Launch Day,国际各大网站、互联网服务、设备提供商会联合启用了IPv6协议,这标志着IPv6在全球范围内正式启动。六年来,全球IPv6流量增长了5000％以上,一些电信运营商网络的IPv6部署率已经达到80％或90％以上。 相似文献
7.
进入21世纪以来．互联网用户不断增多．规模不断扩大、应用不断增加,基于TCP／IP协议的iPv4暴露出其不足之处．尤其是匮乏的IPv4地址不能满足现代互联网的飞速发展,而IPv6的128位的地址长度可以提供充足的地址空间．能够解决IP地址短缺的问题。在1998年6月CERNET就已经加入了6Bone（全球IPv6实验床）．2003年我国启动了CNGI项目．在全国各个高校取得了很好的效果．出现许多基于IPv6网络的互联网应用。今年年初,我们设计并构建了可以同时用于搜索基于IPv4和IPv6的的FTP站点的搜索引擎。 相似文献
8.
王凤红 《中国现代教育装备》2008,(4):76-78
搜索引擎在网络应用中越来越重要,网络爬虫作为搜索引擎的重要组成部分成为近期的重要研究目标。本文介绍了一种构建简单分布式网络爬虫模型的方法,提供了行之有效的理论分析和算法。 相似文献
9.
在高校已经建成互通的纯IPv6网络中,通过运用IPv4 over IPv6隧道技术将高校中无法IPv6化的应用进行互联,为高校的IPv4业务拓展和资源共享提供了有效途径。随着国际互联网的不断发展,现存的IPv4网络的一些不足已经暴露出来：IPv4地址空间不足,骨干路由器维护的路由表项数量过大,不易进行自动配置和重新编址,不能解决日益突出的安全问题。 相似文献
10.
11.
孙滨 《洛阳师范学院学报》2011,30(11):51-53,57
随着网络信息资源的爆发式增长,现有的搜索引擎已经无法满足迅速获取准确信息的需要,为搜索引擎引入搜索内容更为精确、搜索信息量更大的爬虫显得十分迫切.本文实现了一种基于多个分类器的分布式主题爬虫方法.实验结果表明,该爬虫的速度和精度均较为良好,特别适合于对大数据量的特定主题信息的抓取. 相似文献
12.
基于下一代网络技术的远程教育远景 总被引：3，自引：0，他引：3
随着远程教育的不断发展，基于Internet的网络教育居于主导地位。下一代网络技术(IPv6)与现存的IPv4技术相比．提供了更多的地址空间、更快的网络速度、更加安全的安全性能以及更加灵恬的扩展性，它必将促进远程教育的纵深发展。本文在介绍IPv6技术的基础上，探讨其对远程教育的深远影响。 相似文献
13.
龙俊浩 《广东技术师范学院学报》2013,(12):132-136
在高校大学生就业形势极其严峻的背景下,高等师范院校毕业生这一特殊群体对及时准确的教师招聘信息更加渴望．因此高校研究建设教师招聘信息的垂直搜索引擎非常有必要．本文对垂直搜索引擎的工作原理以及关键技术模块进行分析,同时结合各类教师招聘信息网站的特点对关键技术中网络爬虫爬取策略进行改进,创建一个更具高效教师招聘信息价值平台． 相似文献
14.
严碧惠 《Journal of Zhangzhou Technical Institute》2011,13(3):11-15
多媒体通信网络具有连接通信主机、数位设备多和业务种类多等特点。因为IPv4地址面临枯竭,IPv6地址使用迫在眉捷。利用现有IPv4网络为承载网络,在边缘网络实现IPv6化,是当前解决IPv4地址严重不足的一种解决方法。为了实现IPv4与IPv6的业务服务兼容,可以6to4和区分服务来解决两类地址转换引起的服务质量问题。 相似文献
15.
搜索引擎技术应用广泛。Lucene作为一个优秀的搜索引擎开源工具包,可方便实现相关搜索引擎功能。介绍了Lucene搜索引擎工具包,在此基础上,利用Lucene开发工具包,设计并实现了综合查询系统中搜索引擎功能。阐述了网络爬虫子系统、索引子系统和查询子系统3个模块功能。 相似文献
16.
在IPv4网络向IPv6网络过渡时期,NAT-PT技术是实现两者之间通信的关键技术。但是随着IPv6的不断发展,对NAT-PT翻译网关地址转换技术也提出了更高的要求。地址映射表查找算法是NAT-PT技术的决定性因素,通过伪C代码来实现地址映射表的建立、搜索、修改、删除,此方法可以成功地将NAT-PT技术应用于IPv6网络中。 相似文献
17.
由于现在Web上的信息量变得越来越大,单个的搜索引擎不可能包括整个网络的信息资源,网络爬虫的能力,索引数据库的大小,系统维护开销等,都限制了一个搜索引擎的查全率。因此,设计一个统一的搜索引擎查询界面,并能快速智能合并查询结果是一个挑战。针对现有单个引擎搜索的限制,提出了基于行块的正文摘要提取方法和基于词频的相似度模型实现了一个可扩展的多WEB源的网络爬虫,将现各搜索引擎上的网页信息进行抽取,过滤、去重、排序、信息重组,可以获得更全面更符合人们需要的、个性化的数据结果。系统的测试结果表明我们的方法是比较有效的。 相似文献
18.
基于双协议栈的6to4隧道技术的应用 总被引：1，自引：0，他引：1
杜慧军 《广东技术师范学院学报》2007,(12):16-20
IPv6是下一代互联网的核心技术。IPv4向IPv6过渡是一个必然发展过程,如何将过渡中占主导地位的IPv4网络逐渐过渡到占主导地位的IPv6网络,这是近几年研究的重点和方向。6to4隧道技术便是一种主要的过渡技术。该文对这种隧道技术进行了详细分析和研究,指出了这种隧道技术在使用中的优点,在此基础上,重点阐述了IPv4向IPv6的过渡实施策略。 相似文献
19.
IPv6协议已被公认为下一代互联网的核心协议.IPv4到IPv6的渐进式的演化过程中,必然会出现一个IPv4、IPv6双协议栈长期共存的过渡时期.分析了过渡时期网络方案的设计原则与目标,从工程角度给出了一种双协议栈逻辑层独立、物理层共享的设计方案,可以实现IPv4/IPv6两种协议栈的平滑升级与无缝集成. 相似文献
20.
以何种策略来访问web资源是搜索引擎研究的热点之一。通过比较通用搜索引擎和专业搜索引擎的搜索策略,针对"最好策略"的几种策略方案进行了优缺点的分析,总结了关于提高网络爬虫搜索效率的关键,旨在使人们对爬虫的搜索算法有一个全面大概的了解。 相似文献