一种Web集群系统的动态分离式调度策略

静态分离式调度策略(SSSP)不能有效地分配服务器资源。动态分离式调度策略(DSSP)对静态请求和动态请求分别以请求的文件和用户会话为单元进行调度。请求分发器监测后端服务器的状态,按资源使用情况将服务器区分为轻载、重载和过载,轻载服务器可以接收新的请求单元,重载服务器不接收新请求单元,但继续为已接收的请求单元服务,过载服务器迁移部分请求单元到轻载服务器。试验结果表明,DSSP的效率明显优于SSSP。

收入导向的电子商务网站队列管理策略

现有的网站请求队列管理策略没有考虑各页面的重要性。针对电子商务网站,该文提出一种以收入为导向的队列管理策略,通过对日志文件的统计分析,根据各页面最终跳到交易页面的概率,给予请求不同的优先级,优先处理最有可能发生交易的请求,提高交易成功率,保证网站赢得更多的收益。实验结果表明,收入导向的队列管理策略最多能增加59.2%的用户交易量。

一种CDN中的动态数据存储方案——UbDP

CDN对于动态Web应用的加速通常采用数据缓存或复制技术。针对论坛、博客服务提供商等为注册用户提供个人信息发布平台的网站,提出了一种基于用户的数据分割方法:将数据按所属注册用户进行分割,分布到离该用户最近的数据库系统中。将数据库UID操作分散到多个数据库系统,消除了单个数据库系统的I/O瓶颈。

一种TCP连接的延迟多次迁移技术

现有的基于内容的Web交换技术不能很好地支持HTTP持久连接(P-HTTP)和流水线请求。提出了一种TCP连接的延迟多次迁移方法(DM-TCPHA),前端FE根据第一个请求将连接迁移到选中的BE,该连接上的后续请求报文由BE来调度,且通过强制手段保证BE在收到客户对HTTP回复的确认报文后再执行迁移。该方法具有TCP迁移高性能的优点,且能很好地支持P-HTTP和流水线请求。

Web集群中的动态请求的分类调度策略

现有的请求调度策略应用于动态请求时容易导致集群节点间的负载失衡。针对动态请求,提出了基于分类的请求调度策略,根据URL模式对动态请求分类,同一类的请求具有相同的负载特性,然后用比较简单的轮转策略对各类请求进行调度,因而可以在不估计请求负载的情况下,很好地将负载均衡到了后端节点上。测试结果表明,使用该策略后,集群系统的吞吐量可以提高51.9%。

嵌入式终端的认证系统设计方案研究及实现

认证系统是宽带网络的重要组成部分,目前业界比较流行的认证方法由于客户端软件太大,不适宜用于嵌入式系统。本文比较了几种认证方法的优缺点,设计实现了一种基于DHCP和简单TCP通信的认证方法,并在嵌入式系统中得到了很好的应用。

分布式多主题网络爬虫系统的研究与实现

提出一种基于数据抽取器的分布式爬虫架构。该架构采用基于分类标注的多主题策略,解决同一爬虫系统内多主题自适应兼容的问题。介绍二级加权任务分割算法,解决基于目标导向、负载均衡的URL分配问题,增强系统可扩展性。给出基于Trie树的URL存储策略的改进方法,可以高效地支持URL查询、插入和重复性检测。