海量数据实时采集机制研究

在通信等行业中,往往需要对海量数据进行采集和挖掘,常用的采集方式有FTP、FTAM等,但是这些都无法做到实时性;而利用NFS等协议,客户端直接读取文件也存在一定的缺陷,因此,本文提出了一种利用Telnet协议进行采集的方式,经过实际系统验证,它具有实时、高效、系统资源消耗低、实现代价小等优点。