云彩店邀请码|半壳|优胜
随着无线通信技术的4G时代的到来,电信运营商的移动终端用户帐详单数量较以前明显增多,而且帐详单格式的长度数倍增加,用传统的方法无法在短时间内处理完成用户通话、短信、数据流量等帐详单的快速、实时的查询,目前的运行的帐详单系统随时间的推移,已明显不能满足业务变化的需求。
针对运营商的下一代帐详单存储系统的特征,新的架构设计必须能够良好的支撑海量帐详单的实时加载以及高并发查询,需要解决问题包括:数据量的帐单高并发查询性能要求以及扩展性能要求;统计报表要求以及非结构化数据的引入。实现该系统的难点在于帐详单存储系统需要在保证数据正确性和完整性的前提下,实时高效加载批价后的海量话单数据,同时必须能够支撑高并发的用户实时查询请;面对详单数据的快速增长,帐详单存储系统还需要保证系统稳定性的前提下进行动态扩展;帐详单存储系统还要能够快速灵活的支撑各类报表统计类业务的需求以及支撑对各种如上网日志,客户签名PDF文件等非结构化数据的存储查询需求。对于以上的问题和技术难点,主要采用基于Hadoop的分布式的HBase数据库技术实现详单存储和并行计算能力,利用负载均衡技术,实现详单查询池的并行计算能力,同时利用HDFS分布式文件系统构建详单存储池,实现非结构化的文件透明存储。
该系统主要使用最新的HBase等相关技术替换了以文件系统为代表的第一代详单查询系统,建立了以列存储、高压缩为核心技术的云化架构平台下的新一代帐详单查询系统,并且提供更高的系统可用性
来源:半壳优胜鲸鱼幸运星转载请保留出处和链接!
本文链接:http://87cpy.com/289330.html
本站部分内容来源网络如有侵权请联系删除