标签:优化 引擎 img 生产环境 运行 pac 大数据 增量 系统
1.随着互联网快速发展,数据量的快速膨胀,我们日增3000多亿数据量,因此需要针对PB级存储、几百TB的增量数据处理架构设计
2.系统逻辑划分总图:
暂不便透露
3.系统架构图:
4.大数据计算引擎我们是采用Apache Flink流式计算框架,并对其进行了一些优化,目前在生产环境,已经基本稳定运行!
欢迎大家评论!!!
标签:优化 引擎 img 生产环境 运行 pac 大数据 增量 系统
原文地址:https://www.cnblogs.com/jiang-it/p/11357021.html