云智能数据处理架构-解决海量数据处理
思达商业智能 Style Intelligence 作为敏捷商业智能的领导者,针对海量数据处理与海量数据实时分析的需求,于2009年率先推出了支持实时海量数据计算的云智能数据处理架构。云智能数据处理架构包括数据存储模块、数据计算模块、分布式系统管理模块三个部分。
数据存储模块
云智能分布式数据处理架构中的数据存储模块是自主知识产权研发,实现大数据量下的数据高速压缩、高速读写和高速传输。
数据计算模块
提供智能地将大数据量下数据计算需求以最优化的方案分配给各数据处理分节点,而运行在各分节点的高效计算模块可以在毫秒级完成上千万条数据记录的扫描、统计、分析、预测等计算需求。
分布式系统管理模块
提供整个架构的系统配置管理、系统资源内部审核,每个分布式节点的监控以及整个架构资源的优化。
Style Intelligence云智能数据处理架构与基于批处理(Batch Job)的分布式存储和分布式计算的平台区别开来,完美地满足了海量数据处理,海量数据分析的业务需求。
到今天,Style Intelligence云智能数据处理架构已经成功部署于上百家全球性机构,包括AT&T、美国国防部、世界卫生组织等著名机构。
相关文章:
|