1) 星环科技大数据基础平台(TDH)
从2013年开始发布2.0版本至今,星环每年都会发布一个大版本,经过多次迭代和技术升级,到2021年TDH 8.0发布,TDH已成为一个企业级大数据基础平台,基于其领先的多模型技术架构,8种异构存储引擎支持10种数据模型,被广泛应用在离线数据批处理、高并发的在线数据服务、数据集市、数据仓库、数据湖、实时数据处理等各类大数据业务场景。此外,通过星环科技的不断自主研发,TDH成为一款国产化自主可控的大数据基础平台,可以替代Oracle、IBM DB2、Teradata等传统主流数据库在分析型场景中的应用及替代Elastic Search在分布式搜索场景中的应用,并在政府、金融、能源、制造业等十多个行业内落地。同时TDH完成了与主流信创生态厂商的适配互认工作,满足信创验收要求,帮助企业打造更全面、更便捷、更智能、更安全地国产化数字底座,加速企业数字化转型。
2) 阿里大数据平台
阿里云发布的一站式大数据平台,覆盖了企业数仓、商业智能、机器学习、数据可视化等领域,可以提供数据采集、数据深度融合、计算和挖掘服务,将计算的几个通过可视化工具进行个性化的数据分析和展现,图形展示和客户感知良好,但是需要捆绑阿里云才能使用,部分体验功能一般,需要有一定的知识基础。 M ax C ompute(原名ODPS)是数加底层的计算引擎,有两个维度可以看这个计算引擎的性能,一个是6小时处理100PB的数据,相当于1亿部高清电影,另外一个是单集群规模过万台,并支持多集群联合计算。
3) 华为大数据平台FusionInsight
FusionInsight全面优化的大数据平台,实现海量数据快速处理 以开放的架构,支持批处理、微批处理、实时处理等业务需求。同时,对数据处理、业务开发、业务移植等方面进行全面优化,可便捷实现业务快速移植、数据快速处理。
华为大数据平台FusionInsight 包括FusionInsight HD和FusionInsight Stream两个组件:
FusionInsight HD包含了开放社区的主要软件及其生态圈中的主流组件,并进行了大量优化,让企业可以从各类繁杂无序的海量数据中洞察商机;
FusionInsight Stream是FusionInsight大数据分析平台中的实时数据处理引擎,以事件驱动(Event-driven)模式处理实时数据的大数据技术,解决高速事件流的实时计算问题。可以在金融、通信、交通、公共安全等领域发挥流式事件实时处理优势,提供实时分析、实时决策能力。
现在成型的大数据平台产品比较多。几个大厂好像都有相应的产品。不过根据最近接触的一个实际经验来看。做大数据之前。应该先仔细梳理一下自己的信息化架构还有各种基础数据,是否对所处的行业有了深刻的了解。清楚的确定各个重要基础数据之间的关系。大数据平台要依托于现有的基础数据。根据不同行业的数据模型来做更进一步的分析。如果基础数据和信息化不完善。或者做大数据之前对这些没有更详细的了解。很可能最后搭建了大数据平台。却缺少重要的数据支撑。;
收起目前大数据平台有很多成熟的商业化产品,以下是其中一些:
这些商业化产品在大数据平台的应用非常广泛,可以帮助企业更好地管理和分析其数据,并从中获得更多的价值。