腾讯云大数据套件TBDS与阿里云大数据能力产品对比
前言
博主在接触大数据方向研究的时候是在2016年,那时候正是大数据概念非常火热的一个时间段,最著名的Google的3篇论文。Google FS、MapReduce、BigTable,奠定了大数据框架产品的基础。Google文件系统,计算框架和存储框架。往后所有的大数据产品和过程域无一不是在三个模块的基础上进行搭建,迭代,完善。我们最开始使用的都是开源的产品,比如hadoop,HDSF,MAPReduce,Hbase、这正映射类Google的三篇论文。后来国内一些互联网巨头,就在此基础上封装大数据套件,比如阿里云,腾讯云、华为云,天翼云等等。经过多年的演进,现在看看各厂商对大数据套件的演进的如何,本文主要介绍腾讯云大数据套件TBDS与阿里云大数据能力产品对比
一、阿里云大数据
阿里云大数据和AI系列产品服务。覆盖从数据处理分析到AI工程化的完整能力。开放数据处理服务ODPS系列产品提供强大的数据分析和管理功能;开源大数据系列产品支持更加灵活地构建大数据平台;AI和机器学习系列产品提供完整的AI工程平台和稳定的智算服务。
开放数据处理服务ODPS套件
套件主要有以下几款产品
1、MaxCompute云原生大数据计算服务
SaaS模式云数仓解决方案,高效处理海量数据
云原生大数据计算服务 MaxCompute是面向分析的企业级SaaS模式智能化云数据仓库,以Serverless架构提供全托管、开箱即用的在线数据仓库服务
maxCompute 是面向分析的企业级 SaaS 模式智能化云数据仓库,以 Serverless 架构提供全托管、开箱即用的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制。计算存储的智能优化能力、开放的湖仓一体架构、近实时和交互式查询加速能力以及Data+AI一体化建设,使用户可以最小化运维投入、经济并高效地分析处理海量数据。数以万计的企业正基于 MaxCompute 进行数据计算与分析,将数据高效转换为业务洞察。
产品架构
2、
实时数仓HologresODPS实时交互式计算引擎
提供离在线一体化全栈数仓解决方案
Hologres 是阿里云自研一体化实时湖仓平台,通过统一数据平台实现湖仓存储一体、多模式计算一体、分析服务一体、Data+AI一体,无缝对接主流BI工具,支持OLAP查询、即席分析、在线服务、向量计算多个场景,分析性能打破TPC-H世界记录,与MaxCompute、Flink、DataWorks深度融合,提供离在线一体化全栈数仓解决方案
产品架构