当前位置: 首页 > article >正文

“京东云深海数据平台” 焕新升级

深海数据平台 致力于为每一个数据客户提供灵活化、一站式、智能化的数据开发与管理工具。同时,根据客户行业提供成熟的数据业务全链路解决方案,包括数据集成、开发、元数据管理等功能,帮助数据开发人员快速高效地完成数据相关工作,使得企业更加科学规划和合理构建全域数据,以开放的方式实现企业内部数据共享,充分发挥数据价值。

升级背景

自深海数据平台上线以来,我们已成功在金融证券、政府部门、零售等行业领域得到广泛应用,助力企业在数据开发与管理方面取得了显著成效。在深入了解各行各业需求的基础上,我们不断优化产品,积累了丰富的实践经验。为了更好地满足市场及客户的需求,我们决定对深海数据平台进行升级。

此次升级,我们充分借鉴了以往的成功案例,针对行业痛点,打造了更强大、更稳定的公有云数据平台。升级后的深海数据平台在性能、安全性、易用性等方面均有大幅提升,能够为企业提供更加高效、智能的数据服务。此外,我们还紧跟行业发展趋势,增加了多项创新功能,以满足不断变化的市场需求。

版本简介

JBDP新版本为数据开发、数据安全治理能力带来了极大的提升:

  1. 升级多租户能力:平台支持多租户隔离,确保各租户数据安全稳定,提高资源利用率,满足不同规模企业需求。

  2. 计算存储资源按量付费:用户可根据实际使用量付费,灵活调整资源,降低成本,实现成本配置最优化。

  3. 开通免费体验模式:新用户可免费试用平台功能,零成本感受产品价值,为合作奠定基础。

深海数据平台全新升级后,对各领域、不同体量的客户提供更适配的服务,全方位满足企业需求,助力业务发展。

功能介绍

数据集成

  • 支持向导式配置,通过可视化配置快速完成数据同步任务的配置工作

  • 来源数据源和目标数据源支持多种数据源类型

  • 任务规则支持定时作业、一次性作业、条件触发、手动作业和文件触发等多种作业类型,对作业运行规则可进行失败重试、超时时长配置等操作

  • 任务运行频率支持分钟、小时、天、周、月 频率进行数据采集

  • 支持任务的并发限速配置;可配置任务并发数、通道限流、jvm配置等

数据开发

  • 支持存算分离,降低存储成本

  • 支持云仓引擎,可以在统一的平台上进行引擎任务的开发、发布和运维等操作

  • 支持智能编辑器、可视化依赖编排

  • 支持脚本版本管理,包括创建、删除、修改、查看脚本、上传脚本等配套功能,帮助企业快速地完成数据开发

  • 支持管理发布记录,对发布的版本进行管理,可以对发布的任务进行查看、对比、重新发布(回滚)

运维中心

  • 支持运维大屏,智能告警,及时监控任务概况进行处理。

  • 支持小时分钟级调度,增强离线开发数据处理能力,保障数据准确及时输出

  • 支持批量补数功能,帮助数据开发人员快速弥补历史数据

  • 支持查看任务依赖关系,以任务列表和任务链路的形式展示

数据图谱

  • 支持查看元数据分区信息、分区字段

  • 提供血缘分析等功能,让企业清晰了解数据来源、加工过程及使用情况

  • 支持分词、模糊匹配等检索方式

  • 支持数据权限精细化管理,确保数据在合规范围内使用,为企业筑牢数据安全防线

核心功能介绍

  • 按量付费,存算分离

功能说明:

存算分离功能是一种先进的云计算架构模式,它将数据存储与数据处理计算分开部署和管理,存储按照使用量进行计费,计算资源按照任务执行消耗CU来进行计费,帮助用户降低使用成本。适应不同场景下的数据处理需求,助力企业实现数据价值的最大化。

应用场景:

数据密集型分析任务

当需要进行大规模数据分析和处理时,您可以通过存算分离功能,将计算任务与数据存储分离,实现高效的数据处理。包含对海量数据进行批量查询、复杂计算和实时分析,而无需担心存储资源的限制,提升数据处理效率。

图片.png

  • 全链路的开发能力

功能说明:

JBDP提供全链路的开发能力,旨在为用户提供从数据集成、数据开发、数据运维到数据元管理的一站式服务,同时通过有形产品和实施方法论,帮助客户持续不断的将数据转变成资产并最终服务于业务使用。推进客户转型升级、创新发展,加速客户全面数字化转型升级,实现更高的经营绩效,更强的竞争优势,更可持续的发展。

应用场景:

通过JBDP,可以实现全生命周期的数据中台数仓模型管控体系建设。

数据源在数据图谱的保障下经过数据集成、数据开发、数据运维后产生的分析数据可以回流指导业务数据,增强企业内数据价值管理。

图片.png

  • 运维大屏及时监控,小时分钟级调度保障数据准确

功能说明:

运维总览功能支持运维实例总览,及时查看时间范围内实例及任务运行情况,包括运行实例总数、成功实例、不成功实例等概览,可视化显示当日运行不成功实例原因、任务运行情况分布和调度数量趋势等信息。

运维中心支持对任务运行的管理,可以展示每个任务的运行记录、更改任务信息、终止或重跑任务,支持批量补数。

应用场景:

实时风险监控,运维大屏上实时展示任务异常指标等关键信息,迅速显示故障点,帮助运维团队快速定位问题并进行修复。
数据准确性保障,分钟级的调度保障能够在最短时间内恢复数据的正常处理,减少潜在的风险。

图片.png


http://www.kler.cn/a/288565.html

相关文章:

  • 华为路由策略配置
  • react-redux useSelector钩子 学习样例 + 详细解析
  • 【常见问题解答】远程桌面无法复制粘贴的解决方法
  • 设计模式之装饰器模式(SSO单点登录功能扩展,增加拦截用户访问方法范围场景)
  • vue请求数据报错,设置支持跨域请求,以及2种请求方法axios或者async与await
  • PHP多门店医疗服务系统小程序源码
  • 艾体宝洞察丨透过语义缓存,实现更快、更智能的LLM应用程序
  • 计算二叉树的深度(LeetCode)
  • 旗帜分田(华为od机考题)
  • 用ChatGPT提升论文质量:改进语法、用词和行文的有效方法
  • WinForm技巧之自定义条件
  • 1688精选货源API接口升级||1688选品
  • 数学基础 -- 线性代数之行阶梯形
  • JavaScript高级进阶(一)
  • SprinBoot+Vue停车场管理微信小程序的设计与实现
  • C# 上位机开发指南:高效学习建议
  • 力扣刷题--LCP17.速算机器人【简单】
  • ChatGPT 3.5/4新手使用手册(附:案例)
  • LabVIEW电机多次调用
  • 基于RAG多层次的多代理架构来处理时序任务
  • Vue3中 defineProps 与 defineEmits 基本使用
  • hive中datediff函数介绍
  • 二百五十九、Java——采集Kafka数据,解析成一条条数据,写入另一Kafka中(一般JSON)
  • verilog 中的for循环用法
  • 深度学习(一)-感知机+神经网络+激活函数
  • Qt 实现部件或者窗口(QWidget)透明效果和其他特殊效果