基于亚马逊云科技探索数智一体的云数据智能平台
2024-06-05 09:41:07
作为全球领先的数据智能平台供应商数新网络，针对海内外企业对于公有云大数据平台的需求，数新网络自研的CyberData已完美适配AmazonEMR、Amazon EMR Severless、Amazon Redshift、Amazon Aurora等计算引擎。
数新网络联合亚马逊云科技共同为客户提供基于亚马逊云科技的数智一体的云数据智能平台。
联合为喜得提供一站式数据开发治理平台
品牌介绍
喜得是一家全球时尚科技公司，旨在打造世界顶级的Gen-Z时尚品牌。目前喜得在全球社交媒体拥有超过500万粉丝，用户遍布全球130多个国家和地区，在全球移动端超过1600万次下载，同时揽获电商类榜单韩国区TOP3，美国区TOP10的成绩，成为近年来全球增长最迅速的品牌之一。
核心问题
随着业务的发展，喜得希望在亚马逊云科技上搭建一站式数据开发治理平台，为复杂的数据需求提供技术支撑，数据平台需具备支持Amazon EMR和Amazon EMR Serverless等引擎的数据开发治理能力。
解决方案
针对喜得的需求，数新网络基于赛博数据平台CyberData提供完美适配亚马逊云科技底座的数据平台整体解决方案。CyberData基于流批一体、湖仓一体、数智一体的现代数智架构设计，支持存算分离、弹性伸缩、Serverless等云原生能力，平台全功能模块均支持Amazon EMR、Amazon EMR Serverless等亚马逊云科技大数据组件。
在数据的开发治理上，CyberData围绕数据的全生命周期，提供数据集成、开发、治理、服务等模块化能力，保障喜得云上数据质量；在数据开发阶段，CyberData支持流批一体能力，离线/实时的数据开发任务可通过Spark/Flink on EMR 在亚马逊云科技上稳定运行，并基于数新网络自研的Cyber Scheduler调度引擎完成复杂多样的业务流程需求；在数据治理阶段，CyberData提供完善的数据治理体系，基于数据标准、数仓建模、数据质量等模块赋能数据治理的前、中、后期，为喜得上千个任务以及海量数据提供能力保障，满足数据的完整性需求。
CyberData在亚马逊云上为喜得提供了满足其需求的一站式数据平台，平台提供一站式建设数据集成、开发、运维、安全等能力，为喜得提供了功能完善、性能优越、低学习成本的数据基础设施。助力喜得利用全域数据去驱动业务，构成业务与数据联通的闭环。
通过CyberData的数据治理能力体系，为喜得提升了数据的质量，提高了数据的利用价值，实现数据资产开发、运维、治理、运营过程更安全、敏捷、精益、自动化、服务化和智能化，从而为业务的精细化管理提供可靠的数据支撑。
CyberData为喜得提供整套数据系统管理的统一入口，为平台运维工作提供智能便捷的故障定位能力，并借助CyberData实现云上资源费用的高效控制。
联合为国内某知名咖啡品牌企业搭建一站式全链路数据平台
品牌介绍
国内某知名咖啡品牌是中国门店数量最多的连锁咖啡品牌。该品牌充分利用移动互联网和大数据技术，创造新零售模式，与各领域优质供应商深度合作，打造高品质的消费体验，为客户提供高品质、高性价比、高便利性的产品。
核心问题
随着国内某知名咖啡品牌全球化进程加速，海外业务数据量激增，面对海外业务对于实时数据整合、高效利用提出的更高期待。其海外数据规模已达TB级别、任务实例数在千级别，涉及表结构约上万张，为高效支撑海外业务数据需求以及满足跨境合规性等要求，该企业计划将其在亚马逊云科技上基于开源组件的自建数据分析系统环境进行升级，急需一站式的数据平台加快其海外业务的落地。
解决方案
AmazonGlue高效的数据集成和AmazonRedshiftPB级别的数据存储计算服务率先为该企业的业务发展提供了有力支持，数新网络CyberData不仅高度兼容适配亚马逊云科技，还提供涵盖数据集成、数据开发、数据治理到数据服务的一站式全链路的产品化能力，实现数据全生命周期的管理，可满足该企业基于AmazonRedshift进行数据开发治理的全部需求。在数据安全、数据治理能力上，CyberData提供基于表-责任人的权限管理机制和安全审计、数据脱敏等规范化能力，可满足三类合规：国内合规、新加坡合规及国内外数据流通合规；在该企业海外大数据平台搭建过程中，CyberData可以提供成熟迁移工具从旧环境的Airflow调度引擎迁移任务，减少迁移时间窗口，加速业务落地。
满足客户基于AmazonRedshift数仓开发治理以及数据安全合规性需求。
大幅降低了迁移成本，加快业务落地，减少技术团队投入。
实现调度资源组的Serverless化，弹性分配和EC2实例的管理，帮助客户降低服务器成本。
数新网络与亚马逊云科技的完美联合，不仅为以喜得与国内某知名咖啡品牌为例的客户们提供了满意的产品与服务，并在汽车、游戏、新能源、社交等领域也落地了相应成功案例。
在未来，数新网络会联合亚马逊云科技持续发力，做亚马逊云科技上最好的云数据平台，与此同时，数新网络CyberData将继续为海内外企业提供数智化服务，让大数据、AI和数据价值安全流通得到高质量结合，助力海内外企业实现数字化、智能化转型，激活数据要素潜能，助力数智化新质生产力发展。