轻松驾驭「大象」?敏捷实时大数据平台全程落地应用实践来教你
点击上方关注,All in AI中国
大数据平台是一个重要且常用的大数据基础设施平台。每个企业目前应该都已有自己特色的数据处理平台,但随着数据量的增加和场景的多样性,在数据流转过程中一定会遇到各种问题。从人的维度看,数据工程人员压力和工作量越来越大,技术全面性的要求越来越高;对于数据分析人员和数据科学家,数据处理平台是个黑洞,他们对数据处理过程的参与度比较低,沟通成本比较高;对于管理层,数据的统一治理、数据安全、数据资产是重要且难啃的骨头,很难找到发力点。很多时候,通过对现有平台的修补已经无法很好的解决这些问题。
敏捷实时大数据平台,具有先进的设计理念,从平台的设计阶段开始就是从更高的维度,自顶向下的来分析痛点设计系统的。通过多年对该理论的实践,我们积淀下了四大支柱平台,Dbus数据总线平台、Wormhole实时数据处理平台、Moonbox计算服务平台、Davinci可视应用平台。这四个支柱从最初的设计理念就是统一的,所以最终打造出来的是一个敏捷、易用、通用、实用的平台。如果说要解决的问题及场景就像大象庞大的身躯,那四大平台就是大象强壮的四肢, 通过多年基于项目的打磨, 如今四肢不止能稳稳的支持大象庞大的身躯,还具有很好的敏捷性和灵活性,基于这个特点,我们明确提出了“敏捷大数据”的理念,并基于此理念来构建平台、落实应用、打造产品。
通过本次课程,我们不仅会为大家详尽的剖析敏捷实时大数据平台,这头敏捷的大象, 而且帮助您快速驾驭这头大象。在本次课程中,我们会从设计理念到架构,从功能特点到平台的核心技术,做详细的讲解。其中包括数据的实时抽取,实时处理、实时计算、实时展现及实时提供服务。通过数据虚拟化理念的讲解,将会引发您对传统数仓、数据安全和数据管理的思考。分享对各种主流技术的探坑过程,为您提供参考经验。完美的数据可视化服务,一定会让您眼前一亮。
为了回馈社区,我们把业界领先的敏捷实时大数据处理平台的四大重要支柱全部开源。学习了本次课,理解了敏捷大数据平台,这堂课的价值您懂得。
课程特色
1
基于敏捷大数据开源平台工具,从无到有构建一套完整的实时大数据平台体系架构
这是一门针对如何构建、使用完整的大数据平台系统,为期2天的深度培训课程,由宜信的大数据团队,根据团队的实践经验,将大数据平台的整个开发、部署、应用的过程,进行了深度的分享讲解。本课程,包括了从数据的抽取,数据加工,数据存储运算 (实时数据仓库/数据集市/ETL),再到实时数据应用,以及与数据仓库平台相关的元数据管理、血缘分析等全部环节。实现数据平台和数据应用的飞跃进阶。不管您的现在处于哪个级别,敏捷大数据平台直接带您升级到最高层级。
2
核心技术解析、开源自主可控、二次开发扩展,让用户真正掌握驾驭整个大数据平台建设和发展
本次课程的大数据平台实践,全程采用开源工具,你可以深入进行二次开发,从而实现对整个大数据平台的真正自主可控。本次课程,培训专家团队,也将会深入讲解二次开发的方法与技巧。更重要的是,期望受训者,通过开源代码,指导文档和视频,可以为开源社区贡献代码,有能力把该平台运用到实际项目中。
3
常见大数据实时场景案例分析,典型架构模式探讨
本课程还会就一些典型的实时数据处理场景进行举例和案例分析,讲解场景需求背景、挑战、痛点、解决方案和项目效果,还会讨论一些通用的切面问题,如数据质量、运维监控等。过程中也会探讨不同的典型架构模式及其适用性。
4
一些常见的主流的大数据开源工具的选型和剖析,为您提供深度参考
本次培训,还会提供各种大数据平台的相关开源工具选型剖析,这是宜信大数据团队在开发部署大数据平台的过程中,对多种工具进行试用,并总结的经验,这将是一份极其珍贵的参考建议。例如,数据存储方面,会涉及到HBase、Cassandra、Kudu的实际选型建议,数据查询方面,会涉及到Spark SQL、Presto、Impala Hive等工具的实际造型建议等。
识别图中二维码,查看更多课程详情:
详情戳:http://sacc.it168.com/goupiao.html