关于数据湖:从消息到数据湖看-Apache-RocketMQHudiKyuubi-最新进展

上海的开发者小伙伴们，12 月 18 号，Apache RocketMQ & Apache Hudi & Apache Kyuubi （Incubating）三社区 Meetup 来了，打造最强音讯传输、实时计算、数据入湖一体化解决方案专场。

本场流动聚焦 Apache RocketMQ 及 Hudi，Kyuubi 数据湖联合，帮忙开发者能更好地应答业务挑战。流动将邀请喜马拉雅、安全证券、网易、阿里云的泛滥技术专家，独特为大家分享 Apache RocketMQ with hudi & Kyuubi 实际与利用。

Apache RocketMQ

Apache RocketMQ 是由阿里巴巴开源的音讯产品，历经多年双十一流量洪峰严苛考验，具备低提早、高性能、高可靠性、万亿级容量和灵便的可扩展性。目前，寰球超过上万家企业都在应用 Apache RocketMQ，不仅包含字节、快手、小米、滴滴、同城艺龙等来自互联网的头部企业，也包含来自于头部银行、券商、保险，基金等一系列要求极为严苛的金融公司。

Apache RocketMQ 通过过来几年的倒退，曾经成为微服务畛域业务音讯的首选，随同着云原生时代的到来以及实时计算的衰亡， 生于云、长于云的 Apache RocketMQ 5.0 应运而生，全新降级为云原生音讯、事件、流交融解决平台，帮忙用户更容易地构建下一代事件驱动和流解决利用。

Github 地址：
https://github.com/apache/roc&＃8230;

Apache Hudi

Apache Hudi 是 Apache 软件基金会顶级我的项目，是新一代的流式数据湖平台，反对数据插入、更新、删除和增量数据处理；可助力构建高效的企业级数据湖。

GitHub 地址：
http://github.com/apache/hudi

Apache Kyuubi（Incubating）

Apache Kyuubi （Incubating）是一个 Thrift JDBC/ODBC 服务，目前对接了 Apache Spark 计算框架，反对多租户和分布式等个性，能够满足企业内诸如 ETL、BI 报表等多种大数据场景的利用。Kyuubi 能够为企业级数据湖摸索提供标准化的接口，赋予用户调动整个数据湖生态的数据的能力，使得用户可能像解决一般数据一样解决大数据。我的项目已于 2021 年 6 月 21 号正式进入 Apache 孵化器。从社区以后阶段的倒退指标来看，它的次要方向是依靠自身的架构设计，围绕各类支流计算框架，打造一个面向 Serverless SQL on Lakehouse 的服务。Apache Kyuubi （Incubating）是一个 Thrift JDBC/ODBC 服务，目前对接了 Apache Spark 计算框架，反对多租户和分布式等个性，能够满足企业内诸如 ETL、BI 报表等多种大数据场景的利用。Kyuubi 能够为企业级数据湖摸索提供标准化的接口，赋予用户调动整个数据湖生态的数据的能力，使得用户可能像解决一般数据一样解决大数据。我的项目已于 2021 年 6 月 21 号正式进入 Apache 孵化器。从社区以后阶段的倒退指标来看，它的次要方向是依靠自身的架构设计，围绕各类支流计算框架，打造一个面向 Serverless SQL on Lakehouse 的服务。

Github 地址：
https://github.com/apache/inc&＃8230;

立刻点击此处参加流动吧！

理解更多相干信息，请扫描下方二维码或搜寻微信号（AlibabaCloud888）增加云原生小助手！获取更多相干资讯！