Java开发时 spark 和 mapreduce的语法像吗?

 shilohqiu_144 发布于 2022-10-31 11:16

Java开发时 spark 和 mapreduce的语法像吗?

我问的问题肯能不是很专业 就是想知道 spark 和 hadoop 用java开发时,语法上有多少相似性

1 个回答
  • 不像。完全是两种风格的API
    Spark所有计算都基于RDD,你要通过代码去描述如何从一个或若干个RDD转换成新的RDD。如此直到得到你想要的RDD,然后进行输出。
    另外Spark跟MR相比,他还提供了类SQL的编程方式,能更容易入门。
    我们这里去年就把批处理全部换成Spark作业了。

    2022-10-31 22:21 回答
撰写答案
今天,你开发时遇到什么问题呢?
立即提问
热门标签
PHP1.CN | 中国最专业的PHP中文社区 | PNG素材下载 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有