spark代码直接运行至Flink平台

2020-04-21 文章 hsdcl...@163.com
  Hi,       有个脑洞大开的想法,有没有可能出一个模块功能,可以将用户写的spark代码直接运行在Flink平台

Re: Re: spark代码直接运行至Flink平台

2020-04-21 文章 hsdcl...@163.com
降低用户迁移学习成本,两个框架有类似的地方,不知道比喻是否恰当,Flink平台 是否可以类似虚拟机,上层的流批应用如java, spark就像Scala一样 hsdcl...@163.com 发件人: Jeff Zhang 发送时间: 2020-04-22 10:52 收件人: user-zh 主题: Re: spark代码直接运行至Flink平台 啥目的 ? hsdcl...@163.com 于2020年4月22日周三 上午9:49写道: > Hi, > 有个脑洞大开的想法,有没有可能出一个模块功能,可以将用户写的spark代

Re: Re: spark代码直接运行至Flink平台

2020-04-21 文章 hsdcl...@163.com
看了下好像 Apache Beam 就是干这个事情的,学习啦 hsdcl...@163.com 发件人: lec ssmi 发送时间: 2020-04-22 13:37 收件人: flink-user-cn 主题: Re: Re: spark代码直接运行至Flink平台 那还不如直接用apache beam直接将这些框架的API全部统一起来。 hsdcl...@163.com 于2020年4月22日周三 上午11:27写道: > 降低用户迁移学习成本,两个框架有类似的地方,不知道比喻是否恰当,Flink平台 是否可以类似虚拟机,上层的流批应用如j