中国供应商网 欢迎你! 请登录 | 免费注册 服务热线:400-630-6696

中国供应商网

http://chinagysw.cn/
产品高效推广招商
从这里开始
首页 综合资讯 供求信息 公司信息 人才信息 展会信息 品牌信息 政策政法 以商会友
当前位置: 首页 » 资讯 » 热点新闻 » 正文

实现Spark部署 依赖供应商还是"自力更生"?

放大字体  缩小字体 发布日期:2017-02-09  浏览次数:161
核心提示:Novantas公司将Spark数据处理引擎作为商业Hadoop发行版的一部分。这样使得分析服务和软件提供商与Spark版本的Hadoop软件包支持的Spark版本捆绑在一起,因此,它不一定能立即访问新的Spark功能
       Novantas公司将Spark数据处理引擎作为商业Hadoop发行版的一部分。这样使得分析服务和软件提供商与Spark版本的Hadoop软件包支持的Spark版本捆绑在一起,因此,它不一定能立即访问新的Spark功能

例如,Novantas在今年年初开发的基于Hadoop的应用程序中使用了Spark 1.4,以帮助银行的分析团队在内部系统中找到相关的客户和财务数据。该版本由Apache软件基金会于2015年6月发布,去年9月被Spark 1.5取代,1月被1.6取代。但是要升级,Novantas将不得不通过Cloudera放弃Spark支持。

 “我们不想使用不受支持的版本,”纽约公司Novantas解决方案技术部门CTO和工程总监Kaushik Deka说。这是因为应用程序是该部门第一次真正使用Hadoop和Spark。坚持使用Spark 1.4不太理想。Deka说,他希望当Novantas移动到一个新的技术版本可以解决问题。

这样的考虑在大数据环境中是常见的,其通常涉及以快速的速度更新的开源技术。Spark的情况尤其突出:在2014年7月到2016年7月之间,通过Apache共有18个版本,Spark 2.0版本一般都可以使用。

为了更好地使用新功能,一些组织已经避开了供应商提供的Spark支持,并自行部署了基本的Apache Spark软件。

例如,Synchronoss技术公司在2014年从Hadoop供应商MapR获得Spark。但移动管理公司Bridgewater的大数据分析平台高级主管Suren Nathan表示,公司有时直接升级到Apache Spark的新版本,以获得所需的功能。“现在,我的团队可以非常熟练地使用Spark,”他说。

Webtrends公司也一直使用基本的Spark软件。“我们正试图尽可能保持现有的发布,”来自美国的在线活动跟踪公司首席技术官Peter Crossley说,“市场上没有其他技术像这种技术一样快。”

Crossley表示,他更喜欢通过Hadoop供应商Hortonworks获得支持的Spark版本。为了尽可能做到这一点,他的团队与Hortonworks合作开发了一个“双轨发布计划”,供应商去年3月加快了Sparkand与Hadoop相关的其他大数据技术的交付。

 
 
[ 资讯搜索 ]  [ 加入收藏 ]  [ 告诉好友 ]  [ 打印本文 ]  [ 关闭窗口 ]

 
0条 [查看全部]  相关评论

 
推荐图文
推荐资讯
点击排行
中国财政部 中国外交部 中国政府网 中国商务部 重庆小吃 环保建材网 高新技术企业认定 健康养生信息网 服装批发网 思瀚全屋定制 教育培训网 四川水电 餐饮加盟网 重庆消防设备网 重庆财税网 健康养生 行业联盟云平台 特色小吃网 重庆水果网 养老信息网 重庆教育培训
关于我们 | 法律声明 | 著作声明 | 网站声明 | 隐私声明 | 服务条款 | 银行账号 | 广告代理 | 广告服务 | 网站留言 |
渝ICP备2022001036号

增值电信业务经营许可证:渝b3-20070066 互联网药品信息服务资格证书:(渝)-经营性-2014-0009 网站备案号: 渝ICP备2022001036号
中国供应商网,为中国供应商网和供应商开发及消费者专业提供获取招商、广告报价、资源求购品牌营销等的网站信息平台
中国供应商网 www.chinagysw.cn 版权所有 盗冒必究  Copyright 2016 中国供应商网 Powered By eoncen

渝公网安备 50019002501542号