登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
本周一,IBM宣布将对开源实时大数据分析项目Apache Spark进行大规模资助,蓝色巨人宣称,其资助的力度之大相当于每年数亿美元的投入。
Hadoop技术出自Google、Yahoo这些互联网公司,主要是为了对规模庞大的各类数据进行处理和分析。不过近年来随着大数据应用的流行,越来越多的公司也希望自己具备类似的能力,这使得Hadoop逐步进入了主流。Hadoop以及相关的分发企业如Cloudera, Hortonworks等也成为了大数据领域的投资热点。
Spark同样也提供大数据处理与分析能力。如果说Hadoop胜在规模的话,那么Spark就胜在速度。这项由2年前UC Berkeley AMP实验室开发的技术将中间输出结果保存在内存而不是分布式文件系统中,从而可以提供实时的数据分析能力。与Hadoop获得的资助相比,对Spark的支持还很不够。
正是在此背景下IBM宣布了对Spark的大规模资助。蓝色巨人将投入超过3500名开发者到Spark相关项目,为项目提供机器学习技术,并将Spark嵌入到IBM的数据分析和商用软件中,同时还会把Spark作为服务在它的Bluemix开发平台上提供出来。为了鼓励基于Spark的创新,IBM还将在旧金山设立一个Spark技术中心。IBM还将把自己的一个研究项目SystemML开源。这个项目是利用机器学习技术去识别数据模式,而它正是在Spark基础上开发的。
IBM还计划与UC Berkeley的AMPLab、DataCamp、Galvanize以及Big Data University等学术及教育组织合作提供Spark教育课程,目标是培养100万名数据工程师和数据科学家。
IBM的大规模资助令人瞩目。回顾过去,正是由于IBM的出手才让若干关键技术得到了普及,比如说1980年代IBM对PC的投入,2000年代对Linux的投入均加速了相关技术成为主流的进程。
当然,对于IBM来说,对Spark的大规模投入实际上也在帮助它自己。此举不仅能强化自己在大数据领域的地位,同时也能吸引更多开发者加盟它的生态体系,帮助IBM更快更好地解决其业务问题。
而放眼更大的环境,开源化已成不可逆转的趋势。技术巨头比以往任何时候都更加热情地涌入到这一潮流当中。比方说Google开源了自己最大的秘密之一,Facebook更是几乎将自己变成了一所开源实验室。因为这些巨头明白,如果不拥抱开源,也许就会被开源消灭。
延伸阅读:
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
5月5日,山东淄博供电公司依托自主研发的“电力宝”综合性大数据分析工具,统计分析近期十强产业、游客出行、供电保障等方面的电力大数据情况,依据分析结果撰写电量分析报告,并报送给政府相关部门,服务城市建设及产业发展。电力大数据能够综合反映经济社会发展状况和各行业生产经营状况,为做好供电
4月29日,山西对《山西省数据工作管理办法》(征求意见稿)公开征求意见。其中提到,山西省人民政府工业和信息化、能源等部门应当推进工业、能源数字化,加强工业互联网、能源数字化建设,围绕煤炭、电力、焦化、煤化工、钢铁、装备制造等传统优势产业,加快推动研发设计、生产制造、经营管理、市场服
在数字经济时代,全社会数据总量呈爆发式增长,支撑海量数据存储计算的数据中心和算力网络逐步成为支撑各行业数字化转型的重要新型基础设施。数据中心在创造经济价值的同时,其能耗也逐渐成为全社会关注的焦点。数据中心节能降耗是大势所趋。国网河北省电力有限公司充分发挥电力数据价值,积极探索服务
近日,国家发展改革委办公厅、国家数据局综合司印发《数字经济2024年工作要点》(以下简称《工作要点》),对2024年数字经济重点工作作出部署。为全面贯彻落实党的二十大和二十届二中全会精神,按照中央经济工作会议和全国两会部署,支持数字经济高质量发展,深入实施推进《“十四五”数字经济发展规划
乌兰察布市源荷互动绿色大数据中心示范项目位于察右后旗境内,于2月27日启动,是一座100兆瓦分散式风电项目,该项目可降低电网多次升降压和长距离输送的电能损失,具有良好的社会综合经济效益。截至4月23日,项目20台风机吊装、集电线路放线都已完成,升压站设备基础完成80%。
4月18日,在河北省昌黎县朱各庄镇下庄村的农田里,几十台播种机来回穿梭,将种子埋入土中。种植户们启动水泵,通过滴灌管道浇水。当天,冀北昌黎县供电公司朱各庄镇供电所员工王伟和孙奉江来到下庄村,巡检排灌变压器及10千伏灌溉用电线路。下庄村有农田7300多亩,主要种植玉米、花生、白薯等农作物。
国家电网有限公司高质量发展工作会议暨2024年第二季度工作会议提出,坚持问题导向和系统观念,推动公司高质量发展和电网高质量发展。数字化智能化是电网高质量发展的支点,要聚焦应用赋能,聚焦新型电力系统建设,聚焦人工智能创新应用,发挥好数据要素价值。国家电网有限公司大数据中心认真贯彻落实会
4月7日,陕西省发展和改革委员会印发《陕西省培育千亿级化工材料产业创新集群行动计划》,其中提到,加强源头减碳、过程减碳、终端固碳,创建10个以上示范性绿色化工园区、绿色工厂,开展绿色化工产品认证,推进化工材料产业绿色制造体系不断完善。二是提升产业数字化智能化水平。并且,加快5G、大数据
4月8日,记者从国网浙江电力获悉,该公司打造的“浙江省新能源e平台”上线运行。这一平台全量接入了浙江省风、光、水、生物质能等全品类新能源数据,能够动态监测分析全省新能源装机发电情况,解构全省各品类新能源运行趋势,助力浙江新能源消纳与高质量发展。“浙江省新能源e平台”主要包含一屏总览、
据国网浙江省电力有限公司4月8日消息,当日“浙江省新能源e平台”正式上线运行。该平台全量接入了浙江省风、光、水、生物质能等全品类新能源数据,能够动态监测分析该省新能源装机发电情况,解构各品类新能源运行趋势,助力浙江新能源消纳与高质量发展。据了解,“浙江省新能源e平台”主要包含一屏总览
4月2日,国网天津经研院规划评审中心支撑数字化部完成“基于能源电力大数据的天津碳排放监测及运营服务科技示范工程”工作方案的编制。该工程是国家电网公司首批新型电力系统原创技术策源地科技示范工程,将充分释放电力大数据价值,在多源能源数据汇聚融合、碳监测标准建设、碳核算体系构建、新兴业务
IBM公司宣布,计划到2030年摆脱其运营中排放的对地球有加热作用的二氧化碳。而与其他一些科技公司近来大张旗鼓地做出环保承诺不同,IBM的承诺强调的是要防止排放,而不是在二氧化碳排放后再开发捕捉二氧化碳的补救方法。IBM承诺到本年代末实现温室气体净排放为零,并承诺在转向可能能够在二氧化碳排放
在全球推进可持续能源发展进程中,锂离子电池被视为一项至关重要的关键技术。在电动汽车、商用航天等领域广泛应用的同时,它所用的钴、镍等重金属材料也带来严重的负面影响。为此,IBM宣布成功开发出了一种新电池,主要依赖从海水中提取的三种材料,而且从初期测试来看在性能上也没有妥协。通过和戴姆
今年的诺贝尔物理学奖颁给了锂电池发展史中三位杰出科学家,如今,锂电池已经走入各行各业。俗语道“不破不立”,学界努力多年,致力于开发出比锂电池更优秀的替代者。据外媒报道,“蓝色巨人”、专利和创新技术傍身的IBM宣布,将以一种海水提取物为原料,打造全新电池产品,再满足生产生活需求的同时
日前,IBM与特变电工新疆新能源股份有限公司(以下简称:特变电工新能源公司)签订了能源互联网科技创新项目。IBM绿色地平线团队将利用物联网、大数据分析和人工智能等核心技术,结合高精度气象预测数据,助力特变电工新能源公司能源互联网业务加速成长。IBM绿色地平线总经理徐海龙博士和特变电工新能源
近日,天合光能股份有限公司宣布和IBM合作,实现对全球九大制造基地的海量光伏制造数据的存储整合以及集中统一管理。天合光能正在向全球能源物联网引领者积极转型布局,此次合作将成为天合光能在智能化建设上又一里程碑式的项目。天合光能全球各制造基地在生产过程中积累了大量生产数据,其中光伏产品
2017城市能源互联网发展(北京)论坛暨能源互联网示范项目建设与合作研讨会于2017年12月1日在北京举办。主题报告环节,IBM能源与电力行业解决方案总监张永平发表演讲,主题是:建设城市能源互联网推动行业数字化转型。下面由电力头条APP为您带来张永平的精彩演讲张永平:我是来自于IBM公司,负责能源与
2017年10月17日-19日,2017中国光伏大会暨展览会(PVCEC2017)在北京隆重召开。IBM大中华区能源行业拓展总监吴如虎在数字化时代的可再生能源发展趋势论坛上发表了题为大数据解决方案助力可再生能源发展的主旨演讲。吴如虎表示IBM希望能够打造一个平台,实际上已经在实践过程中了,通过底层的物联网、大数
第二届能源互联网暨一带一路高峰论坛2017(EIS)于9月21日在上海隆重召开,该论坛由上海决策者经济顾问股份有限公司主办。本次论坛以能源互联网海内外示范项目以及能源互联网分布式能源发展现状(光伏、风电)及存在的问题为落脚点,从最新示范项目着手、针对智能储能领域能源互联网发展前景与实现路径、多
IBM与丹麦能源公司VestasWindSystems展开合作。该公司使用了IBM大数据分析软件和强大的IBM超级计算机系统,以提升风力发电机精准定位、实现最优能源输出的效果。众所周知,对于可再生能源产业来说,如何安放发电机是个重大挑战。Vestas寄希望于采用风能加速其国际化进程,并通过克服这些挑战将其业务扩
浩亭推出MICAreg;(模块化工业计算架构)ndash;一种用于缓冲、评估和处理设备及设施即时环境数据的解决方案。大批量长时间采集的数据在云端传输也将成为可能。浩亭技术集团已经与IBM密切合作数月。他们的合作已经获得了一个利用浩亭注塑机记录能源消耗的项目成果。数据被采集到IBMBluemix创新平台,然
ABB与IBM宣布进行战略合作,ABB行业领先的数字化解决方案ABBAbility将与IBMWatson物联网认知计算技术联手为电力、工业、交通和基础设施领域的客户创造新的价值。ABB拥有深厚的行业专长以及跨行业的数字化解决方案,IBM是人工智能、机器学习及不同垂直行业领域的专家,双方的合作将使客户受益。ABBAbili
北极星碳管家网获悉,近日,美国线上支付技术提供商Stripe与谷歌母公司Alphabet、Meta、Shopify、麦肯锡携手合作,承诺投资约10亿美元开拓碳捕获市场,这笔投资的目标是给这个新兴行业增压。几家公司联合设立一个名为Frontier的项目,未来9年内,它会向低碳技术开发商采购相关产品和服务,投入总计达9.
GoogleCEO桑达尔皮查伊(SundarPichai)素来以重压下仍能保持冷静而闻名。但是,在6月份的一次直播讲话中,他却向外界表示,自己非常焦虑。
Google刚刚宣布他们已经完成了可再生能源的目标。现在我们知道你们中的大多数人都不了解Google的目标,因此去年Google宣布我们将购买足够的可再生能源,以匹配我们去年消耗的能源。因此,根据他们的说法,他们已经实现了与能源相关的目标,他们购买可再生能源甚至超过了全世界的能源消耗。现在,为了易
1月23日讯,根据路透社报道,Google近日表示已与台湾台南市签署长期协议,将在中国台湾为附近的数据中心购买10兆瓦太阳能电池阵。继北美洲、南美洲、欧洲之后,亚洲成为了Google部署太阳能和风能项目的第四个大陆。Google指出,其是台湾出台电力法修正案后第一家企业电力的购买者,这也是Google第一次
我们能随时上Google引擎搜索资料、使用云端存取功能,是因为背后服务器不间断地运转,每年要处理数以万亿计的搜索纪录、每分钟播放超过400小时的YouTube影片流量,而这些全天候服务的代价是不容小觑的。据统计,Google在2015年消耗了5.7兆瓦时(terawatt-hours)的电力,相当于旧金山城市一年总用电量
继比尔盖茨进军核能后,又一家互联网企业挺近核聚变领域。这会是未来理想的新能源吗?人类一直想获得干净、安全、无限的能源,核聚变承载了这样的希望,由于气候变化带来了更大挑战,我们需要削减碳排放,这种趋势变得越来越明显,大家对核聚变的兴趣也越来越浓厚。近日,Google宣布与一家领先核聚变公
新能源与可再生资源储存,都是人类现阶段关注的话题。石油王国挪威准备停售汽柴油车,瑞典也开始推行半电动或全电动卡车看着这些以传统能源为主导的国家都开始转向新能源,就能够知道,世界的风向标在向可持续发展的新能源转移。当然,现在的研发团队并不会满足于电能等这些现有能源,有一部分已经开始
Google于2016年与挪威风力电厂Tellenes签下12年期的绿电购买合约,现在将全数收购该电厂所产的绿电。Tellenes预计于今年9月初正式商转后开始供应绿电给Google数据中心使用,此风力电厂完工后将成为欧洲设备容量最大的项目。Tellenes风力电厂设备容量为160MW,共有50组涡轮风力发电机。Google除了收购Te
Google在2015年推出了一项名为采光屋顶(ProjectSunroof)的项目,利用Google地图数据来评估美国屋顶的节能潜能,使房主更好地了解他们是否应该安装太阳能电池板。Google最初在几个选定城市小规模推行ProjectSunroof项目,目前该项目已经覆盖至美国所有州,并且在该过程中收集的数据使太阳能成为一个令人
中国IDC圈1月18日报道,当前,国际社会对保障能源安全、保护生态环境和应对气候变化等问题的重视程度正日益加大,加快开发利用可再生能源已经成为全球各国的普遍共识和一致行动,有业内人士断言,属于可再生能源唱主角的巴黎时代已悄然而至。正因如此,近些年来已经有越来越多的知名企业把应对气候变化
当前,国际社会对保障能源安全、保护生态环境和应对气候变化等问题的重视程度正日益加大,加快开发利用可再生能源已经成为全球各国的普遍共识和一致行动,有业内人士断言,属于可再生能源唱主角的巴黎时代已悄然而至。正因如此,近些年来已经有越来越多的知名企业把应对气候变化融入重要的业务决策中。
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!