登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
处理海量数据大数据的技术,现今最火红的则非Hadoop莫属了喔!
根据Hadoop的创办人Doug Cutting所言“Hadoop”就只是帮一只黄色的填充大象取的名字而已,没有什么特别的意思纯粹只是好记而已。而Hadoop技术的诞生则是因为因特网数据的爆炸性成长,传统的文件系统无法负荷储存跟分类,从而根据Google搜寻器的相关的学术论文为蓝图,演变成一套如何储存、处理、分析TB(Tera Bytes)甚至PB(Peta Bytes)等级的数据处理方法。
Hadoop是百分之一百免费由Java程序语言所编写的Open Source,一种从根本结构上与现存技术不同且先进的储存、处理、分析海量数据的技术,执行Hadoop使用者无须仰赖昂贵的或是具有专利的软硬件平台,Hadoop可以在便宜且工业规格化的服务器群上执行平行数据处理以及分析,有了Hadoop没有什么数据量是过大的,在现今资料量爆炸的时代企业、学术、政府等组织可以利用从之前被认为是无用的资料找出从来没被发现的参考价值。
Hadoop基本上可以处理任何数据型态,不论是结构化或是非结构化,log纪录文件、照片、声音、通讯纪录或是电子邮件。不管是什么数据你都可以汇入HadoopCluster并且不用作任何前处理,它就会帮你回答你从来不曾想过的问题!Hadoop把看似毫无关联的资料背后所隐含的讯息呈现出来,用户便可以根据更多的参考资料做出对应决策了。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
8月29日,由中国电机工程学会电力信息化专业委员会与中国能源研究会能源大数据专业委员会联合举办的“第七届电力大数据协同创新论坛”在贵阳召开。论坛以“激活数据新动能,赋能新质生产力”为主题,旨在推进算力、算法、数据及应用资源的集约化与服务化创新,助力电力行业的数字化升级和产业转型。紫
《国家工业节能技术应用指南与案例(2021)》之七:智慧能源管控系统技术
2019年6月25日,国家能源集团国电电力正式发布了《新能源区域公司智慧企业建设标准》,该标准填补了国内新能源发电领域智慧企业建设标准的空白。国电新疆新能源积极响应,根据该标准内关于区域远程集控中心建设的要求,开启“远程集中监控、区域巡检维护、现场无人值班、统一规范管理”的新能源管理模式的建设。采用用友能源“互联网+”的智慧新能源的技术架构,快速实现远程集中监控系统实施并顺利上线。
人工智能(AI)被普遍认为是开启第四次工业革命大门的钥匙。每一次工业革命都意味着社会生产力的巨大变革,第四次工业革命必然将再一次广泛而深远地影响人类的生产和生活方式,这种影响甚至是颠覆性的。食物、能源和水是人类赖以生存与发展的基础,在庞大的人口压力下,食物危机、能源危机和水危机不断
我们在进行推进两线两化的战略,推进一体化大型清洁能力基地建设,加快发展步伐,促进企业转型升级,在三北地区以特高压送出通道为依托,着力布局有较强竞争力的风光煤电输用一体化清洁能源基地。——中国华能集团清洁能源技术研究院有限公司海上风电部副所长潘霄峰为快速适应新形势下发展要求,精准把
本轮疫情中,云大智物移(云计算、大数据、人工智能、物联网、移动通信)等现代信息通信技术发挥了重要作用,也充分体现了“科技向善”的积极意义,那么本轮科技抗疫有哪些方面的内容,对能源数字化有什么启示,今天我们做个简单分析。(来源:微信公众号“鱼眼看电改”作者:俞庆)科技抗疫的主要内容
本轮疫情中,云大智物移(云计算、大数据、人工智能、物联网、移动通信)等现代信息通信技术发挥了重要作用,也充分体现了“科技向善”的积极意义,那么本轮科技抗疫有哪些方面的内容,对能源数字化有什么启示,今天我们做个简单分析。(来源:微信公众号“鱼眼看电改”作者:俞庆)科技抗疫的主要内容
2019年11月22日,由中国信息协会主办的第9届中国能源企业信息化大会在南京召开。国家能源局原副局长张玉清、中国信息协会会长何翠芹等出席会议并致辞。张玉清指出,当前时代全球能源生产消费革命蓬勃兴起,能源科技创新在其中发挥着核心引领作用,从系统层面开展多学科交叉的全价值链创新,已经成为能
2019年初,国家电网公司党组以习近平新时代中国特色社会主义思想为指导,深入贯彻落实“四个革命、一个合作”能源安全新战略,顺应能源革命和数字革命融合发展趋势,创造性地提出了“三型两网、世界一流”的战略目标。其中,“三型”是指枢纽型、平台型、共享型企业,围绕产业属性、网络属性、社会属性
2019年初,国家电网公司党组以习近平新时代中国特色社会主义思想为指导,深入贯彻落实“四个革命、一个合作”能源安全新战略,顺应能源革命和数字革命融合发展趋势,创造性地提出了“三型两网、世界一流”的战略目标。其中,“三型”是指枢纽型、平台型、共享型企业,围绕产业属性、网络属性、社会属性
2019年初,国家电网公司党组以习近平新时代中国特色社会主义思想为指导,深入贯彻落实“四个革命、一个合作”能源安全新战略,顺应能源革命和数字革命融合发展趋势,创造性地提出了“三型两网、世界一流”的战略目标。其中,“三型”是指枢纽型、平台型、共享型企业,围绕产业属性、网络属性、社会属性
北极星碳管家网获悉,7月7日,天津市工业和信息化局天津市委网信办天津市发展改革委天津市科技局天津市财政局发布关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知。内容指出,支持工业企业高质量投资,给予最高5000万元支持;推进产业基础再造,给予最高3000万元支持。全文如下:市
全球绿色低碳浪潮下,中国绿色认证市场呈现爆发式增长。《2025—2030年中国绿色认证服务行业全景评估与发展战略研究报告》显示,2020—2024年中国绿色认证市场规模从28亿元激增至182亿元,年复合增长率达45.7%,远超全球平均水平,预计2030年将突破800亿元。本文将深入梳理南方电网公司绿色低碳评价认
7月7日,长治市人民政府印发长治市智慧能碳源网荷储一体化实施方案的通知。通知指出,通过项目建设,核心实现两方面目标:一是打造全国首个面向“双碳”和电力交易市场的城市级智慧能碳源网荷储一体化创新标杆,构建全市统一能源大数据底座,建设“市级—区县级—企业级”三级能源互联网平台,服务全市
7月7日,天津市工业和信息化局天津市委网信办天津市发展改革委天津市科技局天津市财政局发布关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知。内容指出,支持新能源发展。围绕先进新型电池(锂电池、半/全固态电池、钠离子电池、氢燃料电池等)产品及关键材料,高效光伏产品、风电
北极星储能网获悉,7月8日消息,天津市工业和信息化局市委网信办市发展改革委市科技局市财政局关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知,提到,围绕先进新型电池(锂电池、半/全固态电池、钠离子电池、氢燃料电池等)产品及关键材料,高效光伏产品、风电整机及关键部件,制
7月2日,国务院国资委公布了,中央企业“科改行动”“双百行动”2024年度专项考核结果。南方电网公司所属14户“科改”“双百”企业,获评“9标杆、5优秀”,进一步擦亮南方电网公司改革“示范田”品牌,2024年这些企业取得了哪些改革发展成绩?一起来看!7户“科改企业”南方电网数字电网集团有限公司
北极星售电网获悉,7月7日,山西省长治市人民政府发布关于印发长治市智慧能碳源网荷储一体化实施方案的通知,文件明确,打造全国首个面向“双碳”和电力交易市场的城市级智慧能碳源网荷储一体化创新标杆,构建全市统一能源大数据底座,建设“市级—区县级—企业级”三级能源互联网平台,服务全市用能企
车网互动需要提升系统支撑能力,仍面临硬件革新、平台完善、运行安全等多重挑战。从用户体验角度看,车网互动技术包括智能有序充电和双向互动放电两大环节。目前业内认为,智能有序充电技术相对成熟,反向放电能力提升仍面临挑战。从整体运营角度看,V2G技术的关键突破点有两个:一是电池的耐久性,直
泛华战略新论产业园区作为经济发展的核心引擎,正迈向数字化、绿色化、融合化的新阶段。数字经济驱动产业升级,引入新兴技术改造传统产业,产业育城平台赋能,整合产业链、重构供应链,形成产业集群化、集群基地化、基地园区化、园区社区化、社区智能化、数字产业化、产业数字化的发展格局。同时,构建
2025年6月28—30日,随着宁国运灵武100万千瓦光伏项目、宁国运盐池92万千瓦光伏项目、宁东绿科164万千瓦光伏项目、星海新能源平罗100万千瓦光伏项目的陆续并网发电,标志着全国首个省域绿电园区第一批项目建设取得阶段性成果,推动全区可再生能源装机规模历史性突破5000万千瓦、占总装机比重达到60%,
北极星售电网获悉,近日,江苏南京市政府印发关于促进专精特新中小企业高质量发展若干措施的通知。文件明确,支持绿色化发展。支持专精特新中小企业建设绿色工厂,创建绿色供应链管理企业。鼓励专精特新中小企业对接国际规则开发绿色产品,开展环境、社会和公司治理(ESG)评价。将专精特新中小企业建
全球绿色低碳浪潮下,中国绿色认证市场呈现爆发式增长。《2025—2030年中国绿色认证服务行业全景评估与发展战略研究报告》显示,2020—2024年中国绿色认证市场规模从28亿元激增至182亿元,年复合增长率达45.7%,远超全球平均水平,预计2030年将突破800亿元。本文将深入梳理南方电网公司绿色低碳评价认
电池的研发与设计创新模式,正在被重构。中国科学院院士欧阳明高曾预测,锂电下一个十年的技术竞争核心在于材料,而人工智能(AI)正在改变材料的研发范式。欧阳明高院士这一预测,正在被一家有着深厚电池基因和AI技术能力的企业变为现实。(文章来源:电池中国)今年4月底,SESAICorporation(简称“S
随着新型电力系统建设的加速推进,数智技术与电力技术的融合赋能愈发凸显,智能化转型升级已成为燃煤电厂发展的重要方向。作为集团公司“十四五”期间首个百万千瓦级燃煤智慧电厂项目,新余第二发电公司围绕“无人干预,少人值守”目标,构建起覆盖设备全生命周期的智慧管理体系,将电厂由传统的工业生
在储能系统的高效运行过程中,设备间的信息传递是核心支撑。从电池状态的实时监测到系统充放电的精准控制,通信技术的选择直接影响储能系统的安全性、稳定性与智能化水平。本文将系统梳理储能领域常见的通讯方式,解析其技术特点与典型应用场景。RS485通信:低成本多节点的近距离连接RS485通信基于差分
南方电网新能源(新型储能)调度服务平台安全可靠改造及12项功能加装项目招标公告(采购编号:CG0000022002056578)1.招标条件本招标项目南方电网新能源(新型储能)调度服务平台安全可靠改造及12项功能加装项目,招标人为中国南方电网有限责任公司,项目资金已落实,该项目已具备招标条件,现对本项目
6月28日,由国家能源集团自主研发的全球首个千亿级发电行业大模型#x2014;#x2014;“擎源”发电行业大模型在京正式发布。国务院国资委党委委员、副主任李镇,国家能源局党组成员、副局长任京东,中国电力企业联合会党委书记、常务副理事长杨昆,国家能源集团党组书记、董事长邹磊出席发布会并致辞。国家
6月26日-6月27日,第二十六届中国(深圳)国际海洋油气大会暨展览会(OC2025)在深圳举办。华海通信精彩亮相,发布全系列高可靠湿插拔连接器产品,并展示超大容量油气平台海缆通信系统的前沿技术与广泛实践,以突破性深海连接技术,赋能海洋油气行业数智未来。高可靠湿插拔连接器突破深海连接技术瓶颈
随着互联网、大数据、人工智能等数字技术的发展和应用,推动社会经济以更细颗粒度的数据形式呈现,数据在软科学研究中发挥的作用也越来越大,为数据挖掘等提供了海量的样本数据,这使得建立基于数据驱动的研究范式成为可能,促使软科学研究范式由以往依靠专家驱动为主向数据驱动转变,更加强调运用数字
在全球气候变化日益严峻的背景下,国家主席习近平于2020年在联合国大会上宣布了我国的“3060”目标,明确了碳达峰、碳中和(“双碳”)目标的内涵、基本路径和重点任务,“双碳”工作正式上升到国家战略层面。作为实现这一目标的基础性工作,碳排放核算体系的构建和完善尤为重要。碳排放核算是碳管理、
2025年10月30日-11月1日国家会展中心(上海)崧泽大道333号展会规模:25000平方米主办单位:联合国人居署上海市住房与城乡建设管理委员会执行单位:东浩兰生会展集团上海现代国际展览有限公司东浩兰生会展集团上海建智展览有限公司一、总体情况上海国际城市与建筑博览会(以下简称城博会)作为“世界城市日
6月20日,清华大学电机系长聘教授、青海大学副校长梅生伟在2025国家能源互联网大会上作《人工智能赋能新型电力系统的探索》的主题演讲,演讲从数学角度出发,讲述了深度学习在电力系统中的应用,分享了数字电力系统的概念及其在电力系统中的应用等。他认为,新型电力系统作为国家战略,其核心特征体现
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!