登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
“大数据”是在2013年被用滥了的词汇,但实际上,由于数据量缺失、大数据清洗和分析能力不足,以及数据可视化瓶颈等问题,“大数据”一直未能迟迟落地。而在最近,随着基础设施的发展,意味着大数据的发展又走到新的一个临界点。系统软件供应商SoftwareAG的GaganMehra,在Venturebeat网站阐述了他对于大数据接下来发展的认识,他认为更快地数据处理、更可靠地数据质量,以及给更加细分的应用市场,是大数据2.0时代的重要特征。
更快的数据处理速度
由于数据量指数型增长,使得对于数据的快速分析的需要已经变得比以往任何时候都要迫切。几乎每家大数据厂商,都想要兜售比别家处理速度更快的产品。Hadoop发布的新品Hadoop2.0/YARN,几乎能实时分析数据。而下一代大数据的计算牵引框架ApacheSpark,它的速度比Hadoop快100倍。硅谷风险投资机构AndreessenHorowitz,已经以1400万美元的价格,领投了一家以ApacheSpark为业务核心的初创企业Databricks。不久前,亚马逊也上线了实时流数据服务Kinesis,来帮助没有数据处理能力的公司解决这一问题。
许多分析供应商都已经认识到了数据处理速度的重要性,并建立了能够每秒处理TB数据的产品。传感器数据分析、物联网在工业和消费级市场快速发展的势头,驱动了这次变革。比如一家企业的传感器,能够每秒产生出数百次的事件,实时处理这些数据难度很高。特别是当实时处理的传感器数据,激增到一天5TB的时候,速度,就成了尤为关键的指标。
同时,尽管数据存储成本已经累年下降,但数据存储的费用还是不小的一笔支出。部分商家相比存储完整数据流而言,更倾向于保存过滤掉噪音的数据。
智能清洗“垃圾数据”
在本就难以计数的数据量继续以指数模型激增时,对于数据质量的强化,便摆上了许多数据供应商的议程。换句话说,在庞大数据面前,即使计算机能够高效的处理它们,但大量无用的“垃圾”数据,只会给系统带来负担,并增添存储、主机等设备成本。这就需要数据处理过程中,根据特定的规则和参数,对涌进数据流进行“清洗”和分析,并自动决策该去处理哪些数据,这一切不再需要人工去干预。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
近日,《广东省促进海洋经济高质量发展条例》已由广东省第十四届人民代表大会常务委员会第十八次会议于2025年5月28日通过,现予公布,自2025年7月1日起施行。文件指出,省、地级以上市人民政府能源等有关主管部门应当加大海洋油气资源勘探开发力度,推进液化天然气等接收及储气设施、配套码头和配套外
为贯彻落实国家能源局《2025年能源工作指导意见》关于“统筹推进新型电力系统建设,推进虚拟电厂高质量发展”的要求,经省发展改革委、省能源局、浙江能源监管办同意,浙江电力市场管理委员会发布了《浙江省虚拟电厂运营管理实施细则(试行)》(以下简称“细则”),对虚拟电厂主体注册、能力认证、变
6月3日,国家发展改革委国家能源局发布关于深化提升“获得电力”服务水平全面打造现代化用电营商环境的意见,支持绿色电力应用。助力绿电接入。各省级能源(电力)主管部门牵头组织开展分布式光伏接入电网承载力评估信息公开工作,组织供电企业针对性制定提升措施,促进配电网与分布式新能源协调发展。
北极星售电网获悉,6月3日,国家发展改革委发布关于深化提升“获得电力”服务水平全面打造现代化用电营商环境的意见(发改能源规〔2025〕624号)。文件明确,支持绿色电力应用。助力绿电接入。各省级能源(电力)主管部门牵头组织开展分布式光伏接入电网承载力评估信息公开工作,组织供电企业针对性制定
6月3日,国家能源局关于进一步深化电力业务资质许可管理更好服务新型电力系统建设的实施意见发布。文件提到,优化资质许可管理制度。支持电力领域新模式、新业态创新发展,除另有规定外,原则上将分布式光伏、分散式风电、新型储能、智能微电网等新型经营主体纳入电力业务许可豁免范围。合理压减承装(
北极星售电网获悉,6月3日,国家能源局发布关于进一步深化电力业务资质许可管理更好服务新型电力系统建设的实施意见。文件明确,优化资质许可管理制度。支持电力领域新模式、新业态创新发展,除另有规定外,原则上将分布式光伏、分散式风电、新型储能、智能微电网等新型经营主体纳入电力业务许可豁免范
编者按“双碳”战略的实施加速了分布式能源在配电网中的接入,导致配电网运行特性发生深刻变化。同时,分布式能源的不确定性削弱了配电网的实时可观性,难以精准监测其运行状态,由此引发的过载、过压和供电质量下降等问题已严重威胁配电网的安全性和稳定性。传统配电网状态估计方法依赖全面、精确的量
一场“智”与“能”的双向奔赴回顾历史,整个人类文明进程始终与能源开发利用紧密相关。如今,能源发展进入资源、环境、气候三重约束期,急需沿着清洁低碳方向进行转型。与此同时,人工智能技术正在蓬勃兴起,加速赋智于千行百业,“‘人工智能+’行动”的字眼更是连续两年见诸全国两会政府工作报告,A
5月28日,甘肃省政府新闻办举行“七地一屏一通道”系列政策解读新闻发布会——全国重要的新能源及新能源装备制造基地专场。发布会中提到,截至4月底,甘肃新能源装机达6720万千瓦,占电源总装机的64.7%,排名全国第2;2024年全省新能源发电806亿千瓦时,占总发电量的35.4%,排名全国第2。发布会表示,
近日,国家电投、浙江省新能源、青岛城投、湖南红太阳、广东省电力工业燃料最新招聘岗位,北极星太阳能光伏网整理如下:国家电投集团新能源科技有限公司,是国家电投集团中央研究院全资产业化子公司,负责实施集团公司B类科研课题项目--高效品体硅铜栅线异质结光伏电池(C-HJT)研究及产技术开发。公司20
5月31日8时58分,我国首套350兆瓦级超超临界燃煤发电机组——国家电投通辽2×350兆瓦智慧热电联产机组项目6号机组通过168小时满负荷试运行,标志着该项目顺利实现“双投”目标,正式投入商业运营。国家电投通辽2×350兆瓦智慧热电联产机组项目投产后,作为内蒙古通辽市最大的热源点,将满足通辽市城区1
5月29日17时06分,江苏吴中区太湖街道雷山路与东太湖路交叉口处往西60米一货车运载的磷酸锂电池组起火。消防员立刻同步调派叉车转移起火电池组至安全区域,结合锂电池起火的特殊性最终决定使用“围堰淹没处置战法”快速控制火情,有效避免次生灾害。约半小时后,火势已被控制,一小时后明火已完全扑灭
5月28日,水电水利规划设计总院发布《抽水蓄能产业发展报告2024年度》(以下简称《报告》)显示,我国抽水蓄能装机容量连续9年居世界首位,日本、美国分列第二、第三位。在“双碳”目标的引领和驱动下,南方电网公司近年来加大抽水蓄能发展力度,以积极锻造新质生产力推进产业高质量发展,为“两化”协同
近年来,在国际绿色转型趋势与国内“双碳”目标的驱动下,氢氨醇一体化项目在国内外密集落地。以国内绿氨项目为例,据中国氢能联盟研究院统计,截至2024年底,我国在建的绿氨项目产能约190万吨/年,规划产能约1780万吨/年。氢氨醇一体化是指将风光发电、电解水制氢、绿氨及绿色甲醇合成等多个环节紧密
随着数字经济的加速发展以及生成式人工智能在商业和日常生活中的深入嵌入,支持这些技术的物理基础设施正在经历一场变革性的爆炸式增长。如今,数据中心约占美国总电力消耗的4%。然而,根据麦肯锡的预测,预计到2030年,这一比例将上升到12%,这是由于计算能力、存储需求以及人工智能模型训练的前所未
截至2024年底,中国新能源汽车保有量已达到3140万辆。面对新能源汽车爆发式增长带来的充电基础设施需求压力,储能技术正成为破解充电网络峰谷矛盾的核心突破口。近日,海博思创完成星纪云能(无锡)科技有限公司在上海北翟路超级充电站的储能项目交付,通过精准的峰谷套利策略与智能功率支撑技术,为充
在被视作下一代储能电池——500+Ah储能电芯的竞赛上,远景动力和宁德时代率先发力。5月29日,远景动力沧州超级工厂正式下线500+Ah储能电芯,成为行业率先实现500+Ah电芯量产的企业。无独有偶,本月中旬,宁德时代位于山东济宁的新能源电池工厂一期项目投产。此前,有消息称,宁德时代587Ah储能电芯将于
近日,龙源电力碳资产公司自主研发的“碳排放数据区块链上链存证系统”顺利通过中国电力企业联合会组织的科技成果鉴定,整体达到国际先进水平,其中火电碳排放管理的数据存证与流转体系达到国际领先水平。图为碳排放数据区块链上链存证系统该系统以国能链为区块链基座,通过构建涵盖龙源碳资产公司、集
华星东方承建的广东省云浮市新兴生活垃圾焚烧发电项目烟气净化工程于2025年03月20日开工建设。该项目设计生活垃圾总处理规模为500t/d,配置1x500t/d焚烧炉#x2B;1x12MW凝汽式汽轮发电机组。烟气净化采用“SNCR(非本次合同范围内)#x2B;半干法脱酸#x2B;干粉喷射系统#x2B;活性炭喷射吸附#x2B;SCR(非本次
为贯彻落实《土壤污染源头防控行动计划》(环土壤〔2024〕80号),加强土壤污染源头防控,切实保障人民群众吃得放心、住得安心,浙江省生态环境厅牵头起草了《浙江省土壤污染源头防控行动方案(征求意见稿)》,现向社会公开征求意见。浙江省土壤污染源头防控行动方案(征求意见稿)为加强土壤污染源头
北极星售电网获悉,5月29日,重庆市能源局发布关于市六届人三次会议第0840号代表建议办理情况的答复函。文件明确,2022年以来,在大家共同努力下,重庆市新型储能项目建设取得快速发展,截至2024年底,全市装机项目规模达到156万千瓦/315万千瓦时,总投资约48亿元,为我市电力保障发挥和可再生能源消纳
新型电力系统建设对调控业务的自动化、智能化提出了更高要求。故障发生时,调度员要根据现场情况快速采取相应处置措施,以防止故障进一步恶化,降低对人员和设备的危害。电网故障处置预案是调度员进行故障处置的重要参考,往往依赖于人工查找和判断,工作量大,且传统方式已无法满足需求。人工智能技术
10月20日—22日,全球风电盛会——2025北京国际风能大会暨展览会(CWP2025)将在北京·中国国际展览中心(顺义馆)举办,洛阳轴承集团股份有限公司(以下简称“洛轴”)将盛装亮相CWP,展位号:E3-A05。洛阳轴承集团股份有限公司是一家综合性轴承制造企业,产品广泛应用于航空航天、风力发电、轨道交通
近日,《广东省促进海洋经济高质量发展条例》已由广东省第十四届人民代表大会常务委员会第十八次会议于2025年5月28日通过,现予公布,自2025年7月1日起施行。文件指出,省、地级以上市人民政府能源等有关主管部门应当加大海洋油气资源勘探开发力度,推进液化天然气等接收及储气设施、配套码头和配套外
北极星储能网获悉,5月30日,重庆铜梁区发布2025发展机会清单,涉及产业发展、资产运营、基础设施等领域的74个优质项目,总投资规模752亿元。在产业发展领域,铜梁重点布局了新型储能、智能网联新能源汽车零部件和摩托车、电子信息及智能制造等战略性新兴产业,此次发布了27个项目,总投资446亿元。其
一场“智”与“能”的双向奔赴回顾历史,整个人类文明进程始终与能源开发利用紧密相关。如今,能源发展进入资源、环境、气候三重约束期,急需沿着清洁低碳方向进行转型。与此同时,人工智能技术正在蓬勃兴起,加速赋智于千行百业,“‘人工智能+’行动”的字眼更是连续两年见诸全国两会政府工作报告,A
北极星储能网讯:5月27日,工信部、国家发改委、国家数据局联合发布《电子信息制造业数字化转型实施方案》。其中提出:面向光伏、锂电池、新型储能等细分领域,培育推广智能工艺分析、冷却循环系统监控、快速精准温控、高精度到位检测、电机状态预测性维护、智能仓储物流、智能光储一体化系统、智能组
全球新能源产业进入高速增长期,但政策不确定性、技术迭代加速、国际竞争加剧等因素导致法律风险频发。近年来,全球新能源产业呈现爆发式增长态势。然而,行业高速发展背后暗藏多重法律风险。(作者:莫泰京北京市盈科律师事务所律师)新能源行业法律风险白皮书——合规挑战与应对策略目录一、行业趋势
5月28日,河南省人民政府办公厅关于印发河南省临港产业发展规划(2025—2035年)的通知(豫政办〔2025〕26号)。其中提到,重点发展电力装备、农业机械、工程机械、医疗器械、船舶制造等产业,提高自主设计、制造和系统集成能力,打造先进装备产业集群。扩大特高压输电成套装备、换流阀等产业优势,做
根据国家能源局数据显示,2023年全国弃风电量约120亿千瓦时,弃光电量约35亿千瓦时;2024年弃风电量约43.5亿千瓦时,弃光电量约12.4亿千瓦时,弃风弃电现象依旧严峻。当新能源遇上钢铁洪流,一场“绿色电力的拯救行动”正在湖北上演。弘奎智能旗下“易能宝虚拟电厂”如何让传统高耗能钢厂化身新能
2025年5月27日,无锡市环保集团董事长黄晓峰、总经理李雄伟带队前往盐城市城市资产投资集团有限公司(以下简称“盐城市城投集团”)调研交流,与盐城市城投集团董事长王立群、副总经理苗久成、副总经理贾海云等一行组织召开座谈会。会上,王立群对市环保集团一行的到来表示热烈欢迎。他表示:通过与市
北极星售电网获悉,5月27日,广东省政务服务和数据管理局发布关于印发数字广东建设2025年工作要点的通知。文件明确,加强能源数据融合创新,推进源网荷储一体化发展。探索省市县一体化碳达峰、碳中和数智化管理,推广建设零碳智慧园区、绿色智能建筑。完善林业综合管理平台和林业监测数据管理平台,上
5月27日,工业和信息化部国家发展改革委国家数据局关于印发《电子信息制造业数字化转型实施方案》的通知(工信部联电子〔2025〕95号)。其中提到,面向光伏、锂电池、新型储能等细分领域,培育推广智能工艺分析、冷却循环系统监控、快速精准温控、高精度到位检测、电机状态预测性维护、智能仓储物流、
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!