登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
3思维方式
大数据技术的思维方式是:将采集到的经验与现象实现数据化与规律化,在继承传统的统计学、计算数学、人工智能、数据挖掘等方法的基础上,从单一维度转向多维度统筹融合,开发知识处理的新方法,从更深刻的视角,以更高的时效发掘多源异构数据,从而发现新知识和新规律,并实际应用的方法学。
若可以用简单的表达式直接描述某问题的结果与变量之间的关系,那么即使其数据量很大,也不一定属于大数据思维。当数据之间没有或还不能严格描述其因果关系,而数据集已相对地具备统计意义,就需要并可以采用大数据思维来处理。例如:对于一个市场调查的数据集,如果仅仅求取人群对某种商品的需求分布,那么思维方法并不会因为数据集是否海量,而改变常规的数据处理思维。但如果要从人群对该商品众多技术、经济、全程服务特性等各方面要求中提炼出有助于提高企业竞争能力的决策支持,那就需要有新的思维方法,包括信息挖掘与利用的思维、模式及方法,以帮助人类获得更深刻的洞察力。
关注统计关系的思维方法,同样可以应用于有限数据集上,只是其结论的可信度可能受到影响。
4大数据技术的挑战
4.1大数据的采集与集成
利用各种传感器及终端,采集反映物理世界、市场经济与人类行为等现象的静态/动态的异构数据,成为人、机、物三元世界的信息纽带。其挑战主要体现在:
1)从结构化数据为主,向结构化、半结构化与非结构化的三者融合的变革。
2)数据来源的多样化,特别是移动终端的广泛应用,使大量数据需要同时带有时间与空间的标志。
3)有用信息被淹没在大量无关或弱相关的数据中,或需要处理低质量及局部缺损的数据。
4.2大数据的存储
大量多态异构数据的高效、可靠、低成本存储模式是大数据的关键技术之一,对多源多态数据流之间的交互索引与转换效率影响很大。
数据压缩技术可以减少数据传输量及提高存储效率,但也增加了数据处理环节及计算负担。分布式存储要权衡对存储空间及实时性的影响:对实时数据采用实时数据库或内存数据库;对核心业务数据采用传统的并行数据仓库系统;对大量的历史和非结构化数据采用分布式文件系统。
算法在处理复杂结构数据时相对低效,故希望事先为复杂结构的数据建立索引结构来帮助搜索,并合理地将非结构型数据结构化。
4.3大数据的分析
需要关注大数据的形态描述、基本运行规律及其可控性。其中,最复杂的是人类社会行为信息,其决策行为必须与物理系统及信息系统相结合。
目标领域的信息若能与关联领域的信息相结合,则不但知识量得以增加,而且更有可能揭示综合性、交叉学科的未知知识,甚至从统计型数据中发现其(准)因果关系。知识的涌现性反映在模式、行为和智慧上。例如:将提高风机效率的研究与气象信息、电网信息联系,其效果将大大提升。大数据与云计算为之提供了数据资产的保管、搜索的技术,但也不是数据越多越好,而信息的提炼与知识的发现一般很难通过直观方式的分析和解读来获取。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
4月29日,山西对《山西省数据工作管理办法》(征求意见稿)公开征求意见。其中提到,山西省人民政府工业和信息化、能源等部门应当推进工业、能源数字化,加强工业互联网、能源数字化建设,围绕煤炭、电力、焦化、煤化工、钢铁、装备制造等传统优势产业,加快推动研发设计、生产制造、经营管理、市场服
在数字经济时代,全社会数据总量呈爆发式增长,支撑海量数据存储计算的数据中心和算力网络逐步成为支撑各行业数字化转型的重要新型基础设施。数据中心在创造经济价值的同时,其能耗也逐渐成为全社会关注的焦点。数据中心节能降耗是大势所趋。国网河北省电力有限公司充分发挥电力数据价值,积极探索服务
近日,国家发展改革委办公厅、国家数据局综合司印发《数字经济2024年工作要点》(以下简称《工作要点》),对2024年数字经济重点工作作出部署。为全面贯彻落实党的二十大和二十届二中全会精神,按照中央经济工作会议和全国两会部署,支持数字经济高质量发展,深入实施推进《“十四五”数字经济发展规划
乌兰察布市源荷互动绿色大数据中心示范项目位于察右后旗境内,于2月27日启动,是一座100兆瓦分散式风电项目,该项目可降低电网多次升降压和长距离输送的电能损失,具有良好的社会综合经济效益。截至4月23日,项目20台风机吊装、集电线路放线都已完成,升压站设备基础完成80%。
4月18日,在河北省昌黎县朱各庄镇下庄村的农田里,几十台播种机来回穿梭,将种子埋入土中。种植户们启动水泵,通过滴灌管道浇水。当天,冀北昌黎县供电公司朱各庄镇供电所员工王伟和孙奉江来到下庄村,巡检排灌变压器及10千伏灌溉用电线路。下庄村有农田7300多亩,主要种植玉米、花生、白薯等农作物。
国家电网有限公司高质量发展工作会议暨2024年第二季度工作会议提出,坚持问题导向和系统观念,推动公司高质量发展和电网高质量发展。数字化智能化是电网高质量发展的支点,要聚焦应用赋能,聚焦新型电力系统建设,聚焦人工智能创新应用,发挥好数据要素价值。国家电网有限公司大数据中心认真贯彻落实会
4月7日,陕西省发展和改革委员会印发《陕西省培育千亿级化工材料产业创新集群行动计划》,其中提到,加强源头减碳、过程减碳、终端固碳,创建10个以上示范性绿色化工园区、绿色工厂,开展绿色化工产品认证,推进化工材料产业绿色制造体系不断完善。二是提升产业数字化智能化水平。并且,加快5G、大数据
4月8日,记者从国网浙江电力获悉,该公司打造的“浙江省新能源e平台”上线运行。这一平台全量接入了浙江省风、光、水、生物质能等全品类新能源数据,能够动态监测分析全省新能源装机发电情况,解构全省各品类新能源运行趋势,助力浙江新能源消纳与高质量发展。“浙江省新能源e平台”主要包含一屏总览、
据国网浙江省电力有限公司4月8日消息,当日“浙江省新能源e平台”正式上线运行。该平台全量接入了浙江省风、光、水、生物质能等全品类新能源数据,能够动态监测分析该省新能源装机发电情况,解构各品类新能源运行趋势,助力浙江新能源消纳与高质量发展。据了解,“浙江省新能源e平台”主要包含一屏总览
4月2日,国网天津经研院规划评审中心支撑数字化部完成“基于能源电力大数据的天津碳排放监测及运营服务科技示范工程”工作方案的编制。该工程是国家电网公司首批新型电力系统原创技术策源地科技示范工程,将充分释放电力大数据价值,在多源能源数据汇聚融合、碳监测标准建设、碳核算体系构建、新兴业务
当前,随着新一轮科技革命和产业变革的持续推进,大力培育新兴产业和未来产业已成为引领科技进步、带动产业升级、培育新质生产力的战略选择。电力是经济社会发展的重要支撑。国家电网有限公司持续优化电力营商环境,加快构建新型电力系统,积极促进新能源发展,壮大产业集群,为新兴产业和未来产业发展
2月4日,中共中央、国务院印发一号文件《关于学习运用“千村示范、万村整治”工程经验有力有效推进乡村全面振兴的意见》,引发业界广泛关注。作为能源智库,国网能源院组织相关专家对上述文件进行了初步剖析,力求助力业界准确理解和把握政策精神。知之愈明,则行之愈笃。为此,中国电力公众号推出了“
让新型电力系统蓝图变实景——访全国人大代表,国网天津市电力公司党委书记、董事长赵亮习近平总书记在中央政治局第十二次集体学习时强调“以更大力度推动我国新能源高质量发展,为中国式现代化建设提供安全可靠的能源保障”,为能源央企奋进新征程提供了根本遵循。近年来,国网天津电力始终牢记嘱托,
习近平总书记指出,“能源保障和安全事关国计民生,是须臾不可忽视的‘国之大者’。”作为关系国家能源安全和国民经济命脉的能源央企,国家能源集团以习近平新时代中国特色社会主义思想为指导,全面贯彻落实党的二十大和二十届二中全会精神,深入学习贯彻中央经济工作会议精神,始终立足“两个大局”,
北极星输配电网获悉,2月29日,陕西榆林能源革命创新示范区创建部署会召开。会议上,榆林市政府与中国科学院大连化学物理研究所、华础科技公司、中石油长庆油田分公司、国能榆林化工公司分别签署了《共建榆林能源革命创新示范区备忘录》《粉煤灰综合提炼工业级纳米氧化铝新技术项目战略合作框架协议》
北极星输配电网获悉,2月20日,广西电网有限责任公司到广西南宁宾阳县交流座谈,双方就农村能源革命试点县开发建设事宜进行深入讨论,并且签订农村能源革命试点县开发建设框架协议。宾阳县领导表示,将抓好农村能源供给革命、消费革命、技术革命、体制革命、国内外合作等工作的落实。不断加强合作,促
2019年5月,习近平总书记主持召开十九届中央全面深化改革委员会第八次会议,会议审议通过了《关于在山西开展能源革命综合改革试点的意见》,支持山西通过综合改革试点,争当全国能源革命排头兵。2019年9月,山西出台能源革命综合改革试点行动方案,提出加快建设煤炭绿色开发利用基地、非常规天然气基地
煤炭产业是我国国民经济重要支柱型产业,满足了经济社会高速发展所需的大部分能源需求。然而,在“双碳”目标背景下,煤炭一度被推向减排的对立面,但在新能源尚未安全可靠替代传统资源的情况下,我国以煤为主的能源格局短期内难以改变。党的二十大报告提出“深入推进能源革命,加强煤炭清洁高效利用”
2023年是全面贯彻党的二十大精神的开局之年,是三年新冠疫情防控转段后经济恢复发展的一年。面对多重超预期因素冲击,中国经济在风高浪急中展现强劲韧性,高质量发展扎实推进,全面建设社会主义现代化国家迈出坚实步伐。(来源:中能传媒研究院作者:邱丽静)一年来,全国能源系统深入贯彻落实习近平总
近日,国家能源局、生态环境部、农业农村部联合印发通知,经地方申报、专家评估和部门审核,确定将河北省围场县、山西省浮山县、内蒙古自治区库伦旗、吉林省蛟河市、江苏省溧阳市、浙江省安吉县、安徽省长丰县、福建省云霄县、山东省文登区、河南省唐河县、湖北省天门市、湖南省沅陵县、广西壮族自治区
12月27日,国家能源局综合司生态环境部办公厅农业农村部办公厅关于公布农村能源革命试点县名单(第一批)的通知。根据通知,经地方申报、专家评估和部门审核,确定了第一批15个符合条件的农村能源革命试点县。根据此前印发的《国家能源局生态环境部农业农村部国家乡村振兴局关于组织开展农村能源革命试
北极星风力发电网讯:12月27日,国家能源局发布《国家能源局综合司生态环境部办公厅农业农村部办公厅关于公布农村能源革命试点县名单(第一批)的通知》。经地方申报、专家评估和部门审核,确定了第一批15个符合条件的农村能源革命试点县。3月23日,国家能源局等四部委发布《国家能源局生态环境部农业
2024年全国五一劳动奖和全国工人先锋号拟表彰对象公示为进一步听取群众意见,接受社会监督,现将2024年全国五一劳动奖和全国工人先锋号拟表彰对象予以公示。凡对公示对象持有异议者,请在5日内(4月13日17时前)通过电话或邮件反映(提倡实名反映问题)。电话:010-6859189168591892邮箱:lmgongshi@ac
3月23日,国电南瑞科技股份有限公司(以下简称“国电南瑞”)发布关于部分高级管理人员辞职的公告。到公司高级管理人员丁孝华先生因工作变动原因,申请辞去公司副总经理、总工程师、公司及子公司其他职务。据了解,丁孝华于1974年12月出生,研究生学历,硕士学位,研究员级高级工程师。曾任国网电力科
国电南瑞公告,公司拟投资建设“江宁基地园区提升改造项目”,项目总投资为66,698万元,建设周期预计为52个月,资金来源为企业自筹。国电南瑞是以能源电力智能化为核心的能源互联网整体解决方案提供商,是我国能源电力及工业控制领域的IT企业和电力智能化头部企业。
1月19日,“国家工程师奖”表彰大会在人民大会堂隆重举行。国家电网公司南瑞集团南京南瑞继保电气有限公司特高压直流与柔性输电高端装备攻关团队荣获“国家卓越工程师团队”称号。特高压直流与柔性输电高端装备攻关团队在中国工程院院士沈国荣带领下,胸怀国家能源安全和保障这一“国之大者”,兢兢业
据国家知识产权局公告,国电南瑞科技股份有限公司申请一项名为“面向配电网跨系统多场景控制的多维安全校核方法及系统“,公开号CN117335574A,申请日期为2023年10月。专利摘要显示,本发明公开了面向配电网跨系统多场景控制的多维安全校核方法及系统,包括:获取配网系统的多维数据,基于配网系统的多
大家都在布局什么?据爱企查显示,近日,深圳南瑞科技有限公司成立,成立日期为2023年12月13日。注册资本2000万元人民币,经营范围涵盖人工智能应用软件开发、人工智能理论与算法软件开发、人工智能行业应用系统集成服务、智能机器人研发以及智能无人飞行器销售等。爱企查股权穿透显示,该公司由国电南
9月4日,国电南瑞在业绩说明会上表示,随着分布式光伏、储能、充电桩等快速发展,对配电网的承载能力、运行控制方式等提出新的要求,国家电网公司和南方电网公司及其他地方电力公司对此均开展了相关研究和建设。随着配电网投资和智慧化水平进一步提升,相关业务将持续发展。
国电南瑞8月31日发布半年度业绩报告称,2023年上半年营业收入约182.5亿元,同比增加11.81%;归属于上市公司股东的净利润约24.99亿元,同比增加18.43%。世界首台套CLCC(完全可控换相技术)换流阀在葛南直流工程投运。新一代自主可控稳控装置完成样机研发。突破秒级精准调频控制等虚拟电厂运营管控关键
8月24日,国电南瑞发布公告称,经公司董事会于2023年8月11日以会议通知召集,公司第八届董事会第十四次会议于2023年8月23日在公司会议室召开。董事会选举山社武先生为公司第八届董事会董事长,任期至本届董事会届满日止。根据《公司章程》规定,山社武先生作为公司董事长同时担任公司法定代表人,公司
8月8日,国电南瑞发布《国电南瑞第八届董事会第十三次会议决议公告》。会议审议通过了关于公司部分董事变更的预案。公告称,因工作变动,冷俊先生不再担任公司第八届董事会董事长、董事及董事会战略委员会召集人职务,根据《公司法》、《公司章程》的有关规定,冷俊先生辞去董事职务未导致公司董事会成
作为新一代信息技术与工业经济深度融合的产物,工业互联网在为工业带来新气象的同时,也迎来了高速发展期。中新财经记者19日了解到,赛迪顾问近日发布的《2022-2023年中国工业互联网市场研究年度报告》(下称“报告”)显示,2022年中国工业互联网市场规模总量达到8647.5亿元,同比增长13.6%。赛迪顾问认
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!