直面数据洪流
数据洪流滚滚而来,首当其冲的就是,信息系统平台。数据计算任务堆积,数据磁盘不断塞满,数据获取越来越慢,信息系统屡屡崩溃,系统架构已无法承载如此大的数据量的存储,频繁的系统存储问题,导致系统运维成本大大提高。
2018年运达股份成立了混合云建设团队和智慧风场大数据项目团队,来处理我们日益增多的风电数据,推进信息化系统的发展,以数据技术改善优化风电机组运行的质量、精确风场风机选址、保证设备运输效率。
自运达智慧风场大数据项目启动,各种数据问题就接踵而来。工业数据往往都是高频率数据,机组设备的运行数据都是以秒甚至毫秒为频率记录。每台机组上百个传感器,成千个采集点位,分分秒秒的数据如洪水般涌来。风电场地处偏远山区、平原、海边带来的不只有美丽的风景,还有网络通信质量低、数据堆积、数据丢失、系统平台崩溃,对提供优质的数据增值服务造成了诸多不利。因此运达使用了一系列的云计算解决方案来优化和发展数据技术,挖掘数据价值。
云上铸堤
运达接入了数千台风机的数据,每台风机一天就有近200MB的数据产生,面对着风电机组运行数据的每天以千GB的数据量快速增长,数据存储的可扩展、安全可靠、网络承载显得尤为重要,运达使用无限容量、隔离安全、带宽充足的对象存储作为风电机组的数据中转站,让数据质量和安全性得到保障。
随着每天数据量的快速增长而来的是计算量的激增,运达为了保障故障预测机器学习的业务需求,使用云服务器和弹性计算让计算服务变得更简单高效,让处理能力变得更具弹性和伸缩性,能够在计算量增长时无缝增加计算资源实例,也能够在计算业务需求下降时自动减少计算资源实例,在节约成本的同时具备更高的运行效率。同时云服务器和弹性计算比传统的纯硬件部署的机房模式更稳定、更安全、运维效率更高也降低了IT的成本,让我们能够更专注于风电机组设计、生产和优化的核心业务和创新。
为了能够接受大量数据的冲击、承载更多的计算任务压力,运达大数据团队搭建了运达数据服务平台。平台采用了微服务的架构,完成私有镜像仓库的搭建、代码托管平台的搭建,并使用容器服务及编排服务搭建应用托管平台,能够在数分钟之内扩容千倍以处理突发的数据处理量。同时运达还运用DevOps理念,让系统开发、运维更加敏捷,各部门分工更加明确,沟通更加顺利,自动化的部署让系统更加稳定。
为了解决数据质量差,数据获取效率低,运达大数据团队还使用了大数据计算服务提供了批量结构化数据的存储和实时、离线计算,并为海量的数据搭建了PB级别的数据仓库。大数据计算服务协同数据运维平台一同提供了一站式的数据同步、业务流程设计、数据开发、管理和运维功能,为不断发展的风电机组运行数据提供了快速的数据集成、数据开发、数据治理、数据服务、数据质量、数据安全、数据易存取、数据易计算的数据技术环境。
大数据计算的结果最终也会反馈给数据可视化和数据应用,让运维同事能够更便捷的看到风机的运行状况、让技术设计的同事更直观的看到风机情况分析结果、让领导层能够根据数据对公司的发展做出更正确的决策。
数据看得见,发展不停歇
运达数据可视化方案,使用可视化应用平台的方式来分析并展示庞杂数据的产品。数据可视化可以让更多的人看到数据可视化的魅力,可拖拉拽的形式帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用,满足公司风电运营情况展示、风电场项目及风电机组的监控、风机故障风险预警、项目地理信息分析等多种业务的展示和分析的需求。
相比于传统图表与数据仪表盘,如今的数据可视化能够用更生动、友好的展现形式,实时呈现隐藏在万千庞大复杂的数据背后的业务内涵。通过交互式实时数据可视化应用来帮助业务人员发现并诊断业务问题,成为运达大数据解决方案中不可或缺的一环。
目前,从机组设计、制造、运输、吊装、调试到运行,大数据平台云为整个流程提供了数据支撑,通过云计算处理优化,让流程工艺更优化、让机组更智慧,显著推动发电效率提升以及全生命周期的度电成本下降。
0 条