多源数据接入
支持OPC、MQTT等多种传输协议,可实现物联网、电子交易等结构化、半结构化、非结构化数据的统一接入。
集成MapReduce、Spark、impala等多种计算框架,利用YARN资源管理做统一管理,可在海量数据集上同时进行离线计算和流式处理,满足高吞吐、大数据量和低时延实时处理等多方面的数据计算要求。
提供基于Web的可视化集成管理控制台工具,支持对集群、节点、服务、组件等诸多对象的管理,帮助用户及时了解整个平台系统运行状态,并且提供健康预警和实时监测,实现大数据平台的极简管理。
支持LDAP、Kerberos 统一认证,支持SSL加密通讯和AES256加密算法,支持细粒度级、基于角色的授权以及多租户的管理,支持行、列、对象级访问策略控制
支持SQL-99,SQL-2003标准,实现了CRUD增删查改功能,还提供多种应用程序接口,包括JDBC、ODBC、CLI、Thrift等,极大地方便用户访问数据,开发人员现有的SQL技术可平滑过渡
具有高扩展性,用户通过只需增加集群节点,即可轻松实现计算能力的线性增长,实现高吞吐量和低延迟高性能
通过大数据平台将环保物联网数据与业务系统数据有效整合,通过大数据分析,构建以电子政务、环境监管、自动监测、生态综合管理为核心内容的智慧环保信息化平台。
实现了环保类的监测数据,与其他业务相关的数据对接,成功打破数据壁垒,建立起智慧环保大数据平台,打通了数据对接渠道,实现各行业、各领域数据的共享与融通,取得了很好的成效。
实现监控监测系统数据采集和视频在线分析,采集数据的范围包括:煤矿基础数据、煤矿安全管理数据和监测监控数据等,针对不同特点煤矿构建自适应的煤矿风险预警分析模型,动态对煤矿风险进行自动评估。
利用煤矿已有的硬件环境,同时根据实际情况配备相应软硬件设备,采集煤矿企业静态、动态指标数据,通过煤矿风险指标体系和风险分析模型,实现以煤矿为最小单元“点”的预警与防控。
实现基础数据、业务处理和财政监管一体化,解决财政内部各应用系统间流程分割、信息孤岛等问题,实现财政信息资源的共享共建和互联互通。
实现了多维度汇聚财源数据,分析财源基本情况;动态掌握财源异常变化情况,为精准服务企业提供线索;跟踪财源建设政策的实施情况、评价政策力度和效果等。同时,平台有效提升系统运行效率,大幅优化计算资源,结合改进的数据算法,很好地适应了财源监测分析功能的需求。
构建公司内部统一的大数据平台,以高可靠、高效率、可伸缩的方式对公司内外部的海量数据进行存储和整合。
有效整合核心业务系统、财务系统、资金管理系统、人力资源管理系统,构建面向金租内部全域的大数据湖,以高容错、高效率、可伸缩的方式存储公司内外部的海量数据,打通了公司各系统内部数据,消除数据孤岛,提升运营及分析效率。