作为业内具有良好声誉和科技创新能力的期货公司，五矿期货在发展中面临信息系统数据相互独立、分散等挑战，亟需打通各系统之间的信息孤岛，实现数据整合、梳理、汇总，更好地应用于业务、管理、战略决策中，为公司风险管理、智能客服、智能投研等业务场景赋能。

为了实现上述目标，五矿期货早在2019年就牵手星环科技，利用星环科技自主研发的大数据基础平台TDH，建立了五矿期货公司的大数据平台，构建了一个统一、完整的数据视图，实现了数据信息的共享，并在此基础上，完善数据应用和管理机制，消除数据的不一致性，提高数据质量，规范数据应用标准，实现了数据资产化，助力五矿期货业务内涵式、高质量发展。

用户与项目背景

五矿期货有限公司成立于1993年，是中国较早成立的期货公司之一，是业内具有良好声誉及口碑的优秀企业，公司的主要业务涵盖期货经纪业务、资产管理业务、风险管理业务和国际业务。依托强大的股东背景和20多年来的品质积淀，公司能为客户提供全面、专业、优质的风险管理服务、金融衍生品投资服务和私募机构孵化服务。

公司控股股东五矿资本股份有限公司(股票代码：600390)，隶属于中国五矿集团有限公司，是A股市场上稀缺的全牌照金融控股公司，专业经营和管理集团内所有金融业务。

公司拥有强大的投研团队，搭建了从宏观、行业、品种到投资交易、风险管理的多层次研究架构，持续为企业和个人创造价值。

五矿期货对于大数据平台的实时数据处理能力提出了更高的要求，希望可以帮助业务部门实现业务数据的实时监控，从业务端对数据提出了更高的加工时效性要求，而目前辅助实时数据加工工具缺乏，且易用性不足。另外，实际业务发展中，用户事件分流、休眠入金营销提醒、限量交易预警、机房环控监测等业务场景数据应用亟待解决。

五矿期货大数据平台主要需求包括：

在数据平台方面，建立企业级大数据平台，负责全公司数据的整合、存储、统计、访问支持等，实现大数据运维监控、大数据统一调度和ETL处理等任务。

在数据管控治理体系上，完成公司数据管控治理体系规划设计。构建全公司数据管控体系和数据治理架构，增强公司数据管控能力，提升数据质量；通过建立健全数据管控的组织架构，梳理完善管控工作流程；通过系统工具支撑日常工作，使数据管控工作能够落到实处，提升公司数据运用水平和数据质量。

在数据应用方面，建立指标管理平台，构建指标体系和指标库，完成不低于300+个经营指标的加工；借助各种高级分析和灵活查询功能，为公司的业务经营决策提供支持；建设领导驾驶舱、建立企业级报表服务平台、提供监管报送数据服务支持和内控平台等风险管理数据服务支持等。

解决方案

五矿期货与星环科技合作，基于星环科技大数据基础平台TDH 7.0.1，采用了星环科技关系型分析引擎Inceptor、实时流计算引擎Slipstream、宽表数据库Hyperbase等大数据产品，以及星环科技大数据管理软件Transwarp Manager、可视化大数据开发工具TDS等，建立五矿期货公司的大数据平台，构建了一个统一的、完整的数据视图，实现数据信息的共享，并以数据平台为基础，支持业务数据的交换和输入输出，支持后续各类集市和应用的建设。

方案基于星环科技大数据基础平台TDH，建设了基于批量数据与实时流数据的查询分析流批一体服务集群。大数据中心平台的海量数据查询分析服务集群既可以处理结构化数据，也可以处理非结构化、半结构化数据，满足配置、日志、网页、音视频、社交网络等多源异构数据的加载和存储，提供数据查询、全文检索、数据离线批处理分析、交互式分析等多种数据处理模式。

基于星环科技实时流计算引擎Slipstream提供的实时流处理集群，建设五矿期货的业务实时监控能力，可满足实时数据监控分析服务的需求。根据项目要求，具体实时指标监控包括用户事件分流、休眠入金营销提醒、限量交易预警、机房环控监测等业务场景。

整个平台提供完整的多租户功能，对于计算资源、存储资源和数据访问资源进行统一控制管理，对于计算资源进行高效调度管理与使用控制；对于存储资源进行配额管理；对于数据访问权限，进行严格的权限管理。

在安装、配置、监控、告警方面，通过统一的Transwarp Manager进行运维管理。

大数据平台实现了对各种数据来源的采集与处理，可以采集期货CTP交易系统（明细及增量变动数据）、CRM系统、财务NC系统、全结系统、资管估值系统、个股现货系统等各类系统的数据。

大数据平台实现数据处理过程调度，可监控系统资源及负载，监控动态调度信息，包括作业流程、作业事件、监控运行日志等，实现状态信息、异常定位查询，关键监控信息的邮件、短信、微信、报表查询等输出途径。

其中，ETL 作业调度监控平台是基于任务流程的，支持直观界面的作业配置、监控和干预功能，支持事件触发方式和多任务并行处理，实现自动调度跑批，提供日常的高效稳定的批处理。

项目完成相关数据应用的建设，搭建公司重点指标库，构建管理驾驶舱，建设了满足监管要求及公司不同业务部门需求的报表服务平台，建设信息统一发布的企业门户平台等应用。

星环科技方案优势

实现对海量多源异构数据的低成本高效存储、加工和利用

星环科技的解决方案能够支持五矿期货内部海量结构化、半结构化、非结构化数据的低成本存储，完成快速批处理、实时数据处理加工，满足应用系统的在线查询、统计分析、数据挖掘等需求，为超长时间的海量历史数据存储和利用提供技术基础设施。

支持业务指标的实时数据监控

五矿期货针对业务部门的实时业务监控需求，完成了实时数据处理的能力建设，通过对接实时数据，根据公告对指定限额交易类目进行实时交易限额预警。具体实时指标监控包括用户事件分流、休眠入金营销提醒、限量交易预警、机房环控监测等业务场景，提高了五矿期货的业务实时监控能力。

提供完善的数据管控能力

星环科技帮助五矿期货建立了一套完善有效的数据治理与数据管控机制，建立了企业数据管理和控制的完整体系，使企业的数据处于整体有序管理的状态，支持业务目标的实现，并最终实现数据资产价值的目标。

完成相应数据应用的建设

星环科技帮助五矿期货完成了相关数据应用的建设，搭建了五矿期货重点指标库，构建了管理驾驶舱，建设了满足监管要求及公司不同业务部门需求的报表服务平台，建设了信息统一发布的企业门户平台，最终完成了80+张指标图表的开发，展示指标300+个等。

应用效果与价值

基于星环科技大数据基础平台TDH打造的五矿期货大数据平台，帮助五矿期货实现了数据资产高度汇集化，不仅为实现统一的数据采集、管理、计算、应用等探索提供平台支撑，而且也为沉淀和深度挖掘全行数据资产打下了坚实技术基础。项目达成预期目标，并实现了五矿期货对于实时业务数据的监控能力。

五矿期货大数据平台打通上下游业务系统。大数据平台打通了五矿期货业务发展所涉及到多个上下游系统和多个上下游供应商，实现了数据的正常流转与处理。

大数据平台为各类数据应用开发提供能力支撑，支持了公司核心业务的发展。星环科技协助五矿期货建设了一个企业级的统一数据平台，构建统一的、完整的数据视图，实现数据信息的共享，并以数据平台为基础，支持业务数据的交换和输入输出，支持后续各类集市和应用的建设。目前已经完成了80+张指标图表的开发，展示指标300+个。

为了满足期货交易所监管政策需求，星环科技帮助五矿期货对动力煤交易进行实时预警，防范金融风险，快速补强了期货公司对于实时数据处理监控的能力，整体对于期货业务实现了20+的实时数据监控预警任务。

五矿期货大数据平台建设证明了星环科技大数据基础平台TDH对期货公司数据资产整合能力的可靠性、高效性、领先性。星环科技携手五矿期货对动力煤交易进行实时预警，满足期货交易所监管政策需求，对于同业期货客户具有较好的借鉴意义。