大数据采集子系统的主要功能

来源:中琛源 浏览次数: 更新时间:2022-08-03 09:29:32

  数据采集子系统的主要功能是对业务数据及其他外部数据源数据进行数据抽取、清洗、转换等操作后形成统一标准的数据,存放在数据库中。这里的数据采集,包括客户数据采集、营业部数据采集、公司分析数据采集和沪深股市数据采集。


  (1)客户数据采集


  这里采集的数据有:客户基本资料表,客户资金情况表,客户股票库存明细表、客户资金流水、客户股票交易流水灯。经过数的采集、清理、数据集成生成一个便于数据分析的数据库,包括为所有客户的年初资产(资金额+股票市值)、佣金贡献、现金存取频率及差额、盈亏情况和交易操作频率。


  (2)营业部数据采集


  营业部数据采集所有的库表与客户数据采集所用的库表类似,只是根据需要将统一营业部的客户数据按属性进行了汇总、计算和转换,生成该营业部每日的客户数、客户资产总值、交易量汇总、交易品种汇总等。


  (3)公司分析数据采集


  公司分析所需的数据,是根据营业部数据的再次汇总。


  (4)沪深股市数据采集


  这里包含上海和深圳股市每日指数(开盘、收盘、最高、最低)、成交量、成交额等。


  中琛魔方大数据平台表示数据采集系统的任务,具体地说,就是传感器从被测对象获取有用信息,并将其输出信号转换为计算机能识别的数字信号,然后送入计算机进行相应的处理,得出所需的数据。

上一篇:大数据分析有什么类型
来源:中琛源
更新时间:2022-08-03 09:19:46
下一篇:大数据平台建设的方案有哪些
来源:中琛源
更新时间:2022-08-04 09:16:09