银行数据预处理、合成及网关软件系统可以与银行已有大数据基础平台无缝对接,将来自于不同数据解析设备、网络采集设备、安全设备的解析数据进行关联合成,对实时交易生产数据和网络流量数据关联,将交易的请求和返回撮合成一条交易记录。经过数据预处理后,把数据放入kafka缓存队列中。
全国
江苏省 - 南京市 - 南京高新技术产业开发区丽景路2号南京高新研发大厦B楼9层
详细介绍
银行数据预处理、合成及网关软件系统可以与银行已有大数据基础平台无缝对接,将来自于不同数据解析设备、网络采集设备、安全设备的解析数据进行关联合成,对实时交易生产数据和网络流量数据关联,将交易的请求和返回撮合成一条交易记录。经过数据预处理后,把数据放入kafka缓存队列中。
系统能进行银行各类业务的流程辨识及合成,包括:
l Webservice接口报文解析,从ESB端提取各种交易接口的报文,解析后合成各种交易记录,放入kafaka缓存队列中。
l JDBC报文解析,从WAS报文中截取数据库操作报文,解析并还原出SQL语句。
对端到端的交易数据解析,生成交易记录,交易记录包含字段:交易记录长度、交易记录ID、报文MAC、报文MAC机构号、渠道来源、渠道去向、MAC加密标志、组合标志、主机服务名、系统标识符、源IP地址、源端口号、目的IP地址、目的端口号、终端号、机构代码、交易柜员、交易代码、交易模式、前台流水号、前台日期、交易开始时间、柜员流水号、交易日期、交易结束时间、交易状态代码、联动交易码、源MAC、目的MAC、交易响应时间、客户等级、客户姓名、客户手机号、客户邮箱、客户身份证号码、客户住址等,输出的交易记录字段可自定义。
网络流量数据解析,获取指定链路指定时间段内所传输的数据报文的数量、总吞吐量;获取指定链路指定时间段内所传输的TCP、HTTP协议流量的会话状态及传输细节;采集解析的数据字段包含:源IP、目标IP、协议类型、端口号、TCP会话状态信息(建链、拆链、重传等)、报文尺寸与数量、同一会话内报文收发时间间隔、报文传输延时等。
软件包含两个主要模块:
模块名称 | 功能 |
银行数据及安全流量数据预处理模块 | 对银行网络中数据包进行采集、解析并关联生成交易记录等功能(包含Webservice接口报文和JDBC报文)。 |
数据网关(含Kafka客户端)模块 | 接收日志采集模块和数据预处理模块的数据,进行数据格式转换,并把有效数据放入kafka缓存队列等功能。 |
扫码下载商业新知APP~