主页
返回

大数据日志

2017年12月6日 15:21

       随着互联网+” 的持续深入,传统银行和金融服务行业面临着技术革新带来的众多机遇和挑战,系统每天产生数以TB计算的交易、支付、渠道等各种日志数据。银行机构如何应对迅速增长的海量数据,如何使用大数据技术对日志数据进行加工和分析,达到提升运维能力,提升业务部门数据洞察能力,对各银行和金融服务机构的运维团队带来了不少挑战。

       什么是日志数据?

       以银行核心业务网上银行为例,为了对系统运行健康度作出实时判断和快速决策,业务运维团队需要对用户频繁访问的页面如网银登录页、跨行转账页和理财产品购买页等模块的访问量和平均响应时间做实时统计分析,这就涉及TB级日志数据的实时处理和分析。

       传统的统计方法和技术,很难同时兼顾 Fast(快,实时搜索)、Big(处理数据量大,TB 级)两方面需求。尤其是网上银行业务排障时,因其涉及十几个模块,各模块日志数据分布在不同的服务器上,以往出现服务故障,排查起原因非常不便,效率低下。

       玖道JLog智能日志分析平台作为专业的日志大数据实时搜索分析产品,在面对以上问题提供如下解决方案。

  1. 日志汇聚器

       采用玖道JLog产品后,网上银行所有相关日志统一汇总,用户只需点击日志标签,即可快速查询到所需日志。同时,玖道JLog提供灵活的日志搜索语言执行实时数据实现统计分析,并提供了强大的图表功能用于结果展现。

  1. 业务日志关联分析,快速故障定位

       对于银行的核心业务,通常会在不同的系统间进行流转,不同系统间为了保持业务流水数据一致性,会通过某一关键信息进行关联,例如流水号。当业务出现故障后,运维人员通常需要对各系统不同的日志进行故障定位。以下某银行网银日志与ESB日志为例,通过运维智能日志分析平台对这两个日志进行关联。

       通过点击蓝色高亮显示的流水号,用户能够跳转到ESB系统对应的日志信息中进行分析。

  1. 丰富的业务分析经验

       作为银行和金融机构,各种交易日志中包含大量有价值的业务数据信息。玖道科技一直致力在智能运维方向上发展,积累了大量行业经验。利用这些经验,我们可以在日志数据上进行深入挖掘,通过各种不同的报告进行业务信息呈现。以下是某商业银行利用日志数据进行的业务数据呈现。