如果大数据是“石油”,你准备好自己的提炼工具了吗?
点击上方蓝字,关注“慧点科技”!
随着信息技术和人类生产生活交汇融合,互联网快速普及,全球数据呈现爆发增长、海量集聚的特点,有人感叹:数据是新的石油,是本世纪珍贵的财产。
可以看到,从概念到落地,经过近几年的政策部署,全球大数据发展已迅速驶入快车道。“大数据”成为创新和生产力提升的前沿话题之一,对数据资源的开发利用乃至保护也成为决定企业竞争力的要素。
可谓是“谁掌握了数据,谁就掌握了主动权”。
作为企业的关键防线,风控、审计部门的管理职责既要关注企业的各业务条线,也需跨部门横向延伸。其传统的工作方式效率低下,无法获取第一手业务数据,导致工作滞后!而随着大数据技术的迅猛发展,风控审计部门迎来了前所未有的历史机遇!若说数据是新的“石油”,那么风控审计部门由于其所担负的职责,将会成为企业内部优秀的“石油”开采者。
思路
运用大数据手段实现对业务数据的采集、加工、存储、分析、展现,在关键业务领域通过指标、模型等方式第一时间监控业务运行情况,快速洞察风险,及时业务纠偏将成为未来风控审计部门重点发展方向。
相对往年来看,这种思路对于风控审计部门来讲,仿佛难以企及,遥遥无期。而今,笔者与众多企业风险管理人员谈风控审计必谈数据,谈风控审计信息化必谈风险数据集市,风控审计早已进入数字化时代的同时,也为广大的风控审计从业者们带来了广阔的发展空间。
没有准备好的亲们不必着急!
慧点科技多年来专注于企业风险、内控、审计、合规管理领域,运用大数据及智能化技术,为广大的风控审计从业人员打造一款趁手的神器---慧眼大数据风控审计平台,帮助企业快速洞察风险,辅助战略决策!
通过慧点多年在风控审计业务信息化上的理解和沉淀,所打造的慧眼大数据风控审计平台具备了以下核心能力。
🔺慧眼大数据风控审计平台
1、数据采集及储存
慧眼平台可对接企业内部数据、外部数据,结构化数据、非结构化数据,将数据汇总至数据仓库经过数据标准化搭建分主题数据集市,如风险管理集市、审计管理集市、合规管理集市、内控管理集市。
与其他数据集市建立的不同之处在于:慧眼的数据集市建立是围绕着风控审计业务所需的数据进行构建。
一方面,数据来源于风控审计信息系统自身管理所创造的数据,如风险库、内控库、制度库、流程库、问题库、事件库、案例库、审计指引库、规则库等等;
另一方面,则是风控审计部门针对重大或者重要风险领域进行数字化监控或审计,通过与业务系统对接所获取的业务数据,如财务数据、生产数据等。
慧眼平台对这些数据不仅仅是简单的存储,而是在底层建立起了不同实体数据映射关系,即建立起慧眼数据元数据管理能力。
此外,慧眼平台利用RPA的数据获取能力,针对风控审计关注的外部监管文件、网站数据以及行政处罚等信息自动从网站上获取,自动更新至慧眼规章制度库及案例库。
2、数据分析及业务应用
1 | 监控指标定义 |
慧眼平台提供风险指标的全生命周期管理,针对指标设置标准的、多样化的标签,具备后续扩展能力,帮助企业可以从不同板块、不同企业、不同业务、不同流程等多种视角对企业风险状况进行分析。
2 | 数据建模 |
慧眼平台具备数据分析建模能力将常用且复杂的业务逻辑固化在模型中,便于应用层的快速调用。
例如:在采购业务中,要查看某个采购订单中对应的供应商信息,要列出该供应商历年的采购业务,需要长时间的计算,这种按照规则进行分析的过程可以固化在建模工具中,由系统定时跑批,便于用户随时调用。
3 | 基于NLP技术的智能审核 |
慧眼平台引入自然语言识别(NLP)技术,从而实现文本识别,文本比对;将非结构化数据转化为结构化数据并在系统中完成模糊检索,此项能力需要基于大数据量的语义库,根据实际的应用反馈不断调整系统参数,调整训练数据,以此来提高落地效果,目前慧眼平台在合同审计场景落地NLP已取得了一定成效,并有实践案例经验。
4 | RPA内控自动化测试 |
在风控审计领域,RPAA(机器人流程自动化)所应用的场景很多。例如企业的内控评价场景,慧眼平台通过RPA替代重复的、规则化的控制措施检查过程,打造业内多年无法突破的基于规则的自动化测试能力。
🔺基于慧眼大数据分析平台构建的风险管控一体化平台
3、数据展现
当前,越来越多的企业在强化数据分析展现能力,对此,慧眼平台具备了灵活的报表展现工具,可视化组件库,通过此工具开发报表可以流畅的运行在各类终端设备上,兼容当前绝大部分浏览器,提供直观展现、交互丰富、可高度个性化定制的数据可视化图表。
🔺数据展现
未来,慧眼大数据风控审计平台将竭尽保持与时俱进,不断提升技术能力,通过技术落地推动业务发展,助力企业风控审计部门日常管理工作,帮助风控审计部门提升业务水平,为企业创造更大的价值!
数据集市、数据仓库、应用数据库概念
扫盲啦!
(以下内容部分摘自《洞见数据价值:大数据挖掘要案纪实》,清华大学出版社)
笔者最近在和许多企业交流数据集市的时候,了解到许多同事对数据集市以及相关的几个概念理解的不是特别准确,给大家带来了一定的困扰。业务人员纷纷提出,为什么要建立数据集市,业务部门才不关心信息部门是通过数据仓库、数据集市还是其他数据库来实现,要的就是简简单单满足日常业务用数需求的一个平台。
是的,我们百分之百支持业务用户的这个观点。对于用户而言,只要能够满足其用数需求,通过什么方式那是技术的问题;但是对于专注于大数据风控审计的慧眼平台顾问来讲,我们还是需要厘清数据仓库、数据集市、应用数据库的差异。
首先,把企业比作一个家庭,把员工看成家庭成员,把数据看成一种商品(以食品为例)。
在家里,孩子想喝饮料、吃水果等,可以直接去冰箱里去拿。妈妈煮饭炒菜煲汤,也去冰箱里拿蔬菜、肉类等原材料。用户什么时候想吃东西了,能够很方便地从冰箱里直接取来食用或进行加工后食用。那么,这个冰箱就像是应用数据库(或者应用系统的数据库),冰箱里的食品就是数据。应用数据库能够快速的解决业务用户日常的用数需求,想要时直接拿就行,快速便捷。
但是,冰箱本身存储的东西是有限的,如果冰箱里的东西没了怎么办?那么当然是重新去超市采购喽,不过这个活儿不一定要所有的人来干,在家里买菜这样的活一般还是由妈妈负责,这样看起来妈妈是管理员(当然,同时也是用户),爸爸和孩子才是真正的业务用户啊!
好了,妈妈去超市买菜了,这里的超市就可以比作数据集市。超市里分海鲜区、蔬果区、肉类区、饮料区等,东西应有尽有,且按照客户的需要进行分门别类管理,便于大家进入相应的区域采购。那么数据集市也是如此,按照业务应用需求,把数据进行分类,形成不同的主题区,例如,风险主题集市存储了风险管理所需的数据,合规主题集市存储了合规管理所需的数据,监管主题集市存储了外部监管统计信息披露所需的数据等,便于管理和使用。
妈妈买完东西后,再把食品放到冰箱里,以供所有家庭成员使用。同理,业务部门的管理员会定期从主题集市中获取所需的数据,并返给应用数据库以支持日常用数,只不过往往这个动作不是人工来执行,而是定制好后通过系统接口自动批量处理。这样,数据集市就完成了对应用数据库的供数了!
噢,那么大家自然而然就想到了,超市的货仓一定就是数据仓库啦!是的,这个仓库可以存储的东西非常多,虽然也是按照不同的商品分类进行管理(好比数据仓库的分区),但是用户一般不会直接到仓库里面买东西,所以和用户是相对隔离的。能接触仓库的就是库管员和送货员,这些人往往都是有技术背景的,不属于业务用户的范畴。当然,事无绝对,不排除有商家采取批发直销的模式,让用户直接去仓库里取货(国外有好多批发超市),不过这种情况毕竟较少。业务用户直接从数据仓库取数的情况也不是完全不存在的。
通过以上的生活实例,相信大家很容易看出来数据集市与数据仓库、应用数据库之间的区别和联系。数据集市对业务部门来说还是很有意义的,因为至少同时作为管理员和用户的妈妈还是需要到超市里采购东西的,而且不排除作为真正业务用户的爸爸和孩子也愿意去逛逛超市,直接选择自己想要的产品。大家想想,如果家里附近没有超市,那是一件多么不方便的事啊,这就是建立数据集市的意义所在!
Smartdot| 慧点科技
往期精选
在看吗?点个赞吧!