2019/10/16 17:32
2001年,在Cartner Croup公司的一份报告里首次出现了“大数据技术”这一概念,时光再荏,如今它已经成为了全球最热门的话题之一,被广泛应用于各行各业。在金融领域,数据一般分布在关系数据、XML文件、文档、报表等存储介质中。面对复杂的金融系统,各企业只有借助领先技术,整合大数据并加以利用,最终才能助推公司的高质量发展。在受访过程中,富途大数据负责人陈睿直言,在金融行业内,大数据在高频交易、社交情绪分析、信贷风险分析等诸多方面都发挥着相当重大的作用。
正是因为深谙此理,所以自2018年受邀加入富途之后,陈睿就持续围绕“大数据体系构建与优化”这一核心点展开深入的研究和探索,他指出,富途的业务特色体现在集券商+互联网为一体,这就意味着,富途的数据平台建设只能围绕“全链路实时数仓”这一目标展开。“这是极具挑战的一件事,但我们有信心可以做好”,对此陈睿信心满满。
在陈睿看来,打通大数据“任督二脉”,人才是关键,只有狠抓人才队伍建设,培养一批专业化的队伍,才能深挖大数据的价值,优化大数据体系,为富途的长远发展奠定基础。为此陈睿立足公司的技术水平和业务需要,分四步走健全完善企业团队。一是组建了机器学习团队,配合业务团队进行产品智能化的探索。二是组建平台、数据开发团队,负责集团级别的平台治理和数据治理工作。三是组建数据应用开发团队,负责数据输出和数据可视化工具的建设。四是成立数据科学团队,对接团队辅助提升业务智能化程度。
“团队的成功组建只是优化大数据体系的第一步”,陈睿直言:“后续的研发他们也遇到了不少难题,不管是‘确保存量数据和增量数据完整接入数据仓库’,还是‘实现数据接入过程对数据提供方业务的最小侵入性’,亦或者是‘高效接入和管理数千个数据库和数据表’,所有这些问题都摆在我们的面前,任何一个解决方案的缺位都会导致严重的后果,我们的压力的确很大。”
面对一项又一项全新的挑战,陈睿带领团队持续努力,在否决了一个又一个开源概念方案之后,陈睿又积极尝试各类闭源实现方法,在历经数次整体数仓技术重构后,他们实践出一套开源组件+自研平台的数据接入方案,完美化解了以上难题,最终成功打造了具有富途个性化特色的大数据体系,该体系分为两大层四小层,一是拥有平台基建和数据基建的基础建设层,二是拥有数据裁判以及业务提升的业务赋能层,得益于该体系的科学引导,为富途带去了直接的业务提升。
对现有成就陈睿仍不满足,他指出,随着全球经济的快速发展,经济金融领域也正在持续改变中,未来,他将继续迎合市场需要,不断更迭大数据理念与技术,提升个人实力,打造出更专业的大数据体系,为行业革新与进步贡献更多力量。(汤仕蕾/文)
榜单收录、高管收录、融资收录、活动收录可发送邮件至news#citmt.cn(把#换成@)。