为此,dbaplus社群携手光大银行,围绕“光大银行大数据领域建设与应用探索”这一主题开展线上直播分享,针对实时数据架构、高性能查询、安全认证权限控制等内容进行深度探讨,促进更多金融企业借力大数据实现数字化转型。
观看方式:线上直播间
直播日期:2022年11月26日(周六)
直播时间:14:00-17:00
《光大银行实时数据架构演进之路》
议题要点及收获:
分析以分布式消息队列(Kafka)和流计算框架为核心的架构存在哪些局限性;
详述光大银行如何将实时数据基础能力,重新规划为数据总线和实时数据湖两大平台,分别针对逐条的流数据和高频率更新的集合数据提供存储和加工能力,两者在时效性上也形成秒级和分钟级的互补关系;
新架构如何充分考虑与离线数据处理的融合,形成三位一体完整数据处理体系。
嘉宾介绍:光大银行资深架构师、大数据团队负责人,中国信通院大数据产品评测专家评委。目前主要负责光大银行大数据基础平台、实时数据平台等系统建设及数据技术产品研发工作。
《Alluxio概览及其在高性能查询场景的应用》
议题要点及收获:
介绍当前大数据领域遇到的问题和瓶颈;
剖析Alluxio的原理和架构,以及Alluxio的读写原理和与其他框架的整合;
讲解Alluxio的应用实践,包括加速查询和openLooKeng连接器开发;
对比接入Alluxio前后对openLooKeng查询性能的影响。
嘉宾介绍:多年大数据和后端开发经验,参与过大型数据中台和数据平台的开发和建设,目前正在进行openLooKeng的底层源码开发和优化工作。
《Kafka Schema Registry的原理和应用》
议题要点及收获:
介绍当前Kafka Schema Registry的引入背景;
讲解Kafka Schema Registry的原理和架构;
剖析Kafka Schema Registry在光大银行的实践过程及应用效果;
总结数据传输和流转中Schema的相关管理经验。
嘉宾介绍:多年大数据开发经验,参与过数据挖掘和大型大数据平台的开发,目前正在进行准实时数据平台的设计开发。
《openLooKeng在光大银行安全认证权限控制的应用和实践》
议题要点及收获:
概述openLooKeng安全认证权限控制原理;
分析openLooKeng基于银行安全认证权限控制机制之上产生的问题,并提出相应的优化方式;
了解sentry、ranger等权限控制机制。
嘉宾介绍:openLooKeng社区contributor,目前正在进行openLooKeng落地银行场景适配底层源码优化的工作。
加直播助手微信并回复【1126】报名
还可入群交流、获取干货福利
更多金融科技干货
来自工商银行、平安银行、光大银行、
如果字段的最大可能长度超过255字节,那么长度值可能…
只能说作者太用心了,优秀
感谢详解
一般干个7-8年(即30岁左右),能做到年入40w-50w;有…
230721