大数据 - dbaplus社群：围绕Data、Blockchain、AiOps的企业级专业社群。技术大咖、原创干货，每天精品原创文章推送，每周线上技术分享，每月线下技术沙龙。

一次消息队列堆积问题排查，我把坑踩了个遍！

吉多 2023年08月07日

本次问题的排查过程略微曲折，但也能学到不少共性的方法论和经验教训。
Kafka实时数据即席查询应用与实践

Deng Jie 2023年08月04日

Kafka中的实时数据以Topic的概念进行分类存储，而Topic的数据有一定的时效性。
每日30亿条数据插入，ClickHouse却被害得掉了链子……

彭玲 2023年08月04日

用户流量的增大，集群shard数目不断增加，zk或许已经成为了ClickHouse集群横向扩展的瓶颈！
微信月活破10亿，安全性靠谁来支撑？

remyliu 2023年08月03日

介绍微信安全数据仓库的起源、演进、当前的架构设计和数据质量保证系统的实现。
分库分表理论千万别盲目应用到Elasticsearch……

铭毅天下 2023年08月02日

关系型数据库中的分库分表理论，能直接应用到Elasticsearch吗？
用ClickHouse替代ES做实时数据后，历经了各种困难……

马红岩 2023年07月27日

希望能够给没有接触过ClickHouse的同学提供一些方向上的指引，避免多走弯路！
后端开发必知的11个线程安全小技巧

苏三呀 2023年07月21日

线程安全问题会直接导致数据异常，从而影响业务功能的正常使用，值得引起大家的重视
存储成本一降再降，B站日志平台的演进之路

季俊宇&李锐 2023年07月18日

保证了日志的低延迟、低成本，以支持全公司的各类日志数据，以及满足他们的查询和进一步使用需求。
单节点每秒处理2000万条消息，Kafka凭啥这么快？

格格步入 2023年07月14日

从生产端、服务端 Broker、消费端三方面详解Kafka为什么这么快。
奇怪！我的 java 程序只能扛住高并发却扛不住低并发

爱专研的大群 2023年07月13日

抗住了五一十几万秒的qps，却在最近凌晨几千秒的qps前下跪了。
实时湖仓一体在腾讯的落地实践

邵赛赛 2023年06月28日

湖仓一体技术存在哪些弊端和限制？如何使用湖仓一体技术改造原架构，实现降本增效？
网易严选全链路数据治理的实践与总结

祝佳俊 2023年06月19日

300多个指标、200+个模型在指标平台上构建，自动化构建的100+个模型，大大提升了数据开发的效率，指标开发的交付周期由周缩短至天。
零故障实战：万亿级Elasticsearch集群节点迁移

许睿哲 2023年06月14日

如何高效稳定完成万亿级ES集群节点迁移？本文带你体验一次Qunar的ES迁移之旅。
没有这些神器的加持，我不信kafka能这么快……

JAVA旭阳 2023年06月11日

工欲善其事，必先利其器！分享消息中间件kafka安装部署的过程，以及平时在工作中针对kafka用的一些客户端工具和监控工具。
囊括主流选型最新比对，爱奇艺数据湖的落地实践

技术产品团队 2023年06月07日

入湖后，节省大量机器成本，写入稳定，运维量降低80%。
从2000ms缩短到50ms，亿级ES数据搜索性能调优实践

海带 2023年05月31日

ES在大结果集指定字段排序的场景下性能不佳，我们使用时应该尽量避免出现这种场景，如果无法避免，合适的IndexSorting设置能大幅提升排序性能。
6层维度评估：银行大数据上云有必要吗？

侯强 2023年05月21日

传统架构下，基于大量物理PC服务器构建大数据集群逐渐暴露出不足，是否要考虑下上云了呢？
《狂飙》爆火背后：爱奇艺的大数据大规模落地实践

孙斌 2023年05月17日

分享爱奇艺平台化、标准化、智能化、体系化、立体化五个阶段的进阶历程，及内容侧和用户侧的大数据实践。
为数据消费者创造价值：浅谈数据服务的四个层级

王超伦 2023年05月17日

本文将依托《数据中台能力成熟度模型——数据服务》标准，重点围绕数据中台语境下的数据服务进行展开，为机构规划数据服务体系建设提供参考。
兼顾可扩展、高并发与数据一致性：咸鱼优惠系统设计实践

泊垚 2023年05月10日

探讨如何在闲鱼大流量的业务场景下，实现高性能实时优惠计算，提供良好的业务可扩展和数据一致性。