大数据主流框架（腾讯大数据组件TubeMQ正式开源）

PingWest品玩9月17日讯，国际开源顶会ApacheCon 2019在美国举办，会上，腾讯开源管理委员会委员、腾讯开源联盟主席、Apache 软件基金会Member堵俊平向全球开源生态伙伴介绍了腾讯开源路线图，宣布腾讯万亿级分布式消息中间件TubeMQ正式对外开源，并计划捐赠给Apache基金会，我来为大家科普一下关于大数据主流框架?以下内容希望对你有帮助!

大数据主流框架

PingWest品玩9月17日讯，国际开源顶会ApacheCon 2019在美国举办，会上，腾讯开源管理委员会委员、腾讯开源联盟主席、Apache 软件基金会Member堵俊平向全球开源生态伙伴介绍了腾讯开源路线图，宣布腾讯万亿级分布式消息中间件TubeMQ正式对外开源，并计划捐赠给Apache基金会。

TubeMQ是此次腾讯在ApacheCon上最新发布的自研开源项目。它的原型是腾讯数据平台部在2013年自研的分布式消息中间件系统（MQ），专注于大数据场景下海量数据的高性能存储和传输，长期服务微信支付、腾讯视频、广点通等产品。

为支持海量业务，腾讯组建了包含存储层、数据管理层及分析层3层结构的数据湖协同方案，向下管理多种数据引擎，向上支撑多种数据应用需求。TubeMQ就是来源于腾讯数据湖存储层的消息中间件系统，支撑着海量数据的流入和运转。较之于其他的开源MQ组件，TubeMQ长期应用于真实生产环境中，在稳定性、性能和成本方面都有着核心优势。