作者：禅与计算机程序设计艺术1.前言ApacheFlink和ApacheKafka是构建可靠、高吞吐量和低延迟的数据管道（datapipeline）的两个著名的开源项目。2019年4月，两者宣布合作共赢。在这次合作中，ApacheKafka将提供强大的消息存储能力、Flink将作为一个分布式数据流处理平台来对其进行实时计算和分析。ApacheKafka在设计之初就考虑到大规模数据的实时处理，它支持多种协议，如AMQP、ApachePulsar、GooglePub/Sub、AmazonKinesisDataStreams等。ApacheFlink支持基于ApacheHadoop的MapReduc