近年来,随着互联网技术以及智能传感器产业的蓬勃发展,将二者统筹整合的物联网技术也日趋成熟,越来越多的传统行业借助这一技术进行着业务革新和产业升级,物联网设备数量也急剧增加。在海量设备连接入网的情况下,如何将海量物联网设备接入数据平台并实时高效的采集数据是难点问题。为此,本文设计了一种基于Netty与Kafka的物联网数据采集平台。在设备连接方面,Netty通信框架基于事件驱动网络,并发性较高,同时定制能力强,可以对系统进行灵活扩展。在数据处理方面,Kafka具备消息订阅以及持久化能力,相对于传统的消息中间件有着更大的吞吐量。在此基础上,本文针对Kafka消息中间件带来的实时性问题,提出了一种基于多级优先队列的数据处理算法与Kafka协同处理数据。该算法将数据的优先级和长度的乘积作为标准,首先将数据分派到多级优先队列和短作业优先队列中,然后根据多级优先队列中的数据处理情况,依次创建队列,直到所有数据都处理完毕。针对TCP协议的粘包拆包问题,引入了一种自定义通讯协议,提高了平台的数据传输速度。针对由于Netty的IO线程池满造成的设备连接等待问题,本文提出了一种线程池容量配置方案,该方案考虑设备连接的等待时间和阻塞IO的处理时间,对Netty的IO线程池在合理范围内动态调整。最后本文基于优化后平台,从设备端和服务端入手,搭建了一个功能较为完备的物联网数据采集平台,并对数据采集平台的各项功能进行测试。结果表明,各功能的测试结果都能够满足预期,平台也能在收集数据的同时,提供各项服务。