基于流批一体的民航旅客智能画像系统的设计与实现

目前市场上现有的各种用户画像系统多以离线数据分析为主,这类画像系统虽然维护成本低,但针对实时性比较高的民航出行场景存在诸多弊端。在民航旅客出行过程中,由于天气、季节、突发情况等各种因素,旅客出行计划易发生变化,会对机场运营造成不确定的影响,因此,民航出行的用户画像系统对画像系统的实时性要求比较高。另外用户标签成千上万,如何高效利用这些标签数据,也是当今诸多画像系统有待解决的问题。为了提高民航业的旅客用户画像系统的实时性和画像数据的利用率,本文以Flink流处理引擎、离线数据仓库、Elasticsearch文本式存储为核心技术,以流批一体处理为架构理念,设计并实现了一套基于民航大数据的智能画像系统。