基于Spark的云南旅游大数据分析平台
一、项目概述
Hi,大家好,今天分享的项目是《基于Spark的云南旅游大数据分析平台》。
随着旅游业的发展和数字化进程的加速,智慧旅游已成为旅游业的重要发展方向。智慧旅游大数据平台的建设,能够为旅游业提供更加高效、智能的数据处理和分析能力,帮助旅游企业更好地了解市场需求、优化资源配置。平台将互联网采集的有关云南旅游信息的数据,结合 Spark 对数据进行过滤分析和可视化,最终实现了一个对云南旅游数据进行分析可视化的平台。
【功能描述】
从携程旅行网数据爬取,爬取后对数据进行清洗、提取相关数据后存进数据库。数据展示时,先从数据库获取数据,加载到 spark 中进行数据计算,如去重、计数等,处理完成后组装返回数据,页面再通过 echarts 图表渲染展示
二、技术框架
开发语言:Java
数据库:MySQL
后台框架:SpringBoot(Spring+Mybatis)
前端:Vue