基于大数据技术的数据分析处理平台设计与实现

doi:10.15966/j.cnki.dnydx.2023.z1.027

全文: PDF(0 KB)
输出: BibTeX | EndNote (RIS)

摘要针对目前大数据分析处理组件多而乱、平台技术架构复杂等问题，综合应用MapReduce、Hive、Sqoop等大数据技术，结合Scrapy数据采集框架，设计一种数据分析处理平台，利用SpringBoot及Vue技术搭建Web系统，实现处理结果的可视化。应用该平台对中国蔬菜网上的某一批发市场数据进行分析处理，得出年度蔬菜最高最低差价、年度价格排名前十的蔬菜品种等指标统计结果，分析结果对该批发市场的蔬菜投放及价格调控具有一定的指导意义。

	服务
	把本文推荐给朋友
	加入引用管理器
	E-mail Alert
	RSS
	（）
	作者相关文章

年卷期日期: 2023-02-10 出版日期: 2023-05-30

引用本文:

杨宇刘昉. 基于大数据技术的数据分析处理平台设计与实现[J]. 电脑与电信, 2023, 1(1-2): 81-.

链接本文:

https://www.computertelecom.com.cn/CN/10.15966/j.cnki.dnydx.2023.z1.027 或 https://www.computertelecom.com.cn/CN/Y2023/V1/I1-2/81

贵州电子信息职业技术学院大数据与人工智能系