|国家预印本平台
首页|面向多场景的大数据多维分析系统的设计与实现

面向多场景的大数据多维分析系统的设计与实现

esign and implementation of big data multidimensional analysis system applied to multiple scenarios

中文摘要英文摘要

针对现有的大数据多维分析及可视化工具分析场景单一,生命周期不健全的问题,利用Apache Spark、Apache Kylin等分布式处理技术,设计与实现了一个面向多场景的大数据分析系统,提供数据预处理、多场景混合分析、可视化等全生命周期功能,使数据可以在多种计算平台之间自由的流通,打破了单一数据计算平台的功能局限性,整合了面向不同分析场景的分析功能与其性能优势,它能为不同的业务场景提供高效的查询服务,达到利用不同分布式处理技术优化大数据查询与分析性能的效果。

We present a Big Data Analysis System (BDAS) for multidimensional analysis and visualization. BDAS aims to address two challenges: 1) single analysis scenario; 2) Incomplete life cycle. To break the limitation of a single data computing platform, BDAS utilizes multiple Distributed Technologies to provide life cycle functions such as data preprocessing, hybrid analysis for multiple scenarios and visualization. BDAS integrates analysis functions、performance advantages and efficient query services for different analysis scenarios, which optimizes the performance of big data query and analysis processing.

周康、孔慧慧、鄂海红

计算技术、计算机技术

计算机软件多维分析多场景pache Sparkpache Kylin

computer softwaremultidimensional analysismultiple scenariosApache SparkApache Kylin

周康,孔慧慧,鄂海红.面向多场景的大数据多维分析系统的设计与实现[EB/OL].(2020-01-21)[2025-08-02].http://www.paper.edu.cn/releasepaper/content/202001-113.点此复制

评论