摘要

随着数据规模的扩大以及集团公司对数据分析需求的不断提升,传统的单业务模式分析及对数据的串行处理模式已无法满足实际需求,而大数据技术在快速处理海量化、多样化的数据方面具有天然的优势。因此,笔者提出了一种大数据分析平台架构方案,涵盖了对数据的采集、处理、分析、展现等全生命周期的管理,并改进开源技术,较好提升了数据分析的性能,在集团公司实际应用中取得了良好的效果。