科研之友
微信
新浪微博
Facebook
分享链接
摘要
针对电力系统安全生产管理平台由于数据量的增加导致系统性能下降的问题,研究了基于读写分离技术架构下的海量数据索引方法。在分析LSM-Tree索引技术的基础上,提出了面向读写分离、批量更新存储机制的LSM-Index分布式索引方法。在此基础上,利用静态索引和增量索引的方式构建了局部索引与全局索引框架。并基于map-reduce排序方式完成了大数据的静态索引建构,同时利用并行任务调度模型对其进行了优化,实现了数据的快速存取和检索。本研究内容对于提高电力系统安全生产管理平台数据处理能力,改善系统性能具有重要意义。
- 单位
