节点文献

基于大数据应用的地质灾害数据存储策略

Geological Disaster Data Storage Strategy Based on Big Data Application

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 石晓栊赵统永王耀忠彭君

【Author】 SHI Xiaolong;ZHAO Tongyong;WANG Yaozhong;PENG Jun;PipeChina Group Sichuan East Natural Gas Transmission Company;College of Computer Science and Technology, Jilin University;

【通讯作者】 彭君;

【机构】 国家管网集团川气东送天然气管道有限公司吉林大学计算机科学与技术学院

【摘要】 针对人工智能算法和大数据技术在地质灾害监测和预警上的应用需求,基于分布式文件系统(HDFS)和列式存储非关系型数据库(HBase)提出了地质灾害相关数据的存储策略;分析了地质灾害监控系统、地质灾害预测预报系统所需使用数据的数据种类、数据格式、数据容量、数据频率及数据增长速度等信息;从数据粒度大小的角度来对数据进行分类和组织,对不同粒度的数据设计了不同的存储模式,以实现高效的存取效率;根据数据的应用特性对数据进行类别划分,为不同类型的数据提供不同的存储结构和访问接口,以获得最优的数据访问性能。

【Abstract】 Aimed at the application of artificial intelligence and big data technology in geological hazard monitoring and forecast, a geological hazard data storage strategy based on distributed file system(HDFS) and column storage non-relational database(HBase) is proposed. The geological hazard prediction system and the geological hazard monitoring system information of data type, data format, data capacity, data frequency and data growth rate are analyzed. The data are classified and organized from the perspective of data granularity, and different storage modes are designed for different granularity data to achieve the high access efficiency. The data are classified by the application characteristics of data, and different storage structures and access interfaces are provided for different types of data to obtain optimal data access performance.

【基金】 国家青年科学基金项目(61502196);吉林省自然科学基金项目(20200201290JC)
  • 【文献出处】 计算机测量与控制 ,Computer Measurement & Control , 编辑部邮箱 ,2023年06期
  • 【分类号】TP333;P694
  • 【网络出版时间】2023-01-18 16:30:00
  • 【下载频次】243
节点文献中: