Wayne's Docs Site

Appearance

OM4.0 工作记录 ​

InSAR ​

  • 20251217 stream_excel_to_pg.py，批量上传 InSAR 数据到 pg，由于原始文件太大node.js不能打开，转使用python进行流式加载，逐行读取，每1000行导入一次

  • 20260317，想要浦东机场的InSAR数据带ID并且能查询时序数据，在Insar2tiff的项目里把ID在聚合的时候加上，并且用这些ID到pg的time_series_data_pvg里面拿数据搬到insar_base_dwd_fac_monitor_data，用的migrate_pvg_by_csv.py

区域GIS数据 ​

  • 机场边界数据用QuickOSM插件，query是
sql
All OSM objects with the key 'aeroway'='aerodrome' in Shanghai
  • 片区边界数据使用Processing Toolbox的Minimum bounding geometry, Geometry type= Convex hull
    convex-hull参考QGIS Documentation
    由于我的原始数据是线数据，所以不使用convex hull或者concave hull，这些可以另行了解。

无人机和路巡数据 ​

  • 数据已经有样板表
  • 文档不在jira,无人机建模.pdf和Doris.docx
  • 日期不对的问题，在Doris导入的html中新增normalizeDatetime的方法，把各种类型的时间识别成标准格式
  • 机器人的数据表头顺序不一致，另外写一个工具来跟DDL对齐，并且要自己生成id，这个只能用xlookup了

Credit @Wayne19980