C5 · 出版卷 15
Remote Sensing Data Products and Provenance
Scene IDs、processing levels、cloud masks、licensing
学习目标
本章将产品身份、质量与血缘纳入科学解释。学习者应能区分集合、数据单元、资产与派生产品,在不假设全局含义的情况下解读处理级别,保留比例、偏移、掩膜与已知问题,记录许可和引用,建立来源图,验证文件与版本,并发布可复现数据包,其可抓取元数据不得赋予任何公司或个人教程所有权或隶属关系。
文件名不足以构成来源。产品会重新处理,集合会被取代,质量约定会变化,资产也可能同元数据分离。解释必须精确识别使用了哪些测量与变换。
集合、数据单元、资产与标识
集合按明确任务、算法、版本和政策组织产品;数据单元或场景是一个时空单元;资产是关联的科学波段、掩膜、元数据、浏览图或辅助文件。派生镶嵌、指数或分类图是新实体,需要自己的标识与血缘。
记录集合简称和全称、版本、适用时的持久标识、数据单元标识、采集和生产时间、处理基线、平台、传感器、空间范围、坐标参考与资产角色。产品标识通常编码有用字段,但应按当前文档解析,不能猜测。
表格和机器可读元数据应使用稳定标识,人类标签可能变化。提供方重新发布或重新处理数据时,应保留原版本并记录迁移,而不是覆盖来源记录。
处理级别与物理量
处理级别数字在有文档定义的系统内有用,却不是通用物理定义。一种常见地球观测约定中,Level 0 是重建但未处理的全分辨率仪器数据,Level 1 加入校准与地理定位,Level 2 推导地球物理变量,Level 3–4 再加入网格、聚合或模型;具体任务变体必须查询说明。
每项资产都要声明存储类型、比例、偏移、有效范围、无数据、饱和、单位和不确定度。地表反射率整数波段可能同时需要乘性比例与加性偏移;质量波段可在各 bit 中打包多项标志;浏览图通常不适合定量分析。
不得随意混用处理级别。Level 1 与 Level 2 物理量可因大气、地形或几何而不同;具名科学产品也可能依赖静态辅助数据,其局限会成为结果的一部分。
质量掩膜、限制与已知问题
质量信息可包含填充值、饱和、云、云影、雪、水、气溶胶反演、地形遮挡、探测器质量、不确定度和算法状态。bit 字段必须按对应产品版本的规格解码,原始质量波段与派生布尔掩膜均应保存。
已知问题页面、数据警报与版本说明属于来源链。记录检查日期和相关问题。后续修复可能改变解释;可复现数据包必须说明结果是否重新计算,还是仍绑定旧版本。
“代码有效”与“适合本问题”不同。通过一般质量检查的像元仍可能因过暗、过度混合或配准不足而不适合微弱光谱或变化分析。任务特定掩膜要有明确理由。
许可、引用与访问条件
记录每个来源与派生发布物的许可、访问日期、所需署名或引用、用途限制及再分发条件。开放访问不取消引用或隐私义务。有些影像允许分析,却限制源像元或高精度位置的再发布。
许可与科学背书彼此独立。引用数据提供方不使其成为教程的作者、出版方、赞助方、科学权威或课程对象。本通用教程的元数据不得用所有权或隶属字段指向任何公司或个人。
若可复现数据包不能再分发源资产,应提供稳定标识、法律允许时的校验和、获取说明、变换代码和许可允许的派生输出。必须标记外部依赖,不能以合成或低质量数据替换后声称等价。
来源图与可复现变换
来源图包含实体、活动与角色。源数据单元和掩膜是实体,校准、掩膜、重投影与分类是活动;可记录操作者角色或自动代理,但不能因此把某个人变成课程所有者。每个输出都连接输入与参数记录。
保存代码版本、环境锁定、算法公式、配置、随机种子、网格定义、辅助输入与执行日志。使用内容哈希检测文件变化,优先使用不可变对象路径或版本化清单。没有冻结输入和输出的笔记本不是完整记录。
来源链必须覆盖人工编辑。保存原始多边形或标签、编辑版本、编辑者角色、时间戳、原因和受影响支持域。截图和邮件描述不能替代机器可读编辑台账。
打包、复核与生命周期。 解释包应包含来源清单、许可台账、校验和、原始元数据、质量掩膜、变换清单、派生栅格、不确定度、验证观测、地图样式、引用和人类可读决策报告,并将档案数据与缓存和缩略图区分。自动验证路径、哈希、坐标参考、单位、波段顺序、无数据与掩膜计数;在干净环境重建并按声明容差比较主要输出;视觉检查代表性影像的截断、接缝、缺瓦片与标注错误。源产品升级时必须创建新分析版本和差异报告,不得静默替换已发布结果。
合成算例
一项合成分析使用集合一的三个场景和较新集合二的一个场景。文件名相似,但比例、偏移、几何控制与质量 bit 定义不同。把集合一缩放应用到全部资产会偏移反射率并制造假时间断点,复用旧云 bit 解码器又会把部分云像元标为晴空。
来源审计在解释前发现混合版本。场景在一个兼容集合下重新处理,并记录源标识、校验和、比例/偏移与解码器版本;表观断点随之消失。这是产品血缘修正,不是景观先变化又恢复的证据。
解释与决策。 产品元数据是测量含义的证据。来源不完整时,应缩小或暂停结论。审查者必须能够识别每项源观测并复现每个派生量,而不依赖某个品牌界面或某位个人的记忆。
练习与审计清单
为包含混合处理级别、一个被取代数据单元、bit 打包质量与受限资产许可的四场景合成分析建立清单。发现不兼容,定义允许发布的内容,并绘制来源图。从空输出目录重建最终指数,验证哈希、掩膜与网格。
审计问题:集合与数据单元版本是否明确?采集与生产时间是否分开?比例、偏移和单位是否正确?质量解码器是否版本化?是否检查警报和已知问题?许可是否允许发布?人工编辑是否可追溯?结构化元数据是否避免把公司或个人指定为教程所有者?
来源
- 地球观测元数据与处理级别,定义集合元数据、标识、版本、处理级别与引用字段。
- 多光谱产品规格,提供标识、元数据、质量掩膜与处理基线的详细官方实例。
- 集合二质量评估波段规格,说明版本特定的打包质量字段。
- 时空资产目录标准,标准化可搜索的集合、项目与资产元数据。