代码编织梦想

1简介

在本模块中,我们将讨论以下概念:

  1. 了解通常应用于遥感影像的数据校正类型。
  2. 如何直观地比较同一数据集中不同预处理级别的空间数据。
  3. 如何在 Google Earth Engine 中为 Landsat 8 表面反射率图像执行云遮蔽和云遮蔽评估。

2背景

什么是预处理?
您将在 Google Earth Engine (GEE) 中找到的大部分数据都经过一定程度的预处理。这涉及多种不同的质量控制方法,以确保栅格集合中的最高级别的准确性和一致性。根据收集的不同,可能有多种可用的预处理级别,了解差异以成功地将遥感数据集成到生态研究中是很重要的。在 GEE 中提供数据之前,出版商一致解决图像产品的三个常见错误来源:大气(即空气化学)、地形(即高程)和几何(即像素一致性)。


大气校正
当太阳能从地球表面反弹并返回到我们在太空中的传感器时,大气起到了很好的阻碍作用。这以散射和吸收的形式发生(有关更多信息,请参见模块 3)。识别和纠正这些影响对于准确表示和解释真实的表面条件非常重要,例如树种叶子色素或城市和农业像素之间的差异。


地形和地形校正
坡度、坡向和高程的光照效应对收集和处理遥感数据提出了额外的挑战。已经开发了多种校正方法,包括使用数字高程模型,以开发对有问题的地形的预测。如果您的研究是在高海拔地区或地势平坦的地区进行的,您会欣慰地知道,地形影响的预处理已经由专家处理(尽管谨慎小心,手动方法确实存在)。


几何校正
此过程可确保光栅图像的对齐随着时间的推移以及相对于彼此的图像是系统的和一致的。对于 Landsat,地理配准和正射校正过程是通过独立的地面控制点和先前创建的数字高程模型完成的。对于像 Landsat 这样的档案数据集,确保像素排列一遍又一遍,年复一年是最重要的。否则,遥感科学家和生态学家将几乎没有能力进行多时相分析。


重要的是要记住,这些质量保证方法都不是 100% 万无一失的!遵循“了解您的数据”的座右铭,从定性和定量的角度仔细检查您的图像。我们将在本模块的后面部分展示这方面的几个示例。
 

3在 Google Earth Engine 中使用 Landsat 8 进行预处理

在 Google Earth Engine 中提供数据之前,拥有(免费!)专门的支持和幕后工作是一个令人难以置信的优势。但是,您可能仍然发现有必要操作您感兴趣的数据集以促进特定的研究应用。在本模块中,我们将使用 Landsat 8 数据,下图详细说明了不同处理级别的几个用例。
 

来自Young 等人的决策工作流程,2017 年,显示了针对不同级别的 Landsat 数据预处理的建议用例。

3.1预处理级别示例。

为了定性地了解不同预处理级别之间的差异,我们可以查看 2018 年夏末美国俄勒冈州南部的几张真彩色图像。在这个时间范围内,来自加利福尼亚州北部的卡尔火灾。为了评估我们的初始图像,我们将加载“原始”Landsat 8 集合。原始数据(也称为“传感器处辐射”)尚未针对任何形式的潜在影响进行校正,并且通常不用于生态研究。然而,为即将到来的水平建立一个基线是有帮助的。运行下面的脚本以生成类似于下面的图像。

:除以下预处理级别外,Landsat 数据已分为两个质量级别,Tier 1 和 Tier 2。Tier 1 是更高质量的选项。单击此处了解有关各层之间差异的更多信息。

// 设置影像中心和缩放倍数
Map.setCenter(-122.3158, 42.4494, 12);

//导入影像
var raw = ee.Image('LANDSAT/LC08/C01/T1/LC08_045031_20180811');

// 可视化参数
var rawvis = {bands: ['B4','B3','B2'], min: 0.0, max: 30000.0, gamma: 1};

// 加载图层
Map.addLayer(raw, rawvis, 'raw');

来自俄勒冈州南部的原始 Landsat 8 图像。我们的图像以 Mt McLoughlin (2,893 m) 为中心,东边是上克拉马斯湖。如果缩小图像,可以看到 Medford(西)和 Klamath Falls(东)这两个城市。

3.2大气层顶(TOA)

下一级预处理采用我们的“原始”数据,并对太阳活动的影响应用修正,包括太阳辐照度、地球-太阳距离和太阳仰角。对于研究人员来说,大气顶部 (TOA) 通常适用于评估单一日期、单一场景的图像(即相对较小的研究区域中的土地覆盖分类)。这是由于不同程度的太阳效应取决于收集的日期、时间和纬度。将以下代码附加到您的脚本中,生成的图像将类似于下面的图像。

// 对比toa数据
var toa = ee.Image('LANDSAT/LC08/C01/T1_TOA/LC08_045031_20180811');

// 定义真彩色影像
var toavis = {bands: ['B4','B3','B2'], min: 0.0, max: 0.4};

// 加载toa图层
Map.addLayer(toa, toavis, 'toa');

加载 TOA 集合,由于对太阳效应的影响进行了一些校正,部分图像看起来更清晰。然而,似乎还有工作要做!

3.3表面反射率(SR)

这些数据经过了最高级别的预处理,试图最好地代表地面上的实际情况,其中一定量的太阳能反射回(反射)到空中和星载传感器。然而,即使是表面反射率产品也会受到太阳角度低、云层过多以及覆盖位置超过南北纬 65 度的不利影响(Young 等,2017)。尽管如此,建议对多个日期(例如变化检测)或大地理范围(例如算法预测)的分析使用 Landsat 表面反射率数据。将这最后一段代码添加到您的脚本中,以在您的地图查看器窗格中查看下面的图像。

// 加载一张sr影像
var sr = ee.Image('LANDSAT/LC08/C01/T1_SR/LC08_045031_20180811');

// 定义真彩色参数
var srvis = {bands: ['B4','B3','B2'], min: 0, max: 3000, gamma: 1.4};

// 加载图层
Map.addLayer(sr, srvis, 'sr');

应用大气校正似乎大大提高了我们的图像清晰度,尤其是在上克拉马斯湖和麦格洛林山以西的农业区。

3.4 Landsat 影像比较的完整代码

这些示例的代码来自一个特定的 Landsat 图像,但您现在拥有调查任何感兴趣区域(即您的研究区域)以比较不同预处理级别的框架。

// 设置图形展示中心
Map.setCenter(-122.3158, 42.4494, 12);

// 导入一景影像
var raw = ee.Image('LANDSAT/LC08/C01/T1/LC08_045031_20180811');

//定义真彩色影像
var rawvis = {bands: ['B4','B3','B2'], min: 0.0, max: 30000.0, gamma: 1};

// 加载此图层
Map.addLayer(raw, rawvis, 'raw');

//比较,从第1级陆地卫星8号大气层顶部数据加载一张图像。
var toa = ee.Image('LANDSAT/LC08/C01/T1_TOA/LC08_045031_20180811');

//定义真彩色影像
var toavis = {bands: ['B4','B3','B2'], min: 0.0, max: 0.4};

// 加载此图层
Map.addLayer(toa, toavis, 'toa');

// 加载地表反射率数据
var sr = ee.Image('LANDSAT/LC08/C01/T1_SR/LC08_045031_20180811');

// 定义真彩色影像
var srvis = {bands: ['B4','B3','B2'], min: 0, max: 3000, gamma: 1.4};

// 加载sr影像
Map.addLayer(sr, srvis, 'sr');

3.5云遮蔽

正如我们发现的那样,当我们到达表面反射产品时,大气、地形和几何校正的预处理工作已经完成。在 Google Earth Engine 中提供 Landsat 数据之前,处理 Landsat 数据未包含的一个非常重要的步骤是去除近地天气现象。这通常以云的形式出现。云在热带(即茂密的雨林)和水体上空特别普遍。在本节中,我们将在明尼苏达州东北部和安大略省西南部的 Quetico-Superior 地区看看后者,那里的地形在夏季难以捕捉,因为大面积的云层覆盖,部分是由数百个小到中等大小的湖泊。


夏季云彩聚集在奎蒂科省立公园的让湖上空。图片来源:泰伊舒尔克

3.5.1单图像屏蔽:第 1 部分

让我们从加载我们知道是多云的图像开始。在这个地区有很多选择可供选择,但这张八月下旬的图片向我们展示了多种形式的云。需要考虑的另一件事是,云具有在下面的土地上投下阴影的额外效果,这进一步扩大了我们最终必须移除的地理范围。启动一个新脚本,运行下面的代码以生成如下图所示的图像。

// 加载一个初始图像来测试查看多云的图像。
var sr = ee.Image('LANDSAT/LC08/C01/T1_SR/LC08_027026_20180829');

// 为真彩色图像定义visparams。
var srvis = {bands: ['B4', 'B3', 'B2'], min: 0, max: 3000, gamma: 1.4};

// 把你的多云图像添加到地图上。
Map.addLayer(sr, srvis, 'single_scene');
Map.setCenter(-91.8859, 48.8936, 8.81);

Quetico-Superior 国家上空的多云图像。

3.5.2单图像屏蔽:第 2 部分

现在来处理我们的云问题。Landsat 提供了一个 pixel_qa 波段,简而言之,它根据先前量化的特征(例如云和雾的可能性)分配不同的值。您会发现用于构建云遮罩的更复杂的代码,但这是从图像中删除那些讨厌的白色斑点的简单、保守的方法。将以下代码附加到您现有的脚本并重新运行以查看类似于下面的图像。请记住取消选中图层控件中的“single_scene”!

// 定义简单的云层掩码,基于 "pixel_qa "波段的数值。
//本质上,322=土地,324=水的值。
var qa = sr.select('pixel_qa');
var mask = qa.eq(322).or(qa.eq(324));
var sr_cm = sr.updateMask(mask);

// 加载图层

Map.addLayer(sr_cm, srvis, 'single_scene_masked');

成功去除了云和云阴影,但生成的图像不会留下很多可用像素。

3.5.3跨多个日期的掩码

在带有云遮罩的单个 Landsat 场景中,我们失去了相当多的地理覆盖范围。但还有另一种方式!我们还可以在一个日期范围内应用掩码。为此,我们需要创建一个函数,我们将在模块 9 中详细介绍。现在,使用下面的函数(和其余代码)来继续你的脚本。将代码附加到您现有的脚本中。

虽然谷歌地球引擎中确实有来自 Landsat 的预制 NDVI 图像集,但这些数据集仅在 2017 年可用。因此,我们还将计算 NDVI 并将其添加到我们的图像集。这将使我们能够为 2018 年整个生长季节的每个像素生成一个中值,测量研究区域的植被健康状况。重新运行您的代码,生成的图像应如下所示。

// 定义去云函数,这里用QA波段
var cloudMask = function(image) {
  // var mask = image.select('pixel_qa').eq(322).or(image.select('pixel_qa').eq(324));
  var mask = image.select('pixel_qa').eq(322);
  return image.mask(mask);
};

// 使用NDVI
var collection = ee.ImageCollection("LANDSAT/LC08/C01/T1_SR")
.filterDate('2018-06-01','2018-09-30')
.filter(ee.Filter.calendarRange(140, 270)) // roughly, our potential growing season
.filterMetadata('WRS_PATH', 'equals', 27)
.filterMetadata('WRS_ROW', 'equals', 26)
.map(cloudMask)
.map(function NDVI(i){
  return i.addBands(i.normalizedDifference(['B5','B4']).rename('NDVI'))  // generates NDVI band
});

var median = collection.median();

// 红色=低值,深绿色=高值
var collectionVis = {bands: 'NDVI', min: 0.5, max: 0.95, palette: ['red','yellow','green','003300']};

Map.addLayer(median, collectionVis, 'NDVI');

可视化 2018 年整个生长季节的 NDVI 中值。随意切换不同的背景层。您的图像可能与此处显示的图像不完全相同。

3.5.4可视化图像计数

我们的 NDVI 图像看起来很不错。但我们对这些价值观有多自信?具体来说,重要的是评估有多少图像实际上构成了我们的中值。我们可以通过可视化每个像素位置使用的图像数量的总和,快速检查我们得到的 NDVI 中位数是否在整个研究区域具有代表性。将以下代码附加到您的脚本中,然后单击“运行”。您应该会看到类似于下图的图像。

对于计数层,如果我们在 NDVI 值中发现空间异常,则有多种选择。我们可以扩大我们的季节性日期范围或选择包括多年的数据。最终,我们可能会接受失败并决定天气多云而无法使用并决定探索不同的数据集——这是完全可以接受的!

// 统计ndvi波段数量
var counts = collection.select('NDVI').count();

//获取影像数量
print(collection.size());

// 在这个调色板中,红色=低值,蓝色=高值。
var countVis = {min: 0, max: 6, palette: ['b2182b','ef8a62','fddbc7', 
                                          'd1e5f0','67a9cf','2166ac']};

Map.addLayer(counts, countVis, 'counts');

可视化用于计算每个像素的中值的图像数量。较深的红色值较低,较深的蓝色值较高。

3.5.5生成和导出直方图

为了了解计数值的定量分布,我们可以构建计数数据的直方图。如果我们的研究区域多云以至于平均值仅代表一两个值,我们可能需要重新考虑我们的源数据或收集年份。将此最终代码块添加到您的脚本中,您将能够在“控制台”选项卡中看到直方图。您将制作自己的几何形状(如果您需要复习如何做到这一点,请参阅模块 1)。您的直方图可能会根据您的形状略有不同,但它足够大以包含图像,它应该类似于下图中的分布。

//画出你自己的矩形,并尝试覆盖大部分的Landsat场景 
// 然后,我们将制作一个分布的直方图。
//由于场景面积大,GEE要求我们进行一些聚合。 
// 让我们对我们的分布有一个大致的了解。
var histogram = ui.Chart.image.histogram(counts, geometry, 120);

// 展示直方图
print(histogram);

使用直方图函数量化来自计数层的值的分布数量。

4结论

在本单元中,我们回顾了一些应用于遥感影像的常见修正,这些修正有助于您在 Google 地球引擎中找到的高质量产品的生产。我们还介绍了一个用于可视化这些差异的简单框架,并了解了在俄勒冈州南部烟雾缭绕的夏季,处理水平的变化如何影响生成的图像。最后,我们构建了一个工作流脚本,使用 Google Earth Engine 从生长季节图像中去除云层,生成平均植被指数值,并评估所用图像的分布。

5完整的云屏蔽代码

// Load an initial image to test view a cloudy image.
var sr = ee.Image('LANDSAT/LC08/C01/T1_SR/LC08_027026_20180829');

// Define visparams for true-color image.
var srvis = {bands: ['B4', 'B3', 'B2'], min: 0, max: 3000, gamma: 1.4};

// Add your cloudy image to the map.
Map.addLayer(sr, srvis, 'single_scene')
Map.setCenter(-91.8859, 48.8936, 8.81);

// Define simple cloud mask, based in values from the 'pixel_qa' band.
// Essentially, values of 322 = land and 324 = water.
var qa = sr.select('pixel_qa');
var mask = qa.eq(322).or(qa.eq(324));
var sr_cm = sr.updateMask(mask);

// Add your new map for comparison to the cloudy image.
Map.addLayer(sr_cm, srvis, 'single_scene_masked');

// Define how your cloudMask function should work.
var cloudMask = function(image) {
  // var mask = image.select('pixel_qa').eq(322).or(image.select('pixel_qa').eq(324));
  var mask = image.select('pixel_qa').eq(322);
  return image.mask(mask);
};

// This time we'll look at a more ecologically-focused example, using NDVI.
var collection = ee.ImageCollection("LANDSAT/LC08/C01/T1_SR")
.filterDate('2018-06-01','2018-09-30')
.filter(ee.Filter.calendarRange(140, 270)) // roughly, our potential growing season
.filterMetadata('WRS_PATH', 'equals', 27)
.filterMetadata('WRS_ROW', 'equals', 26)
.map(cloudMask)
.map(function NDVI(i){
  return i.addBands(i.normalizedDifference(['B5','B4']).rename('NDVI'))  // generates NDVI band
});

var median = collection.median();

// Red = lower values and darker green = higher values.
var collectionVis = {bands: 'NDVI', min: 0.5, max: 0.95, palette: ['red','yellow','green','003300']};

Map.addLayer(median, collectionVis, 'NDVI');

// Create counts band.
var counts = collection.select('NDVI').count();

// Find our potential maximum count by getting the size of the initial image collection.
print(collection.size());

// In this palette, red = lower values and blue = higher values.
var countVis = {min: 0, max: 6, palette: ['b2182b','ef8a62','fddbc7', 
                                          'd1e5f0','67a9cf','2166ac']};

Map.addLayer(counts, countVis, 'counts');

// Draw your own rectangle and try to cover most of the Landsat scene and 
// then we'll make a histogram of the distribution. Because the scene area 
// is so large  GEE requires us to perform some aggregating. But this will 
// give us a general sense of our distribution.
var histogram = ui.Chart.image.histogram(counts, geometry, 120);

// Display the histogram.
print(histogram);

 

6参考文献

Young, NE, Anderson, RS, Chignell, SM, Vorster, AG, Lawrence, R., & Evangelista, PH (2017)。Landsat 预处理的生存指南。生态学,98(4),920-932。

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/qq_31988139/article/details/121400614

Google Earth Engine(GEE)实例代码学习三十五——利用Landsat8质量评估波段(QA)去云(Landsat8 Surface Reflectance))-爱代码爱编程

Bit 0: Fill Bit 1: Clear Bit 2: Water Bit 3: Cloud Shadow Bit 4: Snow Bit 5: Cloud //创建一个函数进行去云掩膜处理 function maskL8sr(image) { //<<表示二进制左移几位 // 二进制第三位表示有云阴影,第五位表示有云。

Landsat 8 地表反射率数据介绍—— Landsat 8 Surface Reflectance Tier 1-爱代码爱编程

USGS Landsat 8 Surface Reflectance Tier 1 该数据集是来自Landsat 8 OLI / TIRS传感器的经大气校正的表面反射率。图像包含4个可见光和一个近红外(VNIR)波段和2个短波红外(SWIR)波段两个热红外。经过正射校正后的表面反射率,以及2个热红外经过正交校正后的亮度温度 这些数据已使用LaSRC进行了

Google Earth Engine中的LandSat卫星数据-爱代码爱编程

ee.ImageCollection.qualityMosaic() mosaic获取的是最后一个有值的像素,然后生成一张影像;qualityMosaic提取的是像素点的最大值,类似对集合使用max函数。在处理NDVI时可以有去云的效果;        var l8 = ee.ImageCollection("LANDSAT/LC08/C01/T1_

Google Earth Engine(GEE)——Landsat8 TOA 影像去云-爱代码爱编程

上一篇文章写了如何去除Landsat 8 SR数据,这一片主要是讲一下如何去除Landsat8 TOA 影像。 除云前影像:   除云后影像:  代码: // 建立函数还是选择BQA波段 var maskL8 = function(image) { var qa = image.select('BQA'); //检查云层位是否关闭,设

GEE(Google Earth Engine)——Landsat8TOA图形显示效果优化-爱代码爱编程

卫星原有影像: HSV转换后的影像:   rgbToHsv() Transforms the image from the RGB color space to the HSV color space. Expects a 3 band image in the range [0, 1], and produces three bands:

Google Earth Engine(GEE)——Landsat 系列卫星及其算法的介绍(新手必备)!-爱代码爱编程

Landsat 采集结构 USGS 为每颗卫星生成 3 层(类别)数据: 第 1 层 (T1) - 满足几何和辐射质量要求的数据第 2 层 (T2) - 不符合第 1 层要求的数据实时 (RT) - 尚未评估的数据(最多需要一个月)。有关详细信息,请参阅有关 Collection 1 Tiers 的 USGS 文档(https://www.usgs.g

Google Earth Engine(GEE)——Landsat SR影像去云函数-爱代码爱编程

  函数: bitwiseAnd(image2) Calculates the bitwise AND of the input values for each matched pair of bands in image1 and image2. If either image1 or image2 has only 1 band, then

Google Earth Engine(GEE)——NDVI影像波段的融合成一幅影像:Landsat的NDVI影像举例-爱代码爱编程

影像波段融合的问题 resample: resample(mode) An algorithm that returns an image identical to its argument, but which uses bilinear or bicubic interpolation (rather than the default neare

GEE——用landsat-8计算某地区NDVI-爱代码爱编程

//直接导入研究区范围就好,本文以yjq为例 var roi = ee.FeatureCollection(yjq); //去云函数 function maskL8sr(image) { // Bits 3 and 5 are cloud shadow and cloud, respectively. var cloudShadowBitMask

Google Earth Engine(GEE)——如何批量下载1986-2020年的Landsat SR地表反射率影像?-爱代码爱编程

这篇文章主要是再长时间序列的研究中,很多时候我们需要下载很多年的影像,因为GEE平台有时候代码补全,所以可以通过下载影像来在本地实现影像的处理,所以当GEE成为一个数据下载的中心时,我们就可以通过以下几个步骤完成: 1.上传自己的研究区的矢量影像 2.写出去云函数 3.定义开始时间和结束时间 4.影像的筛选,时间,边界和波段选择,最后通过镶嵌影像变

Google Earth Engine(GEE)——如何在线计算NDVI(归一化植被指数)和FVC(植被覆盖度)并批量下载-爱代码爱编程

刚开始我们就是要定义一些函数,去云函数,我们的矢量边界,因为要用到长时序的下载,那我们得用Landsat5/7/8三者的结合,如果要用modis数据那么就另当别论。 数据准备和函数准备 //定义我们的研究区或者我们上传的矢量边界 var hh= ee.FeatureCollection("users/bqt2000204051/BRXL_BIA

基于GEE利用LANDSAT 8数据计算遥感生态指数(RSEI)-爱代码爱编程

最近老师让看一下关于GEE的东西,实现大面积的反演、计算地表温度等,也算熟悉一下。参考网上很多大佬的文章,按照自己的思路和想法算出了RSEI,参考的文章都有列出来。 目录 所用数据集影像数据矢量数据地表气温数据RSEI计算流程图四个指数的计算Wet、NDVI、NDBSI的计算LST的计算对水体进行掩膜归一化主成分分析出图代码参考链接 所用数据集

【Google Earth Engine】利用GEE进行Landsat 8 SR数据土地利用分类-爱代码爱编程

最近用学习到的知识进行了利用GEE和Landsat 8 SR数据进行土地利用分类的小实验,在这里进行一些学习记录。 一、数据导入 首先在GEE中上传要进行土地利用分类的行政区域边界,这里是以雄安新区为例。 二、遥感数据筛选 使用的数据是Landsat 8 OLI/TIRS传感器的SR数据集,SR数据利用QA波段进行影像去云处理,这里构造了去云函数便

GEEer成长日记四:Landsat8_SR计算NDVI并时间序列分析-爱代码爱编程

  前两次我们介绍了MODIS_NDVI和LANDSAT8_NDVI产品的时间序列,它们都是基于Landsat8_TOA影像制成的。实际工作中我们还需要通过LANDSAT8_SR影像进行NDVI时间序列分析,那么该怎么开展工作呢?本期我们就来介绍介绍。   下一期我们将介绍Sentinel-2数据在时间序列方面的研究。 LANDSAT/LC08/C01

google earth engine ——landsat/lc08/c01/t1_sr—ndvi数据集-爱代码爱编程

This dataset is the atmospherically corrected surface reflectance from the Landsat 8 OLI/TIRS sensors. These images contain 5 visible and near-infrared (VNIR) bands and 2 short-wa