Advances in Geosciences
Vol.08 No.01(2018), Article ID:23782,10 pages
10.12677/AG.2018.81004

Study on the Smooth Denoising Contrast of the Vegetation Index Curve of the Time Series of the Heihe River Basin

Ping He, Shupeng Gao

School of Tourism and Geography, Yunnan Normal University, Kunming Yunnan

Received: Feb. 1st, 2018; accepted: Feb. 15th, 2018; published: Feb. 23rd, 2018

ABSTRACT

Long time series remote sensing data set is widely applied to global or regional environmental change, vegetation dynamic change, land cover change and plant biophysical parameters inversion. It is affected by clouds, aerosols, solar elevation and other factors, which make the data has a lot of noise. This paper is based on the MODIS-NDVI data, the Heihe River Basin, in the MATLAB programming environment, using time series fitting software TIMESAT3.1, using Savitzky-Golay (S-G) filter, asymmetric Gauss function (AG) and dual logic curve fitting (DL) method for the reconstruction of NDVI time series data of Heihe River Basin in 2012. The results show that the TIMESAT3.1 software can effectively denoise the NDVI time series, and the three methods have achieved good results on the time series curve. However, the unsymmetrical Gauss function and the double logical curve fitting results have the overfitting problem of "warping" in the beginning of the growing season of vegetation. In contrast, the S-G filter has a good fitting effect. The data source provides a good basis for the vegetation detection in the Heihe River Basin.

Keywords:Time Series Data, MODIS NDVI, Denoising, TIMESAT3.1, Heihe Basin

黑河流域时间序列植被指数曲线的平滑去噪对比研究

和萍,高书鹏

云南师范大学旅游与地理科学学院,云南 昆明

收稿日期:2018年2月1日;录用日期:2018年2月15日;发布日期:2018年2月23日

摘 要

长时间序列遥感数据集被广泛应用于全球或区域环境变化、植被动态变化、土地覆盖变化和植物生物物理参数反演等研究,受云、气溶胶、太阳高度角等因素的影响使数据存在很多的噪声。影响了数据分析和应用的效果。本文以MODIS-NDVI数据为基础,黑河流域为研究区,在MATLAB编程环境下,利用时间序列拟合软件TIMESAT3.1,使用Savitzky-Golay (S-G)滤波、非对称高斯函数(AG)和双逻辑曲线拟合(DL)方法对黑河流域2012年NDVI时间序列数据进行了重构。结果表明,TIMESAT3.1软件能有效的对NDVI时间序列进行平滑去噪,三种方法在时间序列曲线上均取得了较好的效果。但是不对称高斯函数和双逻辑曲线拟合结果在植被的生长季起始阶段均存在“翘起”的过度拟合问题。相对而言,S-G滤波拟合效果较好,NDVI曲线在保持原有基本形状的基础上更加有效的揭示所蕴含的物候周期性变化规律,该数据源对黑河流域的植被检测提供了良好的基础。

关键词 :时间序列数据,MODIS NDVI,去噪,TIMESAT3.1,黑河流域

Copyright © 2018 by authors and Hans Publishers Inc.

This work is licensed under the Creative Commons Attribution International License (CC BY).

http://creativecommons.org/licenses/by/4.0/

1. 引言

陆地生态系统中的植被在全球物质与能量循坏中起着重要作用,植被通常是遥感观测和记录的第一表层,它影响着能量、生态、气候、水文、地貌、土壤等各种地理环境要素,是遥感工作者重点关注的对象之一 [1] [2] [3] 。NDVI曲线是NDVI时间序列数据构成的反映植被生物学特征相随时间变化的最佳指示因子,也是季节变化和人为活动影响的重要指示器 [2] 。植被指数时间序列分析使得研究区域乃至全球范围的物候现象(如返青、生长区间、生长衰退期)成为可能 [4] [5] 。基于NOAA/AVHRR、SPOT/VEGETATION以及MODIS等高时间分辨率的卫星传感器得到的植被指数之间序列资料已经在植被动态、变化监测、宏观植被覆盖分类和植物生物物理参数反演方面得到了广泛的应用 [6] [7] 。理论上,由于植被冠层随时间变化幅度较小,该曲线是一条连续平滑的曲线 [8] 。然而,星载传感器在数据采集和处理过程中受到云覆盖(是最主要的影响因素)、大气干扰、双向反射(太阳入射角、传感器观测角)、数据传输错误等各种因素的干扰,使得植被指数时序曲线波动大并出现许多噪声 [9] 。计算得到的NDVI也会受到很大的影响,在NDVI曲线中总是会有明显的突升或突降 [10] ,使数据的质量和应用效果受到严重影响 [11] ,阻碍了对数据的进一步分析利用并可能导致错误的结论 [12] [13] 。因此,在进行各种趋势分析和信息提取之前,有必要先对时间序列植被指数进行去噪和平滑处理,即时序植被指数重构 [14] 。

尽管目前大多植被指数产品都采用了最大值合成法来部分消除一些干扰的因素 [15] [16] ,如PAL数据集、GIMMS NDVI数据集、SPOT GVT产品以及MODIS时序产品,但是这种方法只能在一定程度上减小由于大气条件的影响而引起的噪声,由其他因素引起的噪声仍然存在 [17] 。为此,国内外众多研究已经开发使用了多种时序植被指数去噪方法,以实现去云处理、噪声去除和重建平滑植被指数曲线,这些拟合方法可以在大体上分为三类:1) 时间域上的处理,包括最佳指数斜率提取法 [8] [18] [19] (BISE)、中值迭代滤波法(MIF) [10] 、及频率域上的处理,如傅里叶变化 [20] [21] ,不对称函数拟合法,如不对称高斯函数拟合、双逻辑曲线函数拟 [17] 合与基于加权最小二乘回归的S-G滤波(Savitzky-Golay)算法 [20] 。上述时序数据的去噪方法广泛应用在遥感时序数据的去噪处理中,但由于各种方法构造的方式和使用的数学模型不同,在方法使用和去噪结果也表现出差别。不同地区适用的去噪方法也不一样,宋春桥等(2011) [22] 对藏北地区2007~2009年MODIS数据进行去噪对比研究,得出的结论为AG与D-L拟合的结果均优于Savitzky-Golay滤波法;草云锋等(2010年) [23] 对辽宁省长白山自然保护区为研究区,进行去噪对比,发现非对称高斯算法(AG)对原始高质量数据保真性最高。由此看来不同的研究区适用的去噪方法是不一样的,对黑河流域地区适用的拟合算法的研究还鲜见。本文基于黑河流域2012年时序NDVI数据,用非对称高斯函数拟合、双Logistic曲线拟合和Savitzky-Golay滤波3种常见的算法对时序植被指数进行去噪对比,基于该方法重构的高质量MODIS NDVI时间序列数据,为进一步利用该数据进行黑河流域生态、环境监测提供了较高的基础,同时可为对黑河流域位研究区的学者在进行陆地生态环境各方面研究中去噪预处理的方法选择提供参考。

2. 研究区域与数据

黑河流域(97˚21E~101˚44E,98˚36N~100˚48N)发源于青藏高原东北部,全长821 km,流域总面积约14.29万km2,是我国西北地区第二大内陆流域,位于河西走廊中部,远离海洋,周围高山环绕,气候干燥,降水稀少而集中,日照充足,太阳辐射强烈,昼夜温差大。流域内垂直高度变化大,最高海拔5573米,最低海拔1131米,海拔高差达4442米,东西和南北气候差异显著,且上、中、下游的地形地貌特征各不相同。上游以高山、冰川、森林、草甸草原为主,植被覆盖度较高。中、下游分布着大面积戈壁和沙漠。研究区如图1所示。

3. 数据及预处理

本论文采用的数据是NASA数据中心(https://wist.echo.nasa.gov/api)免费下载的MODIS数据产品,8天合成的500 m分辨率MOD09A1地表反射率产品,时间范围为2012年1月到2012年12月,共有44期影像。该数据集是通过对原始的MODIS数据进行大气校正、辐射校正、几何校正和拉伸后合成的数据,使用MRT (MODIS Reprojection Tools)软件对数据进行格式转换和投影转换,数据投影为Albers 投影,地理坐标为WGS-84,并完成图像的拼接和裁剪。最后计算研究区的归一化植被指数:

NDVI = ρ n i r ρ r e d ρ n i r + ρ r e d (1)

式(1)中,NDVI为归一化植被指数, ρ n i r 为近红外通道反射率,MODIS对应第2通道; ρ r e d 为红光通道反射率,对应MODIS第1通道。需要对计算出来的NDVI值进行质量控制,通过ENVI的命令行批处理获得研究区Albers标准投影Geotiff格式的NDVI数据以及相应的质量控制数据,去掉有云的数据。计算时间序列NDVI值。研究区得到的原始的时序NDVI曲线如图2所示,可以看到,曲线有强烈的上下波动。

4. 算法原理和实现

4.1. 算法模型

4.1.1. S-G滤波算法

最早于1964年由Savizky和Goaly [24] 提出,又称最小二乘法或数据平滑多项式滤波器 [8] ,可以有效抑制时间序列数据中所包含的随机涨落。这种方法重建的NDVI时间序列能够清晰描述序列的长期变

Figure 1. Geographical location map of the research area

图1. 研究区地理位置

Figure 2. The time series curve of the original data

图2. 原始数据时序曲线

化趋势以及局部的突变信息,且不受时间、空间尺度和传感器的限制 [9] 。基于S-G滤波原理,NDVI时间序列数据的S-G滤波过程可由下式描述:

Y j * = i = m i = m C i Y i + j 2 m + 1 (2)

式中, Y j * 为合成序列数据, Y j + i 代表原始序列数据, C i 为滤波系数。N为滑动窗口所包含的数据点( 2 m + 1 ) [25] [26] 。

4.1.2. 非对称高斯函数

非对称高斯滤波(AG)由Jönsson和Eklundh [27] 于2002年提出,该算法使用分段高斯函数组合来模拟植被生长季物候,一个组合代表依 α 次植被盛衰过程,最后通过平滑连接各高斯拟合曲线,实现时间序列重建 [23] 。其主要过程大致可以分为区间提取、局部拟合和整体连接三个步骤 [9] 。先提取原始时序数据曲线中的谷值和峰值,采用高斯函数分别拟合曲线的左右部分。局部拟合函数为:

f ( t ) = f ( t , c 1 , c 2 , a 1 , , a 5 ) = c 1 + c 2 g ( t ; a 1 , , a 5 ) (3)

其中 g ( t ; a 1 , , a 5 ) 为高斯函数,式中 c 1 c 2 控制曲线的基准和幅度, a 1 决定峰值和谷值的位置, a 4 a 5 a 2 a 3 分别控制曲线左、右部分的宽度和陡峭度。整体拟合函数为:

F ( t ) = { α ( t ) f L ( t ) + ( 1 α ( t ) ) f L ( t ) , t L < t < t C β ( t ) f C ( t ) + ( 1 α ( t ) ) f R ( t ) , t L < t < t R (4)

其中 g [ t L , t R ] 是时序数据中待拟合部分的变化区间, f L ( t ) f C ( t ) f R ( t ) 分别代表 g [ t L , t R ] 区间内左边谷值、中间峰值及右边谷值对应的局部拟合函数, α ( t ) β ( t ) 为介于0和1之间的剪切系数。通过整体拟合函数将局部拟合函数连接起来是该方法的关键之一,这种从局部到整体的拟合策略避免了整体数据对局部拟合的干扰,拟合后的曲线更加接近真实情况。

4.1.3. 双逻辑函数滤波

双重逻辑函数滤波(Double Logistic, DL)是由Beck [28] 于2006年提出的一种新的算法,与非对称高斯滤波函数类似,双逻辑函数滤波也是一种局部拟合函数,它们具有相同的基本公式。Beck在其文章中指出,相比于基于傅立叶变换的滤波算法,双重逻辑函数滤波对植被生长季的估计更加准确,特别对高纬度地区此算法更加适用。基本方程式为:

g ( t ; x 1 , , x 4 ) = 1 1 + exp ( x 1 t x 2 ) 1 1 + exp ( x 3 t x 4 ) (5)

式中t为生长季内某一时期;𝑥1, 𝑥2, 𝑥3, 𝑥4为曲线形状与位置参数,𝑥1决定了曲线左边拐点的位置,𝑥2确定了左侧曲线的变化率;𝑥3确定了曲线右边拐点位置,𝑥4决定了右侧曲线的变化率。设置𝑥1, 𝑥2, 𝑥3, 𝑥4不同的取值则拟合出不同的曲线位置与形状。

4.2. 算法实现

重建过程在Timesat3.1 [29] 中完成(图3),TIMESAT是一个软件包用于分析时间序列卫星传感器数据,能够调查的卫星的时间序列数据的季节性和它们与植被的动态特性,在时域保存关于短期和长期植被变化的重要信息 [29] 。软件集成了目前已被国内外学者广泛应用的非对称高斯函数拟合、双逻辑函数拟合以及Savizky-Golay滤波三种方法,并取得较好的效果 [30] [31] 。由FORTRAN语言编译为最初的版本,之后由MATLAB两种语言编译成相对高的版本,在功能上有了较大的提高 [17] 。由于TIMESAT软件在数据平滑处理中要求数据具备两个以上的完整的生长周期,本文数据仅为一个周期,人为的将一个生长季分为两个。图4是TIMESAT3.1参数设置窗口,在设置中将映像方式设置为1 = images files,将image file type设置为8 bit,窗口大小设置为10,取值范围为−1~1,噪声去阈值(spike)设置为2,拟合峰值(alptitude)参数为1,迭代一年的数据行有337,列有377。实验中多次尝试设置不同的参数,但是结果变化不大。

5. 结果与分析

图5中表示的是在MATLAB环境下,利用TIMESAT3.1软件用三种方法对黑河流域时序NDVI曲线实现去噪的结果。三种拟合方法得到的结果如图5的(a)、(b)、(c)所示,从处理的结果看,各种拟合方法均可在一定程度上消除部分噪声的影响,实现了NDVI时序数据的去噪,能有效的对NDVI时间序列进行平滑去噪,可使NDVI曲线在保持原有基本形状的基础上更加有效的揭示所蕴含的物候周期性变化规律,突出了MODIS时间序列的优点,并对物候参数提取有很大的帮助。分析结果,(a)和(b)表示的非对称高斯函数和双逻辑函数的拟合结果在植被的生长季起始阶段存在“翘起”的过度拟合问题,相对而

Figure 3. TIMESAT interface

图3. TIMESAT界面

Figure 4. TIMESAT3.1 parameter setting window

图4. TIMESAT3.1参数设置窗口

(a) (b)(c)

Figure 5. Time series curve to contrast ((a): asymmetric Gauss function; (b): dual logic regression function; (c): double S-G filter)

图5. 时间序列曲线去躁前后对比((a):非对称高斯函数;(b):双逻辑回归函数;(c):双S-G滤波)

Table 1. Residual residuals before and after reconstruction of asymmetric Gauss function

表1. 非对称高斯函数重构前后残差

Table 2. Residuals before and after refactoring of dual logic functions

表2. 双逻辑函数重构前后残差

Table 3. Reconstructed residuals before and after reconstruction of double S-G filter

表3. 双S-G滤波重构前后残差

言,S-G滤波拟合效果较好,更逼近原始数据,S-G滤波曲线变化趋势相对稳定。对S-G滤波的结果进行第二次S-G滤波,称为双S-G滤波。

表1表2表3分别表示的是时间序列三种滤波方法在重构前后NDVI比较,从表示可以看到三种滤波方式中,双S-G滤波的残差是最小的,为0.00027,其次为双逻辑函数拟合法,残差为0.000723,最后为非对称高斯函数拟合法,残差为0.01975。

6. 结论

本文以MODIS-NDVI数据为基础,综合运用MRT (MODIS Reprojection Tools)、Timesat3.1和ENVI IDL软件中的信息提取、分析等技术,运用相关方法将黑河流域的时序植被指数进行平滑去噪的研究。研究内容概括为以下几个部分,以黑河流域为研究区域,采用MRT对数据进行数据重采样(包括投影转换以及格式转换)、数据提取、图像拼接,计算NDVI值。本文使用ENVI对数据质量控制,去掉有云的数据,进行空间插值。在TIMESAT3.1中用双逻辑回归函数、非对称高斯函数、S-G滤波的三种方法对黑河流域NDVI曲线平滑去噪的实现,对结果进行分析,反映植被变化趋势。结果表明,三种方法在一定程度上均实现了去噪过程,但在黑河流域地区,S-G滤波的方法更适合用于数据重建,非对称高斯函数和双逻辑回归函数均存在起点拟合过度的问题,起点处存在“翘起”过度拟合的现象。双S-G滤波去噪能够有效的去噪,提高了数据质量。不同的地区适用的去噪方法因区域、气候、植被等原因适用的去噪方法均不同的。因此,分为不同植被类型不同区域进行比较研究有待进一步尝试。

文章引用

和 萍,高书鹏. 黑河流域时间序列植被指数曲线的平滑去噪对比研究
Study on the Smooth Denoising Contrast of the Vegetation Index Curve of the Time Series of the Heihe River Basin[J]. 地球科学前沿, 2018, 08(01): 32-41. http://dx.doi.org/10.12677/AG.2018.81004

参考文献 (References)

  1. 1. 黄耀欢, 王建华, 江东, 等. 利用S-G滤波进行MODIS-EVI时间序列数据重构[J]. 武汉大学学报(信息科学版), 2009(12): 1440-1443.

  2. 2. 赵英时. 遥感应用分析原理与方法[M]. 科学出版社, 2003.

  3. 3. 岑奕, 张良培, 村松加奈子. 纪伊半岛地区植被净初级生产力的遥感应用研究[J]. 武汉大学学报(信息科学版), 2008, 33(12): 1221-1224.

  4. 4. Moody, A. and Johnson, D.M. (2001) Land-Surface Phenologies from AVHRR Using the Discrete Fourier Transform. Remote Sensing of Environment, 75, 305-323. https://doi.org/10.1016/S0034-4257(00)00175-9

  5. 5. Feng, Z., Wu, B., Liu, C., et al. (2004) Methods of Monitoring Crop Phonological Stages Using Time Series of Vegetation Indicator. Transactions of the Chinese Society of Agricultural Engineering, 20, 155-159.

  6. 6. Juan, G.U., Xin, L.I. and Huang, C.L. (2006) Research on the Reconstructing of Time-Series NDVI Data. Remote Sensing Technology & Application, 21, 391-395.

  7. 7. Bian, J., Ainong, L.I., Song, M., et al. (2010) Reconstruction of NDVI Time-Series Datasets of MODIS Based on Savitzky-Golay Filter. Journal of Remote Sensing, 14, 725-741.

  8. 8. 边金虎, 李爱农, 宋孟强, 等. MODIS植被指数时间序列Savitzky-Golay滤波算法重构[J]. 遥感学报, 2010, 14(4): 725-741.

  9. 9. 李儒, 张霞, 刘波, 等. 遥感时间序列数据滤波重建算法发展综述[J]. 遥感学报, 2009, 13(2): 335-341.

  10. 10. Ma, M. and Veroustraete, F. (2006) Reconstructing Pathfinder AVHRR Land NDVI Time-Series Data for the Northwest of China. Advances in Space Research, 37, 835-840. https://doi.org/10.1016/j.asr.2005.08.037

  11. 11. 孙华生, 徐爱功, 林卉, 等. 基于不同算法的时间序列植被指数去噪效果分析[J]. 江苏农业科学, 2012, 40(5): 375-379.

  12. 12. Bradley, B.A., Jacob, R.W., Hermance, J.F., et al. (2007) A Curve Fitting Procedure to Derive Inter-Annual Phenologies from Time Series of Noisy Satellite NDVI Data. Remote Sensing of Environment, 106, 137-145. https://doi.org/10.1016/j.rse.2006.08.002

  13. 13. Chen, J., Jönsson, P., Tamura, M., et al. (2004) A Simple Method for Recon-structing a High-Quality NDVI Time-Series Data Set Based on the Savitzky-Golay Filter. Remote Sensing of Environment, 91, 332-344. https://doi.org/10.1016/j.rse.2004.03.014

  14. 14. 吴文斌, 杨鹏, 唐华俊, 等. 两种NDVI时间序列数据拟合方法比较[J]. 农业工程学报, 2009, 25(11): 183-188.

  15. 15. Taddei, R. (1997) Maximum Value Interpolated (MVI): A Maximum Value Composite Me-thod Improvement in Vegetation Index Profiles Analysis. International Journal of Remote Sensing, 18, 2365-2370. https://doi.org/10.1080/014311697217657

  16. 16. 卫炜, 吴文斌, 李正国, 等. 时间序列植被指数重构方法比对研究[J]. 中国农业资源与区划, 2014, 35(1): 34-43.

  17. 17. 耿丽英, 马明国. 长时间序列NDVI数据重建方法比较研究进展[J]. 遥感技术与应用, 2014, 29(2): 362-368.

  18. 18. Viovy, N., Arino, O. and Belward, A.S. (1992) The Best Index Slope Extraction (BISE): A Method for Reducing Noise in NDVI Time-Series. International Journal of Remote Sensing, 13, 1585-1590. https://doi.org/10.1080/01431169208904212

  19. 19. Lovell, J.L. and Graetz, R.D. (2001) Filtering Pathfinder AVHRR Land NDVI Data for Australia. International Journal of Remote Sensing, 22, 2649-2654. https://doi.org/10.1080/01431160116874

  20. 20. Wang, D., Jiang, X.G., Tang, L.L. and Xi, X. (2005) The Application of Time-Series Fourier Analysis to Reconstructing Cloud-Free NDVI Images. Remote Sensing for Land & Resources, 16, 29-32.

  21. 21. Roerink, G.J., Menenti, M. and Verhoef, W. (2000) Reconstructing Cloudfree NDVI Composites using Fourier Analysis of Time Series. International Journal of Remote Sensing, 21, 1911-1917. https://doi.org/10.1080/014311600209814

  22. 22. 宋春桥, 柯灵红, 游松财, 等. 基于TIMESAT的3种时序NDVI拟合方法比较研究——以藏北草地为例[J]. 遥感技术与应用, 2011(2): 147-155.

  23. 23. 曹云锋, 王正兴, 邓芳萍. 3种滤波算法对NDVI高质量数据保真性研究[J]. 遥感技术与应用, 2010, 25(1): 118-125.

  24. 24. Savitzky, A. and Golay, M.J.E. (1964) Smoothing and Differentiation of Data by Simplified Least Squares Procedures. Analytical Chemistry, 36, 1627-1639. https://doi.org/10.1021/ac60214a047

  25. 25. Luo, J., Ying, K. and Bai, J. (2005) Savitzky-Golay Smoothing and Differentiation Filter for Even Number Data. Signal Processing, 85, 1429-1434. https://doi.org/10.1016/j.sigpro.2005.02.002

  26. 26. Zhu, M.Z. and Bao, X. (2008) Application of Outlier Detection and Savitzky-Golay Filter in Handwritten Systems. Mechanical & Electrical Engineering Magazine, 8, 5-7.

  27. 27. Jonsson, P. and Eklundh, L. (2002) Seasonality Extraction by Function Fitting to Time-Series of Satellite Sensor Data. IEEE Transactions on Geoscience & Remote Sensing, 40, 1824-1832. https://doi.org/10.1109/TGRS.2002.802519

  28. 28. Beck, P.S.A., Atzberger, C., Høgda, K.A., et al. (2006) Improved Monitoring of Vegetation Dynamics at Very High Latitudes: A New Method using MODIS NDVI. Remote Sensing of Environment, 99, 321-334. https://doi.org/10.1016/j.rse.2005.10.021

  29. 29. Jönsson, P. and Eklundh, L. (2004) TIMESAT—A Program for Analyzing Time-Series of Satellite Sensor Data. Computers & Geosciences, 30, 833-845. https://doi.org/10.1016/j.cageo.2004.05.006

  30. 30. Cao, Y.F., Wang, Z.X. and Den, F.P. (2010) Fidelity Performance of Three Filters for High Quality NDVI Time-Series Analysis. Remote Sensing Technology & Application, 25, 118-125.

  31. 31. Song, C., You, S., Ke, L., et al. (2011) Analysis on Three NDVI Time-Series Reconstruction Methods and Their Applications in North Tibet. Journal of Geo-Information Science, 13, 133-143. https://doi.org/10.3724/SP.J.1047.2011.00133

期刊菜单