什么是人体骨骼关键点检测?
应用
挑战
人体骨骼关键点检测方法主要分两周:自上而下和自下而上。
coordinate :坐标 直接将关键点坐标作为最后网络需要回归的目标,这样可以得到每个坐标点的直接位置信息
heatmap :热图 每一类坐标用一个概率图来表示,对图片中的每个像素位置都给一个概率,表示该点属于对应类别关键点的概率。距离关键点位置越近的像素点的概率越接近于1,距离关键点越远的像素点的概率越接近于0。具体的一般使用高斯函数来模拟。
offset :偏移量 表示距离目标关键点一定范围内的像素位置与目标关键点之间的关系。
Convolutional Pose Machines :本论文将深度学习应用于人体姿态分析,同时用卷积图层表达纹理信息和空间信息。主要网络结构分为多个stage,其中第一个stage会产生初步的关键点的检测效果,接下来的几个stage均以前一个stage的预测输出和从原图提取的特征作为输入,进一步提高关键点的检测效果。具体的流程图如下图(摘自论文[1])所示。
Cascaded Pyramid Network for Multi-Person Pose Estimation :本论文将深度学习应用于人体姿态分析,同时用卷积图层表达纹理信息和空间信息。主要网络结构分为多个stage,其中第一个stage会产生初步的关键点的检测效果,接下来的几个stage均以前一个stage的预测输出和从原图提取的特征作为输入,进一步提高关键点的检测效果。具体的流程图如下图(摘自论文[2])所示。
RMPE :本论文主要考虑的是自上而下的关键点检测算法在目标检测产生Proposals的过程中,可能会出现检测框定位误差、对同一个物体重复检测等问题。检测框定位误差,会出现裁剪出来的区域没有包含整个人活着目标人体在框内的比例较小,造成接下来的单人人体骨骼关键点检测错误;对同一个物体重复检测,虽然目标人体是一样的,但是由于裁剪区域的差异可能会造成对同一个人会生成不同的关键点定位结果。本文提出了一种方法来解决目标检测产生的Proposals所存在的问题,即通过空间变换网络将同一个人体的产生的不同裁剪区域(Proposals)都变换到一个较好的结果,如人体在裁剪区域的正中央,这样就不会产生对于一个人体的产生的不同Proposals有不同关键点检测效果。具体Pipeline如下图(摘自论文[14])所示。
Part Segmentation :即对人体进行不同部位分割,而关键点都落在分割区域的特定位置,通过部位分割对关键点之间的关系进行建模,既可以显式的提供人体关键点的空间先验知识,指导网络的学习,同时在最后对不同人体关键点进行聚类时也能起到相应的连接关键点的作用。如下图(论文[4])所示。
Part Affinity Fields :
网络分为两路结构,一路是上面的卷积层,用来获得置信图;一路是下面的卷积层,用来获得PAFs。网络分为多个stage,每一个stage结束的时候都有中继监督。每一个stage结束之后,S以及L都和stage1中的F合并。上下两路的loss都是计算预测和理想值之间的L2 loss。
personlab是一个自下而上的人体检测和姿态估计算法。包括两个步骤:
关键点检测阶段的目标是检测属于图像(可能不止一个人)中任何人体的关键点。该阶段生成一个热图和一个偏移量:
假设 是图像中二维位置中的一个,其中 是图像的位置索引, 是像素点的个数。
使用Hough投票集合热图和偏移量,聚合成hough分数映射 , 其中 为图像的每个位置, 为双线性插值核。
的局部最大值作为关键点的候选位置点,但是 没有与个体相关的信息,当图像中有多个个体存在时,我们需要一个机制将关键点聚合在其对应的个体上。 Mid-range pairwise offsets 为了达到以上目的,在网络上加入一个分离的成对中射程2-D偏移域输出 用来连接成对的关键点。训练集中 ,表示对于同一个个体 从第 个关键点到第 个关键点。
对于具有大量个体的情况,很难准确的回归 ,使用更准确的短射程偏移来递归的修正:
[1] Convolutional Pose Machines [2] Cascaded Pyramid Network for Multi-Person Pose Estimation [3] RMPE: Regional Multi-Person Pose Estimation
摄影测量与遥感技术发展论文主要通过对摄影技术与遥感技术的发展进行了研究,并对其在各个方面的运用进行了论述。
摄影测量与遥感技术发展论文【1】
摘要:随着经济的不断发展,科学的不断进步,摄影测量与遥感技术因其运用范围广、作用大而走上了逐渐发展的道路,并且对国民经济生活起着重要的影响。
关键词:摄影测量;遥感技术;发展;应用
摄影测量与遥感技术被划分在地球空间信息科学的范畴内,它在获取地球表面、环境等信息时是通过非接触成像传感器来实现的,并对其进行分析、记录、表达以及测量的科学与技术。
3S技术的应用、运用遥感技术以及数字摄影测量是其主要研究方向。
在多个领域内都可以运用遥感技术与摄影测量,比如:自然灾害、勘查土木工程、监测环境以及国土资源调查等。
随着我国经济的不断发展,运用到遥感技术与摄影测量的领域也在逐渐的增多。
在人类认识宇宙方面,遥感技术与摄影测量为人类提供了新的方式与方法,也为人类对地球的认知以及和谐共处提供了新的方向。
遥感技术和摄影测量可以提供比例不同的地形图以服务于各种工作,并且还能实现基础地理信息数据库的建立;遥感技术与摄影测量与地图制图、大地测量、工程测量以及卫星定位等构成了一整套技术系统,是测绘行业的支柱。
一、摄影测量与遥感技术的发展
从摄影测量与遥感技术的发展来看,摄影测量与遥感技术在近30年的时间里已经涉及到城市建设、水利、测绘、海洋、农业、气象、林业等各个领域,在我国的经济发展中起着至关重要的作用。
摄影测量从20世纪70年代后期从模拟摄影中分离出来,并逐渐步入数字摄影阶段,摄影测量正在逐渐的转变为数字化测绘技术体系。
(一)摄影测量与遥感技术有利于推动测绘技术的进步
我国的摄影测量从上世纪70年代后期经历一个系统的转变。
在经历了模拟摄影测量以及解析摄影测量阶段之后,摄影测量终于步入了数字摄影测量的阶段,这也成为我国传统测绘体系解体,测绘技术新体系兴起的标志。
首先,从数字影像的类型来看,当前我国已经建立了数字栅格图、数字高程模型以及数字正射影像,土地利用与地名数据库也随之建立起来,摄影测量与数据库的多样性在一定程度上为生产运用提供了可能,从而进一步推动了测绘技术的发展。
其次,由于摄影测量与遥感技术的飞速发展,也逐渐被国家所重视,并利用这两项技术来完成了各种地理比例尺地形图的绘制。
此外,还推动了诸多具有全国界别的基础地理信息数据库的建立。
比如:比例尺级别为1:50000,1:1000000等的国家级地理信息数据库;除开国家级的,还有省级、县级等的地理信息数据库等。
(二)摄影测量与遥感技术有利于提升空间数据的获取能力
我国获取空间数据的能力在经过五十年的发展,有了较大的提升。
对具有自主知识产权的处理遥感数据平台进行了研发,从而推动了国产卫星遥感影像地面处理系统的建立,并在摄影测量方面积极进行研究和探索,为我国独立处理信息、获取观测体系的建立提供了坚实的基础。
首先,从获取数据的能力方面来看,传感器在国家863以及973计划的支持上成功被研制出来,成功发射了对地观测的包括通信卫星、海洋卫星、气象卫星以及资源卫星等五十多颗卫星,并推动了资源、风云、环境减灾以及海洋四大民用对地观测卫星体系的建立,实现了从太阳和地球同步轨道对地球多传感器、多平台的观测以及对地球表面分辨率不同的雷达和光学图像的获取,并将这些获取的数据用于对海洋现象、大气成分、自然灾害以及水循环等各个方面的监测。
其次,从数据储备方面来看,数据积累已经成功的覆盖了全国海域、陆地以及我国周围国家和地区的包括一千五百万平方公里的地球表面数据。
二、摄影测量与遥感技术在国民经济各项领域中的运用
(一)摄影测量与遥感技术在应对自然灾害中的运用
在发生自然灾害时,为了能够第一时间了解灾情的具体分布,获取高分辨率灾区遥感影像,可以采用低空无人遥感、航天、航空遥感等方式,对灾区原有的地理信息以及尺度进行整合,推动地理信息服务平台的建立,将多尺度影像地图制作出来,及时、有效的提供地理信息以及地图数据支持,为及时制定出应对自然灾害的措施提供了依据。
比如在汶川地震时,在灾区道路交通与通信严重受损的情况下,通过摄影测量与遥感技术在第一时间获取了灾区的详细信息与资料,并利用航空遥感技术和无人机连续、动态的实现对灾区的监测,并对道路交通以及房屋倒塌等情况进行分析,建立起灾区地理信息综合服务平台,将灾区的地理信息数据进行整合,比如水系、居民地以及交通等,为各级抗震救灾指挥部门作出正确的决策以及救援人员的搜救工作提供了及时有效的灾情信息。
在灾区的救援工作中,发挥着至关重要的作用。
(二)摄影测量与遥感技术在气象中的运用
在气象方面中,摄影测量与遥感技术主要运用在对各种气象灾害的.预报和监测两方面。
在热带天气系统的监测方面,气象卫星发挥着极其重要的作用,尤其是对于台风的预报和监测。
在我国的春、夏季中,雷雨、暴雨等作为多发性的灾害性天气,在监测和分析方面,如果运用常规的气象观测资料是非常困难的。
利用具有高空间分辨率和高时间密度特点的卫星云图以及卫星产品,可以对对流系统的演变、发生、移动以及发展过程进行全方位的监测,从而为对流天气的分析和提前预警提供了非常重要的信息。
三、结语
摄影测量与遥感技术的应用已经逐渐步入信息化阶段。
随着我国航空航天技术的不断发展,如何将各行各业的发展与摄影测量和遥感技术相结合从而推动我国经济的发展,已经成为未来摄影测量和遥感技术发展的主要方向。
【参考文献】
[1]张景雄.地理信息系统与科学[M].武汉:武汉大学出版社,2010:108―114
[2]张剑清.潘励.王树根.摄影测量学[M].武汉:武汉大学出版社,2009:89―93
[3]李德仁.王树根.周月琴.摄影测量与遥感概论[M].北京:测绘出版社,2008:131―137
[4]乔瑞亭.孙和利.李欣.摄影与空中摄影学[M].武汉:武汉大学出版社,2008:178―182
[5]窦超.李兆钧.浅谈摄影测量与遥感的发展应用[M].青海国土经略,2011(06):29―31
摄影测量与遥感技术的新特点及技术【2】
摘要:本文主要分析了近年来我国摄影测量与遥感技术表现出的许多新的特点,分别从航空摄影自动定位技术、近景摄影测量、低空摄影测量、SAR数据处理、多源空间数据挖掘等方面进行了总结与论述。
关键词:电子科技论文发表,科技论文网,自动定位技术,近景摄影测量,低空摄影测量,SAR数据处理,多源空间数据挖掘
前言:摄影测量与遥感是从摄影影像和其他非接触传感器系统获取所研究物体,主要是地球及其环境的可靠信息,并对其进行记录、量测、分析与应用表达的科学和技术。
随着摄影测量发展到数字摄影测量阶段及多传感器、多分辨率、多光谱、多时段遥感影像与空间科学、电子科学、地球科学、计算机科学以及其他边缘学科的交叉渗透、相互融合,摄影测量与遥感已逐渐发展成为一门新型的地球空间信息科学。
1、航空摄影自动定位技术
近年来,随着卫星导航和传感器技术的进步,遥感对地目标定位逐步摆脱了地面控制点的束缚,向少控制点甚至是无控制点的方向发展。
1.1 利用基于载波相位测量的GPS动态定位技术测定航空影像获取时刻投影中心的3维坐标,以此为基础研究了GPS辅助空中三角测量理论和质量控制方法,在加密区四角布设地面控制点的GPS辅助光束法区域网平差的精度可满足摄影测量规范的精度要求,大量减少了航空摄影测量所需的地面控制点。
研究成果已大规模用于国家基础测绘,产生了显著的社会和经济效益。
1.2 开展利用在飞机上装载IMU和GPS构成的POS系统直接获取航摄像片6个外方位元素的多传感器航空遥感集成平台研究,可实现定点航空摄影和无地面控制的高精度对地目标定位。
研究成果表明,在1:5万及以下比例尺的4D产品生产中,可直接使用POS系统测得的像片外方位元素进行影像定向,基本无需地面控制点和摄影测量加密,从而改变了航空摄影测量的作业模式,并使无图区、困难地区的地形测绘和空间信息数据的实时更新成为可能。
2、近景摄影测量技术
近景摄影测量的研究应用领域已涉及空间飞行器制造、航空工业、船舶工业、汽车工业、核能工业、化学工业以及医学、生物工程、公安刑事侦破、交通事故及其他事故现场处理、古建筑建档和恢复、大型工程建设监测等方面。
2.1 利用数字相机与实时数字近景摄影测量技术相结合建立相应的工业零件检测系统。
该类系统使用高重叠度序列图像作为影像数据源,利用较多同名特征的冗余观测值成功地进行粗差剔除,根据2维序列图像导出物体不同部位的3维信息,然后将这些3维信息融为统一的表面模型,实现了高精度3维重建。
2.2 利用数码相机与全站仪集成形成一个全新的测量系统——摄影全站仪系统。
尽管传统近景摄影测量近年来得巨大发展,但必须在被测物体表面或周围布设一定数量的控制点,摄影测量工作者心中的“无接触测量“没有真正实现。
全站仪作为一种高精度测量仪器在工程测量中被广泛接受,本质上它是一种基于”点“的测量仪器。
将它与基于”面“的摄影测量有机地结合起来,形成一个全新的测量系统——摄影全站仪系统。
在该系统中,量测数码相机安装在全站仪的望远镜上,测量时利用全站仪进行导线测量,在每个导线点利用量测数码相机对被测物体进行摄影。
每张影像对应的方位元素可以由导线测量与全站仪的读数中获取。
3、低空摄影测量技术
近年来随着低空飞行平台(固定翼模型飞机、飞艇、直升机、有人驾驶小型飞机)及其辅助设备的进一步完善、数码相机的快速普及和数字摄影测量技术的日趋成熟,由地面通过无线电通讯网络,实现起飞、到达指定空域、进行遥感飞行以及返回地面等操作的低空遥感平台为获取地面任意角度的清晰影像提供了重要途径。
3.1 建立基于无人驾驶飞行器的低空数字摄影测量与遥感硬件系统。
硬件平台包括无人驾驶遥控飞行平台,差分GPS接收机,姿态传感器,高性能数码相机和视频摄像机,数据通讯设备,影像监视与高速数据采集设备,高性能计算机等等。
需要深入研究无人驾驶飞行平台的飞行特性,并研制三轴旋转云台、差分GPS无线通讯、视频数据的自动下传、自动曝光等关键技术。
3.2 研究无人驾驶飞行平台的自动控制策略。
在飞行器上搭载飞控计算机,由差分GPS数据得到飞艇(相机)的精确位置,在此基础上对较低分辨率的视频序列影像进行匹配,结合姿态传感器的输出信号实时自动确定飞行器的姿态,从而进行飞行自动控制,并将所有数据同时下传到地面监控计算机。
3.3 研究多基线立体影像中连接点的多影像匹配方法与克服影像几何变形的稳健影像匹配方法。
3.4 数字表面模型与正射影像的自动获取及立体测图。
4、SAN数据处理技术
SAR成像具有全天时、全天候的工作能力,它与可见光红外相比具有独特的优势。
随着我国SAR传感器研制技术的进一步发展,先后研制了不同波段,不同极化方式,空间分辨率达到0.3 In的传感器,并在SAR立体测绘方面设计了不同轨道和相同轨道的重复观测,为我国开展SAR技术的相关研究奠定了数据基础。
4.1 根据不同应用目的的SAR图像与可见光图像的融合。
利用SAR和可见光反映地物不同特性的特点,在提取不同土壤性质以及洪水监测和灾害评估方面采用不同的融合方法,取得了一定的理论成果,并完成了国家和部门的科研课题。
4.2 SAR图像噪声去除方法。
由于SAR的成像特点,造成了SAR图像的信噪比低,噪声严重。
提出了自适应滤波思想,基于图斑的去噪方法以及噪声去除方法的评价等。
4.3 机载和星载重复轨道的SAR立体测图技术以及星载的InSAR技术和D—InSAR的突破。
完成了星载InSAR生成DEM及D—InSAR形变检测的相关软件开发,利用极化SAR数据提取地物目标,开展极化干涉测量的研究。
5、多源空间数据挖掘技术
多源空间数据挖掘技术主要研究应用数学方法和专业知识从多源对地观测数据中,提取各种面向应用目的的地学信息。
5.1 从遥感图像数据中挖掘GIS数据。
在统计模式识别的基础上,通过神经网络、模糊识别和专家系统等技术实现图像光谱特征自动分类。
5.2 基于纹理分析的分类识别。
包括基于统计法的纹理分析、基于分形法的纹理分析、基于小波变换的纹理分析、基于结构法的纹理分析、基于模型法的纹理分析和空间/频率域联合纹理分析等。
5.3 遥感图像的解译信息提取。
把计算机自动识别出来的影像,结合GIS数据库或解译员的知识,确定其对应的地学属性。
包括基于GIS数据的图像信息识别、基于地学知识辅助的图像信息识别、基于专家知识辅助的图像信息识别、基于立体观察的图像信息识别、基于矢量栅格转化的信息提取和基于多源数据融合的信息识别等。
摄影测量与遥感的现状及发展趋势【3】
摘 要:随着信息时代的来临,人类社会步入全方位信息时代,各种新兴的科学技术迅猛发展,并广泛应用于人类生活中去。
摄影测量与遥感技术被广泛应用于我国测绘工作去,本文探讨了我国摄影测量与遥感的发展现状以及展望了发展趋势。
关键词:摄影测量;遥感;现状
随着信息时代的来临,人类社会步入全方位信息时代,各种新兴的科学技术迅猛发展,并广泛应用于人类生活中去。
摄影测量经历了模拟摄影测量、解析摄影测量和数字摄影测量三个阶段。
而在这期间,从遥感数据源到遥感数据处理、遥感平台和遥感器以及遥感的理论基础探讨和实际应用,都发生了巨大的变化。
数字地球(digitalearth)的概念是基于信息高速公路的假设和地理空间信息学的高速发展而产生的,数字地球为摄影测量与遥感学科提供了难得一遇的机会和明确的发展方向,与此同时,也向摄影测量和遥感技术提出了一些列的挑战。
而摄影测量和遥感学科是为数字地球提供空间框架图像数据及从数据图像中获得相关信息惟一技术手段
一、国内外摄影测量与遥感的现状
(一)摄影测量现状
摄影测量经历了漫长的发展过程,随着计算机技术以及自动控制技术的高数发展,进入20世纪末期的时候,基于全数字自动测图软件的完成,数字摄影测量工作站获得了迅猛发展并普遍存在于测量工作中。
进入21世纪后,科学技术的提升帮助摄影测量进入了数字化时代,数字摄影测量学学科与计算机科学有了大面积的知识交叉,摄影测量工具也变为较为经济的计算机输入输出设备,这种革命性的变革,使得数字摄影测量提升到了另一个台阶,数字摄影测量的语义信息提取、影像识别与分析等方面均产生了从质到量的变化。
目前我国各省测绘局均已广泛应用了数字摄影测量,建立了数字化测绘生产基地,实现了全数字化摄影测量与全球定位系统之间的有机合成,并且应用与测量实际工作中。
(二)遥感技术现状
目前遥感技术主要应用在日常的天气、海洋、环境预报及灾害监测、土地利用、城市规划、荒漠化监测、环境保护等方面,为社会带来了巨大的经济利益。
尤其要提出的是航天遥感,是利用卫星遥感获取各种信息是目前最有效的方法。
在实现数字地球概念,卫星遥感技术具有很重要的地位。
数字地球的实际意义就是将地球转为一个虚拟的球体,以数字形式来表达地球上的不同种类的信息,实现三维式和多分辨形式的地球描述。
数字地球是一个数量庞大的工程,从长远来看,信息量的更新一集信息的收取都需要卫星遥感技术提供可靠的信息源,换句话说,卫星遥感是实现数字地球的必要手段,也是其他手段不能够替代的。
二、摄影测量与遥感的应用与主要技术
(一)摄影测量与遥感在地籍测量中的应用
应用数字摄影测量与遥感模式进行地籍测量前景非常广阔。
航空航天事业的飞速发展,为高分辨率卫星遥感影像技术为空间地理信息提供主要的数据元。
主要以激光成像雷达、双天线SAR系统等三维数字摄影测量系统。
利用卫星遥感进行土地资源调查和土地利用动态监测,为快速及时的变更地籍测量做好参照,同时还能顺利的完成地籍线画图的测绘,还可以得到正射影像地籍图、三维立体数字地籍图等附属产品。
数字摄影测量主要以大比例尺航空像片为数据采集对象,利用该技术在航片上采集地籍数据,实行空三加密。
数字摄影测量与模式得到的地籍图信息丰富,实时性强;大部分工作均在室内完成,降低劳动强度与人工成本,还能大幅度提高工作效率,是一种非常实用的地籍测量模式。
(二)摄影测量在三维模型表面重建的应用
三维物体的重建技术可广泛应用于古建筑重建和文物保护、医学重建、工业量测、人脸重建、人体重建及程勘察等方面,这种技术主要通过手持量测数码相机进行操作,得到一组具有短基线和多度重叠的图片,通过立体匹配获取可靠的模型点数据。
基于短基线多影像数字摄影测量的快速三维重建技术能够解决静静摄影测量中不能同时兼顾变形早点近景和远景的问题,在操作过程中采用量测数码相机以及手持拍摄方式,使得这种技术简单快速,并且具有高度自动化的有点。
(三)遥感自动定位技术的应用
遥感自动定位技术能够确定影响目标的实际位置,并且准确的解译影响属性,在GPS空中三角测量的基础上,利用惯性导航系统,形成航空影响传感器,实现高精度的定点摄影成像。
在卫星遥感条件下,精度甚至可以达到米级。
遥感自动定位技术的应用,有助于实现实时测图和实时数据更新的作业流程,能够大量减少野外像控测量的工作量。
三、摄影测量与遥感发展展望
目前,摄影测量与遥感技术在数据获取与处理、信息服务和数据分析方面都有了新的进展,数据获取装备发展迅猛,数据处理系统自动化程度相应的提高,航空摄影测量软件实现模块化和标准化,实现了内外一体化的航空摄影测量方法,遥感影像信息管理能力增强。
除此之外,还可以看到测绘领域的全球化进程日益加剧。
四、结语
虽然现在摄影测量与遥感技术相对发展迅速,并且已经广泛应用与测绘工作中,逐步实现数字化与智能化。
在我国目前,摄影测量与遥感装备存在产品种类单一、生产效率低等实际生产问题,这是与飞速发展的信息产业背道而驰的,达不到国际水平。
需要国家发展测绘仪器制造业和专业软件开发能力,跨学科展开合作,集中优势力量,通过政府出台政策来引导市场发展,我国想要在摄影测量与遥感上取得更大的飞跃,还有一段很长的路要走。
参考文献:
[1]李德仁等.地球空间信息学与数字地球[C].空间数据基础设施与数字地球论文集,1999.
[2]刘经南.激光扫描测高技术的发展与现状[M].武汉大学学报,2003(2):132-137.
[3]郑立中,陈秀万.中国卫星遥感与定位技术应用的现状和发展[A].中国遥感奋进创新二十年学术论丈集[C].北京:气象出版社,2001.
大概就这样了 参考一下吧
基于landsat-TM影像的专题信息提取
学生姓名:XX 学号:20085080079
院系:城市与环境科学学院 专业:XX
指导教师:XX 职称:助教
摘 要:本文以沈阳地区为研究区,利用光谱信息提取水体、植被,采用基于灰度共生矩阵的纹理量的分类法,通过TM5波段提取灰度共生矩阵和灰度联合矩阵,计算并提取最能反映类别差异的纹理量值将光谱信息混淆的水田、旱田、居民地用分离,得到最终的分类结果。结果表明:将纹理特征应用于图像分类中可区分光谱混淆的地类,光谱与纹理特征结合得到的分类精度要高于单纯光谱的分类精度。
关键词:遥感影像;光谱特征;纹理特征;灰度共生矩阵;分层提取;土地利用
Abstract:Based on the study of shenyang area for using spectral information extraction,water,vegetation,based on gray symbiotic matrix of the texture classification,through the TM5 band extraction graylevel co-occurrence matrix and gray,and joint matrix extraction can reflect the differences between vector-valued texture category will confuse the paddy fields,spectral information structure,separation,with residents of the final results of the classification.Results show that: the texture characteristics will be applied to image classification can distinguish the confusion of spectral spectrum and texture feature combination,the classification accuracy than pure spectral classification accuracy.
Key words:remote sensing image;spectrum feature;texture feature;text gray-level co-occurrence matrix;layered extraction;land-use
引言
遥感图像信息专题特征的提取,需要对TM图像的光谱信息和纹理信息进行综合分析,以达到提高影像分类精度的目的[1] 。在自然资源调查中,遥感图像已成为重要的空间数据源,其中TM图像信息是进行土地利用/覆盖变化动态监测的重要依据。常规提取TM图像信息主要是利用影像的光谱分辨率进行的,难以正确区分光谱易混淆的地物,例如菜地与其他耕地类型。
提取TM图像中易混淆地物信息,可以充分利用影像的空间分辨率及影像上丰富的纹理信为了息来完成信息提取。纹理分析方法在许多领域都有重要的应用,吴高洪等[2]为了提高纹理图像分割的边缘准确性和区域一致性以及降低分割错误率,提出了一种基于小波变换进行纹理分割的方法。因此,研究地物在影像上的纹理特征,建立和充分应用基于纹理特征的地物分类及信息提取方法,将是今后研究高分辨率遥感影像信息提取的方向之一[3]。图像分析需要用到影像的灰度和纹理信息,灰度即波谱信息,是最基本的信息,纹理反映了灰度的空间变化情况,它由纹理基元按某种确定的规律或者某种统计规律排列组成。为了能用计算机进行纹理分析和形成统一的尺度,需将纹理量化,以定量反映纹理信息,形成纹理变量和纹理图像以便分析[4]。
1 研究区概况
苏家屯是沈阳市的九个市辖区之一,位于沈阳南部,距沈阳市中心15公里,与抚顺、本溪、辽阳三市毗邻。这里气候适宜,雨量适中,年均气温8度,年均降水量700毫米。物产丰富,蕴藏着丰富的煤石油天然气铁矿石和优质矿泉水等自然资源。苏家屯农业发达,盛产水稻、玉米,是国家确定的现代化农业示范区。本文选择数据源所选取的数据是沈阳地区2001年8月11日TM影像区的子区域。根据沈阳地区的农事历,选择10月上旬的遥感资料为宜。
2 光谱信息
地物的光谱一般是指像素的亮度值,地表的各种地物由于物质组成和结构不同而具有独特的波谱反射和辐射特性,在图像上反映为各类地物在各波段上灰度值的差异。地物光谱响应特征是多光谱遥感影像地物识别最直接,也是最重要的解译元素。
3 纹理特征
纹理也是遥感影像的重要信息,它通过色调或颜色的变化表现细纹或细小的纹案,这种细纹或细小的纹案在某一确定的图像区域中以一定的规律重复出现。
目标地物的纹理特征与航空相片的比例尺和太阳高度角有关。另外,它反映了影像的灰度统计信息、地物本身的结构特征和地物空间排列的关系,是进行目视判读和计算机自动解译的重要基础[5]。许多研究表明,除了原始影像光谱信息以外,加上纹理信息就可以使分析准确性和精度提高[6]。遥感图像中多为无规则纹理,一般采用统计方法进行纹理分析,目前用得较多的统计方法有共生矩阵法、分形维法和马尔可夫随机场法。
所谓灰度共生矩阵是由影像灰度级之间二阶联合条件概率密度所构成的矩阵,反映了影像中任意两点间灰度的空间相关性。其方法是先依据影像的灰度级数和灰度变化情况计算出4个方向(右、下、右上和左下)任意两个灰度级相邻出现的概率矩阵,它能提供多个纹理量,可以从多个侧面描述影像的纹理特征,因而在纹理分类中得到广泛的应用[7]。
4 提取方法
4.1 数据预处理
本文对沈阳地区遥感影像进行光学增强处理,并采用高通滤波来进行滤波处理对影像进行融合将融合后的影像进行几何校正。本文以1∶5万比例尺地形图为底图,选取均匀地分别在整幅图像内的60个控制点,采用二次多项式纠正模型建立两幅影像的对应关系。配准精度在0.3个像元以内,
4.2 土地利用分类体系的确定
参考国家土地利用分类体系,结合研究区土地资源的实际情况,TM影像波谱特征及其分辨率等,把研究区土地利用现状分类系统按二级进行分类,一级类型5个,分别为水体、水田、旱地、居民地、植被。
4.3 遥感信息提取
遥感图像的某些波段往往存在异物同谱和同物异谱现象,如果把多种地物放到一起考虑,由于这些波段的加入,会使信息提取变得非常复杂,这也正是传统上基于统计特征的监督和非监督分类遇到的难题。而对地物进行分层处理,就可以充分利用各类地物在不同波段的特征,收到较好效果[8,9]。对某一地物进行提取,获得该信息层,与原图像进行逻辑与运算,做掩膜处理,从而将该地物像元从原始图像中去除,以避免它对其他地物提取的影响,从而为以后的信息提取创造了纯净的环境。
4.3.1基于地物光谱模型的遥感影像分类
为获得光谱知识,在原始图像上进行采样。在采样过程中考虑到同类地物颜色的差异,如水域的深浅等,每一地类进行了多个样本值的合并,得到地物的综合光谱特征值(如图1)。
图1 地物光谱特征
水体的提取:太阳光照射到水面少部分被反射到空中大部分被入射到水体,入射到水体的光,部分被水体吸收,部分被水中的悬浮物反射,少部分透射到水底。被水底吸收和反射。被悬浮物反射和被水体反射的辐射,部分返回水面,折回到空中。因此,遥感器所接收到的辐射就包括水面反射光,悬浮物反射光,水底反射光和天空反射光(如图2)。由于不同水体的水面性质和水体特性的不同,从而形成传感器上接收到的反射光谱就存在差异,为遥感探测水体提供了基础。在可见光范围内,水体的反射率总体比较低,不超过10%,一般为4%~5%,并随着波长的增大逐渐降低,到0.6μm处约2%~3%,过了0.75μm,水体几乎成为全吸收体。因此,在近红外的遥感影像上清澈的水体成黑色。因此在提取水体时图面上黑色部分即为水体。
图2 传感器接收到的光谱
植被的提取:健康植物的波谱曲线有明显的特点(如图3),在可见光的0.55μm附近有一个反射率为10%~20%的小反射峰。在0.45μm和0.65μm附近有两个明显的吸收谷。在0.7~0.8μm是一个陡坡,反射率急剧增高。在近红外波段0.8~1.3μm之间形成一个高的,反射率可达40%或更大的反射峰。在1.45μm、1.95μm和2.6~2.7μm处有三个吸收谷。它们分别受叶子色素,细胞构造,含水量等的影响。因此,在对TM影像上的植被进行提取时,要考虑以上因素。
图3 健康植被的光谱特征
4.3.2基于纹理信息的分类
在图1中容易看到水田、旱地、居民地有很大的光谱相似度,因此需要根据纹理特征进行提取。
本文用水体和植被信息分别对原始影像做掩膜,再结合纹理信息作监督分类提取居民地、水田和旱地。为了突出图像的纹理,提高对图像的解译和分析能力,在对图像进行纹理分析之前,利用ErdasImagine软件对掩膜后的影像进行了增强处理。
为了进行纹理分类,首先必须提取各类的纹理特征。试验中先提取各类样本,统计各种类纹理特征,再找出最大差异的纹理量,作为分类特征量进行分类(如图4)。纹理特征的提取需考虑到窗口的大小、方向和步长。本文利用TM第5波段的纹理特征,采用了3X3大小的窗口、四个方向的均值[10]、步长为1来对纹理值(包括角二阶距、对比度、熵、相关)进行特征统计。
图4 纹理样本图
本文所有的纹理分析均在Matlab7.0上进行,主要目标是实现对输入遥感影像进行纹理分析,输出纹理分析的结果,以便通过使用结果,以不同的结合方式辅助分类作对比研究。从图5中我们可以看到,3种地类在ASM纹理特征量上差异最大,COR上次之,因此取用ASM、COR特征值,对3种地物加以提取。
图5 3种纹理特征曲线
旱田的提取:从纹理曲线中可以看出旱田的ASM量与水田、居民地有很大的差异,因此通过实验对ASM进行阈值设定来提取旱田。
居民地和水田的区分:采用基于纹理特征和光谱特征相结合的方法,对居民地进行提取。水田和居民地在ASM特征量上,有着较大的差异,但仔细观察可以发现,在去除了旱田的干扰后,水田和居民地在COR特征量上也有着很大的差异。同时一些研究提出了(归一化建筑指数)[11]:NDVI=(TM 5- TM 4)/(TM 5+ TM 4)来对居民地进行提取(见表1)。从表2中可以看出,这种方法并不适合本文的研究区,但是对原始的光谱特征信息进行分析可以发现,在只存有水田和居民地的图像上,两者在TM5上的亮度值差距很大。综上所述,可以对COR和TM5的亮度值进行阈值设定提取居民地,将其与水田相分离。
表1 5种地物的NDVI指数
指标 水体 水田 旱地 居民地 植被
NDVI 0.24271 0.218619 0.380397 0.231489 0.166337
5 精度评价
衡量分类精度最广泛的方法是由Congalton提出的误差矩阵法(error matrix),为了评价分类试验精度,本文采用随机抽样方法抽取400个点作正确率评价,通过对原图的目视判读结合实地考察对结果进行正确率评价,建立混淆矩阵,计算其Kappa系数(见表2),在ERDAS监督分类中总正确率为85.4 %(见表3),两者相比较可以看出,基于光谱和纹理特征的信息分层提取方法能够很好的对研究区影象进行分类。
表2 光谱纹理信息分类精度%
居民地 水田 旱地` 水体 植被
居民地
水田
旱地
水体
植被
总合
正确率/% 82
4
2
1
1
92
90.2 7
99
2
1
1
109
90.8 5
3
113
1
1
123
91.8 1
0
0
35
1
37
94.6 1
1
1
1
36
39
92.3
总正确率=91.5% Kappa系数=0.87
表3 EARDS监督分类精度
居民地 水田 旱地` 水体 植被
居民地
水田
旱地
水体
植被
总合
正确率/% 3123
240
107
24
63
3577
88 39
7481
569
176
6
1363
78 81
112
1477
99
32
8723
86 5 1
39
202
1067
4
1801
82 7
0
2
3
379
379
97
总正确率=85.4 %
6 结语
(1)试验表明,对地物进行分层处理,就可以充分利用各类地物在不同波段的特征。避免已提取地物对其他地物提取的干扰,为后续信息提取创造了纯净的环境;同时还可以有效地减少了漏分和误分,提高分类正确率。本文采用此方法对建设用地信息提取,获得较为满意的效果。
(2)综合运用光谱知识、纹理信息对于仅基于遥感多光谱信息的传统分类方法,能够更有效地提取出土地利用类型信息,精度有了一定提高。
(3)本文在进行纹理分析时,仅使用了单波段的影象数据,对于多波段影象数据未能充分利用; TM全色波段纹理清晰,如能加以利用,会对分类精度的提高有一定的帮助。
参考文献
[1] 梅安新,彭望琭,秦其明.遥感导论[M].北京,高等教育出版社,2003.
[2] 吴高洪,章毓晋,林行刚等.利用小波变换和特征加权进行纹理分割[J].中国图像图形学报,2001,6(4):333-337.
[3] 张禾.基于纹理特征的遥感影像居民地自动提取方法[J].江汉石油职工大学学报,2007,(4):93-96
[4] 黄桂兰,郑肇葆,杨敏.一种基于共生矩阵法的影像纹理分类方法[J].测绘通报,1996,(3):28-31.
[5] 周廷刚,郭达志,盛业华.灰度矢量多波段遥感影像纹理特征及其描述[J].西安科技学院学报,2000,2(4):336-338.
[6] 舒宁.关于多光谱和高光谱影像的纹理问题[J].武汉大学学报,2004,29(4):292-295.
[7] 武文波,陈静基于ETM+的遥感影像信息提取研究[J]甘肃农业大学学报2007,43(4).
[8] 李四海,恽才兴.土地覆盖遥感专题信息的分层提取方法及其应用[J].遥感技术与应用,1999,(4):
[9] 柴芸.甘肃省沙化土地监测研究[J].甘肃农业大学学报,2003,38(3):296~301.
[10] Treitz P,Howarth P.Integrating spectral spatial andTerrain variables for forest ecosystem classification[J].Photogrammetric Engineering Remote Sensing,2000,66(3):305-317.
[11] 查勇,倪绍祥,杨山.一种利用图像自动提取城镇用地信息的有效方法[J].遥感学报,2003,(1):38-391.
标题 XXXXXXXXXXXXXX(宋体三号字加黑,居中)
学生姓名:XX 学号:XXX(五号宋体字不加黑,居中)
XXXX院(系) XX专业(五号宋体字不加黑,居中)
指导教师:XXX 职称:XXX(五号宋体字不加黑,居中)
(空两格)摘 要(黑体小四):具体内容(楷体小四号字不加黑)
(空两格)关键词(黑体小四): **;**;** (楷体小四号字不加黑)
(空一行)
Abstract(Times New Roman小四加黑): 具体内容(Times New Roman小四不加黑)
Key Words(Times New Roman小四加黑):**;**;** (Times New Roman小四不加黑)
前言(宋体小三号加黑)
一、政府信息公开制度概述(一级标题宋体四号字加黑)
(一)政府信息公开的内涵(二级标题仿宋体小四号字加黑)
1.政府信息公开(三级标题宋体小四号字)
正文内容(宋体小四号不加黑)、图表说明(宋体小五号字不加黑)