密级编号丰·初大·警ＣＥＮＴＲＡＬＳＯＵＴＨＵＮＩＶＥＲＳＩＴＹ硕士学位论文论文题目面向Ｗ出服轰塞全魍漏洞捐描器的…设让与实现学科、专业让箕机科学与技术研究生姓名黄丛韬导师姓名及专业技术职务…王伟平教援ＲｅｓｅａｒｃｈａｎｄＩｍｐＩｅｍｅｎｔａｔｉｏｎｏｆＷｅｂＡｐｐ¨ｃａｔｉＯｎＳｅｃｕｒｉｔｙｓｃａｎｎｅｒＳｐｅｃｉａＩｔｙ：￡Ｑｍｐ世盟Ｓ￡ｉ￡丑盟鱼壁￡ｈｎ直Ｑ鲤ＭａｓｔｅｒＤｅｇｒｅｅＣａｎｄｉｄａｔｅ：Ｈ丛Ｂ丑ｇ￡Ｑ丑ｇ！ａＱＳｕｐｅｒＶｉｓｏｒ：里！！￡坠ｉＰｉ旦ｇ№ｇＣｏ｜ＩｅｇｅｏｆＩｎｆｏｒｎｌａｔｉｏｎＳｃｉｅｎｃｅ＆ＥｎｇｉｎｅｅｒｉｎｇＣｅｎｔｒａＩＳｏｕｔｈＵｎｉＶｅｒｓｉｔｙＣｈａｎｇＳｈａＨｕｎａｎＰ．Ｒ．Ｃｔｌ！，．原创性声明本人声明，所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研究成果。尽我所知，除了论文中特别加以标注和致谢的地方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含为获得中南大学或其他单位的学位或证书而使用过的材料。与我共同工作的同志对本研究所作的贡献均已在论文中作了明确的说明。作者签名：查丛整日期：塑＆年土月兰生日学位论文版权使用授权书本人了解中南大学有关保留、使用学位论文的规定，即：学校有权保留学位论文并根据国家或湖南省有关部门规定送交学位论文，允许学位论文被查阅和借阅；学校可以公布学位论文的全部或部分内容，可以采用复印、缩印或其它手段保存学位论文。同时授权中国科学技术信息研究所将本学位论文收录到《中国学位论文全文数据库》，并通过网络向社会公众提供信息服务。作者签名：耋姐导师签名碑，日期：生年上月翌日摘要随着ｗｅｂ应用被越来越广泛的应用，对其安全性的关注也逐渐上升到越来越高的层次，如何保障ｗｅｂ应用的安全性已经是一个重要的研究课题。目前存在许多防护系统用于防御ｗｅｂ应用攻击，在一定程度上增强了ｗｅｂ应用的安全性，但是会带来不少的性能损耗和维护代价。因此及早发现漏洞并将其消除以增强ｗｅｂ应用自身的安全性能够防忠于未然，极大减少后续软件维护的开销，提升软件产品的信誉。而ｗｅｂ应用漏洞扫描软件作为漏洞检测过程中一类重要的工具，能有效地辅助检测者的工作，减少检测者的工作量，因此很有研究的必要。本文研究了Ⅶｒｅｂ应用漏洞产生的原因以及对应的检测方法，对ｗｅｂ应用漏洞扫描的两类关键技术一ｗｅｂ漏洞扫描信息获取和ｗｅｂ应用漏洞检测机制进行了深入研究，针对ｗｅｂ应用的特点设计了一个ｗｅｂ应用漏洞扫描软件框架，并实现了其中的相关核心检测模块。针对ｗｅｂ漏洞扫描信息获取的目标，深入研究了基于正则表达式的网页内容提取技术、交互式表单内容的抓取技术、用于扫描信息的ＤＯＭ文档技术和ＨＴＴＰ通信协议技术。利用宽度优先搜索策略结合实用的ｕＲＬ传输库解决了对目标ｗＥＢ应用扫描信息获取的问题。设计并实现了一个具有一定语义识别能力的自动表单填充模块，解决了隐藏在表单后面的扫描信息获取问题，可以达到对网页漏洞扫描相关元素的完整提取。在获取了相关漏洞扫描信息的基础上，进一步对ｗｅｂ应用漏洞检测技术进行了深入研究。针对ｗｅｂ应用漏洞不断更新、检测技术不断变化的特点，利用动态链接库技术，设计实现了一种基于规则扩展和插件扩展的漏洞检测机制，实现了可以自定义新的扫描插件，同时，深入研究了漏洞分析器的工作原理和过程，针对ｗｅｂ安全中主流的ｓＱＬ注入漏洞、ｓ０Ｌ盲注漏洞、ｘＳｓ攻击漏洞以及备份文件检测等漏洞，设计实现了用于相关的漏洞分析与检测的插件，在此基础上实现了一个自动化的ｗ曲安全漏洞分析器。针对ｗ曲应用中需要手动探索的部分以及自动化扫描软件的结果的确认，本文研究并设计了编码／解码工具、ＨＴＴＰ请求发送与解析等工具，以提高检测的准确性和效率。针对相关的网站进行了远程的漏洞扫描测试，结果表明本文设计的ｗｅｂ应用漏洞扫描软件可以有效地检测ｓ０Ｌ注入漏洞、ｘｓｓ漏洞以及各份文件检测等漏洞。达到了预期设计的效果。关键词：ｗｅｂ应用安全，漏洞检测，页面抓取，漏洞分析ＡｂｓｔｒａｃｔＡｓｗｅｂａｐｐｌｉｃ“ｏｎｓａ瞳ｍｏｒｅｗｉｄｅｌｙｕｓｅｄ，血ｅｃｏｎｃｅｎ打ａｔｋｎｔ０讹ｓｅｃｕｒｉｔｙｈａｓｒｉｓｅｎｔｏａ１１ｉｎｃｒｅａｓｉｎｇｌｙｈｉｇｈ１ｅｖｅｌＨｏｗｔｏｐｍｔｅｃｔｔ１１ｅｓｅｃｕｒｉｔｙｏｆＷｅｂ８ｐｐｌｉｃａｔｉｏｎｓｈａｓｂｅｃｏｍｅａｎｉｍｐｏｎａｎｔｒｅｓｅａｒｃｈｔｏｐｉｃ．Ｃｕｒｒｅｍｌｙｔｈｅｒｅａｒｅｍａｎｙｐｒｏｔｅｃｔｉｏｎｓｙｓｔｅｍｓａｒｅｕｓｅｄｆｏｒｄｅｆｅｎｓ。ａｇａｉｎｓｔＷｅｂａｐｐｌｉｃａｔｉｏｎａｎａｃｋｓ，山ｅｓ。ｓｙＳｔｅｍｓｔｏｓｏｍｅｅｍｅｍ，ｅｎｈａｎｃｅ山ｅｓｅｃｕｒｉｔｙｏｆＷ曲印ｐｌｉｃａｔｉｏｎｓ，ｂｕｔｉｔｒ。ｑｕｉｒｅｓａｌｏｔｏｆｐｅｒｆｏＨｎａｎｃｅｌｏｓｓａｎｄｍａｉｎｔｅｎａｎｃｅｃｏｓｔＴｈｅｒｅｆｏｒｅ，ｅａｒｌｙｄｅｔｅｃｔｉｏｎｏｆｖｕｌｎｅｒａｂｉｌｉｔｙａ１１ｄｉｔｓｅｌｉｍｉｎａｔｉｏｎｃａｌｌｂｅｅｆｒｅｃｔｊｖｅｐｒｅｖｅｎｔｉｖｅｍｅａｓｕｒｅｓｔｏｅｎｈａｎｃｅｔｈｅｓｅｃｕｒｉｔｙｏｆｗｅｂａｐｐｌｌｃａｔｉｏｎｉｔｓｅｌｅｉｔａｌｓｏｃａｎｇｒｅａｔｌｙｒｅｄｕｃｅｔｈｅｂａｃｋｆｏｒ｛ｈｅｃｏｓｔｏｆｓｏｎｗａｒｅｍａｉｎｔｅｎａｎｃｅａｎｄｅ１１ｈａｎｃｅｔｈｅｃｒｅｄｉｂＩＩｉｔｖｏｆｔｈｅｓｏ丘ｗａｒｅｐｒｏｄｕｃｔｓＷｅｂａｐｐｌｉｃａｔｉｏｎⅧｌｎｅｒａｂｉｌｉｔｙｓｃａ肿ｉｎｇｓｏＲｗａｒｅｉｓａ１１ｉｍｐｏｎａｌｌｔｔｏｏｌｆｏｒｔ１１ｅｄｅｔｅｃｔｉｏ“ｐｒｏｃｅｓｓ，ｗｈｉｃｈｃａｎｅｆｆｅｃｔｉｖｅｌｙｓｕｐＰｏｎｔｈｅｗｏｒｋｏｆｔｈｅｔｅｓｔｅｒｓ，ｇｒｅａｔＩｙｒｅｄｕｃｅ山ｅｄｅｔｅｃｔｉｏｎｗｏｒｌ（１０ａｄＳｏｔｈｅｒｅｓｅａｒｃｈｏｎｉｔｉｓＶｏｒｙｎｅｃｅｓｓａｒｙ·Ｆｉｒｓｔ，ｔｈｉｓｐ印ｅｒｓｔｕｄｉｅｓｔｈｅｃａｕｓｅｓｏｆｔｈｅＷｅｂ印ｐｌｉｃａｔｉｏｎｖｕｌｎｅｒａｂｉｌｉｔｉｅｓａｎｄｔｈｅｃｏｒｒｅｓｐｏｎｄｉｎ卫ｄｅｔｅｃｔｉｏｎｍｅｔｈｏｄｓＴｏｔｈｅｃｈａｒａｃｔｅｒｉｓｔｉｃｓｏｆＷｅｂａｐｐｌｉｃａｔｉｏｎｓ，８ｐｒａｃｔｉｃａｌＷｅｂａｐｐｌｉｃａｔｉｏｎＶｕｌｎｅｒａｂｉｌｉＵｓｃａｎｎｉ“ｇｓｏ疗ｗａｒｅｆｒａｍｅｗｏｒｋｉ８ｐｒｏｐｏｓｅｄＳｅｃｏｎｄ，ｔｗｏｉｍｐｏｎａｎｔｔｅｃｈｎ０１０９ｉｅｓａｒｅｉｎ—ｄｅｐｔｈｓｔｕｄｉｅｄｗｈｉｃｈａｒｅｖｕｌｎｅｒａｂｌｌｉＷｓｃａｎｎｉ“ｇｉｎｆ０肌ａｔｉｏｎａｃｃｅｓｓａ１１ｄｗｅｂａｐｐＨｃ撕０ｎｖｕｌｎｅｒａｂｉｌｉｔｙｄｅｔｅｃｔｉｏｎｍｅｃｈａｎｉｓｍＴｈｉｒｄ，ＡｄｅｓｉｇｎａｎｄｉｍｐｌｅｍｅｎｔａｔｉｏｎａｂｏｕｔｔｈｅｔｅｃｈｎｏｌｏｇｉｅｓｉｓｇｉｖｅｎＴｏｔｈｅＷｅｂⅦＩｎｅｒａｂ肌ｙｓｃａｎｎｉ“ｇｉｎｆｏｍａｔｉｏｎａｃｃｅｓｓｉ“ｇ，ｔ｝１ｉｓｐａｐｅｒ百Ｖｅｓａｎｉｎ－ｄｅｐｔｈｍｄｙｏｆｉｔ３ｇｏａｌｓ，ｓｅｌｅｃｔａｎｄｄｅｓｉ呈ｎ３ｐｒｏｃｅｓｓｆｏｒｓｃａｎｎｉ“ｇｉｎｆｏｎＴｌａｔｉｏｎｏｂｔａｉｎｅｄＯｎｔｈｅｂａｓｉｓｏｆｔｈｅｓｃａｎｉｎｆｏｍａｔｉｏｎ，ａｄｅｓｉｇｎａ１１ｄｒｅａｌｌｚａｔｉｏｎｏｆｗｅｂｃｏｎｔｅｎｔｅｘｔｒａｃｔｉｏｎｍｏｄｕｌｅｂａｓｅｄｏｎｒｅ２ｎｌａｒｅｘｐｒｅｓｓｉｏｎｔｅｃｈｎｉｃａｌｉ５ｐｒｏｐｏｓｅｄＮｅｘｔ，ａｎｉｎ－ｄｅｐｔｈｓｔｕｄｙｏｎｔ１１ｅｃｍｗｏｆｔｈｅｉｎｔｅｒａｃｔｉｖｅｆｏｍｌｃｏｎｔｅｎｔｉｓｃａｍｅｄｏｕｔＤｅｓｉｇｎｅｄａｎｄｊｍｐｌｅｍｅｎｔｅｄａｔｌａｕｔｏｍａｔｉｃｆｏ衄６ｌｌｉｎｇｍｏｄｕＩｅｗｉｔｈｔ１１ｅａｂｉｌｉｔｙｏｆｓｉｍｐｌｅｓｅｍａｎｔｉｃｉｄｅｎｔｉ矗ｅｓＴｈｅｎ，ｉｎｏｒｄｅｒｔｏ印ｐｌｙｔｈｅｉｎｆ０玎ｎａｔｉｏｎｗｈｉｃｈｉｓｏｂｔａｉｎｅｄｄｕｄ“ｇｔｈｅｓｃａｎｎｉ“ｇｐｈａｓｅｔｏｔｈｅｗｅｂｖｕｌｎｅｒａｂｉｌｌｔｙｄｅｔｅｃｔｉｏｎｐｈａｓｅａ玎ｄｔｈｅｒｅｐｏｎｇｅｎｅｒａｔｉｏｎｐｈａｓｅ，ａｓｃａｎｎｉ“ｇｉｎｆｏｒｍａｔｉｏｎｍｏｄｅｌｉ５ｐｍｐｏｓｅｄＴｏ｛ｈｅⅥ铀印ｐｌｉｃａｔｉｏｎⅥ１１ｎｅｒａｂｉｌｉｔｙｄｅｔｅｃｔｉｏｎｔｅｃｈｎｏｌｏｇｙ，ａｃｃｏｒｄｉ“ｇｃｏｃｈｅｃｏｎｓｃａｎｃｌｙｕｐｄａｔｅｄｄｅｔｅｃｃｊｏｎｃｅｃｈｎｏｊｏｇｙａ１１ｄｃｈｅｃｈａｎｇｊｎｇｎａｃｕｒｅｏｆｔｈｅｄｅｔｅｃｔｉｏｎｔｅｃｈｎｏｌｏｇｙ，ｉｎｔｈｉｓｐ印ｅ‘ａｖａｒｉｅｔｙｏｆｓｃａｌａｂｌｅⅧ１ｎｅｒａｂｊｌｉｔｙｄｅｔｅｃｔｉｏｎｍｅｃｈａｎｉｓｍａｒｅｃｏｍｐａｒｅｄａｎｄａｎａｌｙｚｅｄＢｙｔａｌ（ｅａｄｖａｎｔａｇｅｓｏｆｔｈｅｃｈａｒａｃｔｅｒｉｓｔｉｃｓｏｆｔｈｅＷｅｂａｐｐｌｉｃａｔｉｏｎⅦｌｎｅｒａｂｉｌｉｔｙｄｅｔｅｃｔｉｏｎｍｅｔｈｏｄｓ，ａｖｕＩｎｅｒａｂｉｌｉｔｙｄｅｔｅｃｔｉｏｎｍｅｃｈａｎｉｓｍｗｈｉｃｈｉｓｂ８ｓｅｄｏｎｎ１１ｅ．ｂａｓｅｄｅＸｔｅｎｓｉｏｎｓａｎｄｐＩ“ｇ—ｉｎｅｘｔｅｎｓｉｏｎｓｉｓｄｅｓｉｇｎｅｄａｎｄｉｍｐｌｅｍｅｎｔｅｄＴｈｅｎ，ａ１１ｉｎ—ｄｅｐｔｈｓｔｕｄｙｏｎｔｈｅｗｏｒｋｉｎｇｐｒｉｎｃｉｐｊｅａｎｄｐｒｏｃｅｓｓｏｆｖｕＩｎｅｒａｂｉⅡｔｙａｎａｌｙｚｅｒｉｓｃａｍｅｄｏｕｔＢａｓｅｄｏｎｔｈｅｐｒｅｖｉｏｕｓｄｅｔｅｃｎｏｎｍｅｃｈａｎｉｓｍ，ａⅧｌｎｅｒａｂｉｌｉｔｙａｎａｌｙｚｅｒｉｓｄｅｓｉｇｎｅｄａｎｄｉｍｐｌｅｍｅｎｔｅｄＮｅｘｌ’ｉｎｏｒｄｅｒｔｏｃｏｍｐｅｎｓａｔｅｆｏｒｔｈｅｌａｃｋｏｆｐｕｒｅａｕｔｏｍａｔｅｄｓｃａｒｍｉｎｇｔｏｏｌｓ，ａｓｅｒｉｅｓｏｆａｓｓｉｓｔｅｄｄｅｔｅｃｔｉｏｎｔｏｏｌｓａｒｅｒｅｓｅａｒｃｈｅｄａｉｌｄｄｅｓｉｇｎｅｄ，ｔｈｅｙａｒｅｕｓｅｄｔｏｉｍｐｒｏｖｅｍｅｅｍｃｉｅｎｃｙｏｆＷｅｂａｐｐｌｉｃａｔｉｏｎⅦｌｎｅｒａｂｉｌｉｔｙｔｅｓｔｉ“ｇＴｈｅｔｅｓｔｓｈｏｗｅｄｔｈａｔｔ｝ｌｅＷｅｂａｐｐＩｉｃａｔｉｏｎｖｕＩｎｅｒａｂｉＩｉｔｙｓｃａｎｎｉｎｇｓｏｆｔｗａｒｅｗｈｉｃｈｉｓｄｅｓｃｎｂｅｄｉｎｔｈｉｓｐａｐｅｒｃａｎｄｅｔｅｃｔｓＱＬｉｎｊｅｃｔｉｏｎｖｕｌｎｅｒａｂｉｌｉｔｉｅｓ，ｂｌｉｎｄＳＱＬｉｎｊｅｃｔｉｏｎｖｕｌｎｅｒａｂｉｌｉｔｉｅｓ，ｘＳＳｖｕｌｎｅｒａｂｊｌｉｔｉｅｓａｓｗｅｌｌａｓｔｈｅｄｅｔｅｃｔｉｏｎｏｆｂａｃｌ（Ｌｌｐ６１ｅｅｔｃＫｅｙＷｏｒｄｓ：Ｗｅｂａｐｐｌｉｃａｔｉｏｎｓｅｃｕｒｉ吼Ｖｕｌｎｅｒａｂｉｌｉｔｙｄｅｔｅｃｔｉｏｎ，Ｗｅｂｐａｇｅｃｒａｗｌｉｎｇ，Ⅷｌｎｅｒａｂｉｌｉｔｙａｎａｌｙｓｉｓ目录摘要…ＩＡｂｓｔｒａｃｔ……１１１第一章绪论………１１．１课题背景介绍……………………１】２Ⅵ，ｅｂ应用漏洞扫描研究的现状及意义……２ｌ３研究目的与内容……３１４论文章节安排…３第二章ｗ曲应用安全漏洞综述及漏洞检测方案的提出５２１ｗｅｂ应用漏洞产生的原囡……．．５２２、ｖｅｂ应用漏洞检测的方法７２３聃－ｅｂ应用漏洞检测方案研究…１０２３１ｗｅｂ应用漏洞检测方案…１０２３２综台性的漏洞检测方案１１２４ｗｅｂ应用安全漏洞扫描软件的结构设计…１２２５本章小结１４第三章、№ｂ漏洞扫描信息获取关键技术研究与设计１５３１Ⅶ铀漏洞扫描中网页抓取与分析的目标…１５３２页面抓取遍历策略的设计与选择１６３３基于正则表达式的页面内容提取…１８３３１正则表达式简介……１９３３２使用正则表达式进行网页元素的匹配和分析１９３４交互式网页内容提取……２０３４１交互式表单内容的抓取…２０３４２ＡＪＡｘ网站内容的抓取２５３５网页模型类研究与设计…２６３５１ＨＴＴＰ请求消息头和ＨＴＴＰ响应消息头的内容２６３５２ＨＴＴＰ响应消息体的内容２８３５３网页模型类设计２９３６本章小结３０第四章ｗｅｂ应用漏洞检测关键技术研究与设计３ｌ４１漏洞定义及其说明…３１４２可扩展的漏洞检测机制研究３２４３漏洞分析器研究与设计３４４４辅助扫描检测工具的研究…３７４５本章小结３８第五章ｗｅｂ应用扫描软件的详细设计与实现３９５１Ⅵ，ｅｂ网页抓取与分析模块的详细设计与实现３９５１１使用Ｌｉｂｃｕｒｌ进行开发３９５１２网页抓取功能设计与实现…４１５１３漏洞检测类功能设计与实现４３５２扫描器执行结果４５５３本章小节４８第六章结束语…４９６１工作总结…４９６２进一步工作展望……５０参考文献…，１致谢５５攻读学位期间主要的研究成果…５６堡±堂塑堡奎————兰二兰塑笙第一章绪论１１课题背景介绍随着网络信息时代的到来，各种机构或团体的日常业务处理程序都逐渐往Ⅵ，ｃｂ应用方向迁移。ｗｃｂ应用以其便捷，美观和功能强大的特点广泛地博得了用户的青睐。然而随之而来的ｗ曲应用安全问题却不容小视。ｗＡｓｃ在２００９年初曾做估算，所有的网站中８７％都存在着安全隐患…。这些安全隐患一旦被攻击者恶意利用，轻则劫持用户会话，重则盗用用户账号窃取用户财产，破坏服务器数据或者发布恶意信息，给用户和ｗｅｂ应用提供者造成严重的损失并且影响恶劣。特别像近期的ｃｓＤＮ、天涯等网站发生引起社会广泛关注的用户信息泄露事件，２６个疑似泄露数据库被公开，涉及帐号、密码信息２７８亿条．给广大互联网用户的合法权益和互联网安全造成了严重的影响。随着我国网民和主机数量的不断增长，、Ⅳｅｂ应用产品已经逐渐融八人们的日常生活之中，一旦某个产品的的漏洞被黑客发现并进行恶意利用，将导致大量用户和单位的信息系统面临威胁，这种规模效应也助长了黑客对软件和网站漏洞进行挖掘和攻击活动的气焰。２０１１年３月，ＭＹｓＯＬｃｏｍ和ｓｕｎｃｏｍ被入侵，攻击者窃取了用户的信息。２０１１年４月，索尼数据服务器被侵入，将近一千万张信用卡，资料被泄漏，美国的ＦＤＩ都介入了调查；同月谷歌的Ｇｍａｎ邮箱被攻击：２０１１年６月，新浪微博遭到黑客攻击。另外像许多知名的产品如ｙａｌｌ００ｍ础，２１ｃＮＭａｉｌ，网易旗下１６邮箱，腾讯旗下的ＱＱＭａｉｌ，中国移动１３９邮箱等被广泛使用的互联网产品都被检查出存在跨站漏洞（ｘｓｓ），因此，ｗｅｂ应用安全仍然面临严峻的态势。ｃＮｖＤ（国家信息安全漏洞平台）【Ｈ１在２０１１年共收集整理并公开发布信息安全漏洞５５４７个，较２０１０年大幅增加６０９％。其中．高危漏洞有２１６４个，较２０】０年增加约２．３倍。在所有漏洞中，涉及各种应用程序的最多，占６２６％，涉及各类网站系统的漏洞位居第二，占２２７％，而涉及各种操作系统的漏洞则排到第三位，占８８％。ｗｅｂ应用安全问题已经是一个越来越急需关注和解决的问题。虽然、№ｂ应用能从传统的网络安全保护措施中得到有限的保护，但是通过ＨＴＴＰ协议传输于应用屠的数据并不能被传统的防火墙，操作系统等进行仔细的检查，并且基于ＨＴＴＰ协议几乎可以传输任何对象，其中也包含恶意程序代码。从本质上来说，基于应用层的攻击基本上都是由于ｗ曲应用或者服务程序本身存在漏洞造成的。造成漏洞存在的原因是多方面的，一方面早期的ｗｅｂ应用开发门槛很低，因此开发出的程序并没有注意到可能存在的安全问题，另一方面．由于漏洞的发掘技顼士学位论文第一章绪论术逐渐演变，新的攻击方式和攻击技巧不断产生，这使得原有、Ⅳｅｂ应用的脆弱性显得更为突出。就算某个ｗｅｂ应用被发现存在着漏洞，那么在运行期司进行漏洞修补和升级也不是一件容易的事情．它甚至可能影响到原有业务的Ｊ下常运行。然而一旦ｗｅｂ应用被恶意利用，造成的后果也是难以估计的，轻者可能对用户和ｗ曲应用拥有者没有任何影响，重者也可能使得用户权益受到极大损害从而导致Ⅵ，ｅｂ应用关门倒闭。因此，如何发现脖藏于Ⅵ曲应用中的漏洞对于开发者而言是保证产品质量和信誉至关重要的问题，而对于ｗｅｂ应用产品运营商而言，也是保证自身服务质量和声誉亟需面对的问题。特别是在应用开发阶段还没有交付使用之前，就将潜在的ｗｅｂ应用漏洞扫描出来，并且进行修复，这种措施可以节省很大～部分用于ｗ曲应用维护的成本，并且极大的降低ｗｅｂ应用的潜在风险，从而提高整体的ｗ曲应用抗攻击能力。２ｗｅｂ应用漏洞扫描研究的现状及意义近几年来，国内外出现了很多ｗｅｂ应用漏洞扫描软件ｍ】，国外的如ＩＢＭ．ＨｐｗｅｂＩｎｓ口ｅｃｔ．ＡｃｕｎｅｔｉｘｗｅｂｖｕｌｎｅｒａｂｉｌｉｔｙｓｃａｎｎｅＬＮ．ｓｋ出ｔｈ以及Ｎｅｔ５ｐａｒｋｅｒ等。国内也有启明星辰和绿盟等公司的漏洞扫描软件。相对而言，国外的ｗｅｂ应用漏洞扫描软件更为成熟，其扫描功能强大，在易用性和扫描结果报衷生成等方面做的都比较完善，而国内专门针对ｗｅｂ应用漏洞进行扫描的技术还没有达到成熟的状态。Ａ１ＤＤｓｃａｎ【２０训：用于在ｗｃｂ应用程序的整个开发周期提供安全扫描测试。它可以扫描许多常见的漏洞如跨站点脚本攻击、ＨＴＴＰ响应拆分漏洞、参数篡改、隐式字段处理、后门，调试选项、缓冲区溢出等，并且提供有关漏洞的详细信息，如产生原因以及修补漏洞的方法等口雌“。ｗｅｂＩｎｓ口ｅｃｔ㈣：它可以扫描ｗｅｂ应用中常见的漏洞，除此之外．它会尝试一些常见的ｗｅｂ攻击。另外它可咀用于检查一个ｗｅｂ服务器是否正确配置。ｃ血毗ｌｘｗｅｂ、～１ｎｅｒａｂｉｌｈｓｃａｎｎｅｒ【”】：它可以用于检查ｗｅｂ应用程序中常见的漏洞。同时它拥有一个用户友好的操作界面，并且可以生成规范的ｗｅｂ站点安全审核报告。№ｃｓ口ａｆｋｅ一４１】：它分为免费版和收费版。两个版本都可以用于扫描常见的、ｖｅｂ漏洞，但是收费版提供更多的功能，如ｓＱＬ盲注扫描，扫描结果保存等。国外的商业ｗｅｂ应用漏洞扫描软件价格昂贵并且源代码不公开，中小型企事业单位并不愿支付如此巨额的费用购买该类软件来使用，并且用户无法根据自己的需要添加扫描规则。随着ｗｅｂ应用技术的日益更新，新的ｗｅｂ应用攻击手段和方式不断涌现这使得已有的商业ｗｅｂ应用扫描软件也存在一定的局限【生。硕士学位论文第一章绪论相比较而言，国内同类的商业软件在存在相同问题的同时，功能方面还比较单一，并且性能和可操作性方面较国外的扫描软件还有一定差距。国内外也有一些免费的开源软件如ｐａｍｓ删．Ｎｉｋｔｏ㈣等．但是这些软件在技术和功能上都有一定的局限性，如不能支持并发的扫描，不能检查由ｊａｖａｓｃ＾ｐｔ脚本或者ｎａｓｈ对象产生的链接，对于隐藏在需要验证的表单后面的网页也不能很好的检测，用于检测ｗｅｂ应用漏洞的攻击向量过于简单，用于检测的方式也比较单一等问题，因此它们并不能用来提供专业化的检测服务。因此，研究能够提供专业化检测服务的ｗｅｂ应用漏洞扫描技术并且基于该技术设计和实现一个实用的ｗｅｂ应用漏洞扫描软件具有重要的理论意义和实际应用价值，并且也吸引了越来越多的研究组织和人员的注意。３研究目的与内容本文主要针对ｗ曲应用扫描的关键技术进行研究，重点研究了扫描信息获取技术和ｗｅｂ应用漏洞分析检测技术，在理论研究的基础上，设计实现了一个可以获取到目标ｗｅｂ应用所有扫描信息并且对其进行漏洞分析检测的扫描工具。通过测试验证了漏洞分析检测技术的实用性。研究的主要内容包括：（】）深入研究ｗｃｂ应用漏洞产生的原因以及常见的ｗｅｂ应用漏洞攻击技术和相关检测方法。（２）深入研究ｗｃｂ应用扫描中的网页抓取和分析技术，对网页抓取和分析的特点进行详细分析和研究，制定灵活完备的抓取和分析策略；结台目前广泛使用的ｃｕｒｌｉｂ库，设计一种支持代理和多种协议的ＨＴＴＰ网页抓取和分析的客户端。深入研究Ｈ丁ＴＰ通信协议，并将其应用于ｗｃｂ应用漏洞检测中。（３）深入研究各种ｗ曲应用漏洞检测技术，分析比较各种检测技术的实现原理，并结台ｗｅｂ应用平台的实际需要设计实现一种易于扩展的漏洞检铡机制，同时－设计并实现主流ｗｅｂ应用漏洞的检测插件．例如ｓＱＬ注入漏洞检测、ｓＯＬ盲目注入漏洞检测、ｘｓｓ攻击漏洞、路径遍历漏洞以及各份文件检测漏洞等漏洞检测插件一在此基础上设计并实现一个自动化的漏洞分析器。研究并设计编码，解码、ＨＴ丁Ｐ请求发送与分析、ＨＴＴＰ代理等辅助ｗ曲应用漏洞检测工具。１４论文章节安排本论文共分为六章，其中第一章为论文绪论，第二章至第五章为论文主体第六章为论文结束语。第一章介绍了ｗ曲应用漏洞扫描的的研究背景、研究现状和研究意义；硕士学位论文第一章绪论第二章主要讨论了ｗｅｂ应用漏洞产生的原因以及常见威胁，提出了一个综合的ｗｅｂ应用漏洞检测方案，并针对如何设计一个ｗｅｂ应用漏洞扫描软件提出了一个软件框架：第三章主要研究了扫描信息获取技术，主要包含ＤＯＭ文档元素分析和ＨＴＴＰ通信协议信息分析。通过使用正则表达式对网页元素信息进行了分析和提取，同时研究了交互式网页信息提取问题和ＨＴＴＰ协议信息获取问题，在此基础上研究并设计了扫描信息获取模块：第四章分析了ｗｅｂ应用漏洞检测技术，并结合漏洞检测技术本身不断进化升级的特点，设计了一个易于扩展的漏洞检查机制，并且实现了主流ｗｅｂ应用漏洞检测插件如ｓＱｌ注入漏洞、ｓＱＬ盲目注入漏洞、ｘｓｓ攻击漏洞、各份文件检测漏洞．用来进行ｗｅｂ应用漏洞检测：本章最后研究了用于辅助ｗｅｂ检测的工具，如定制ＨＴｌＰ请求、编码，解码、Ｈｎ甲代理等工具。第五章介绍了ｗｅｂ应用漏洞扫描软件的详细设计，并对扫描软件的功能进行了测试，对测试结果进行了讨论：第六章对本文研究工作进行了总结，指出了工作中存在的一些问题，并展望了进一步的工作计划。硕士学位论文第二章ｗｃｂ应用漏洞产生的原因以及检测方法第二章ｗｅｂ应用安全漏洞综述及漏洞检测方案的提出本章主要介绍ｗｅｂ应用漏洞产生的原因，分类以及检测方法，首先对ｗ曲应用安全产生的原因进行了分析，之后介绍了、№ｂ应用漏洞的分类，最后介绍了常见啊－ｅｂ应用漏洞的特点和检测方法，并结合服务器平台安全，提出了一种实用的ｗ曲应用漏洞检测方案一２１ｗｅｂ应用漏洞产生的原因ＯⅥ，ＡｓＰＩ３１（０ｐｅｎｕ，ｅｂＡｐｐｌｉｃａ６０ｎｓｅｃ嘶ｔｙＰｒｏｊｅｃｔ）是一个长期从事于发现和解决、№ｂ应用安全问题的全球性开源组织，它经常发布的是“ｗ曲应用的十大安全隐患【３”，这个项目总结了目前ｗ曲应用安全最为严重的十种攻击．并且按照攻击产生的严重性进行了排序。该项目主要是为了发掘业界威胁最为严重的Ⅵ，ｅｂ应用安全隐患，从而加强企业对ｗ曲应用成胁的防范意识。该项目最新版本的报告是２０１０版吼根据２００４年，２００７年，２０１０年的十大安全隐患报告可以看出，ｗｅｂ应用安全漏洞所占的比例呈逐渐上升的趋势。下表是２０１０年十大ｗ曲应用漏洞及其特点：表２—１ｗｅｂ哥仝十大隐惠的特最下面本节对上述ｏｗＡｓＰ提到的ｗｅｂ应用漏洞产生的原因进行介绍；（１）注入攻击【３。４】：注入攻击：该类漏洞包括ｓＯＬ注入．Ｏｓｓｈｅｌｌ，ＬＤＡＰ，ｘｐａｔｈｔＨｌｂｅｍ砒ｅ等等，它们主要是由于应用程序没有对输入数据的合法性进行合理的检查就直接提交给了数据库或者是操作系统进行处理，而攻击者可以将精．！！：壁堡堡苎笙三童坠！壁！塑塑兰皇堕堕！！墨堡型查堕心构造的包含恶意指令的数据向应用程序提交，从而引发攻击。该类攻击的危害性极为严重，通过执行ｓＱＬ指令或者操作系统指令，可以窃取或者篡改数据库和操作系统的信息，甚至可以利用操纵系统级的ＡＨ来提升攻击的权限，从而获得服务器的控制权。（２）跨站点脚本攻击ｍ４】（ｃｆｏｓｓｓｌｔｅｓｃ打ｐｔｉｎｇ）：与注入攻击类似的是造成ｘｓｓ攻击的原因依然是应用程序没有对输入的数据进行合理的检查和转义就直接在响应中包含了。因此浏览器在展示该页面时，嵌入于其中的脚本代码就被执行了，恶意代码将用户的会话标识传送给远端处于监听状态的攻击者，攻击者在获取到受害用户的会话标识之后就可以利用它来代表受害用户对相应的Ⅵ，ｅｂ应用进行操作了。ｘｓｓ可以分为反射型、保存型和基于ＤＯＭ型三种，对应的检测方法也不尽相同，但是总体的思想是一致的，就是在响应中检查是否有提交的特殊字符串。与注入攻击不同的是，注入攻击的目标是ｗｅｂ应用服务器和数据，而ｘｓｓ攻击的对象是ｗｅｂ应用的用户，攻击者通过获取受害者的会话标识来窃取其用户信息。（３）遭破坏的认证和会话管理ｐ创：验证机制和会话管理是用来帮助ｗｅｂ应用程序从大量不同的ＨＴＴＰ请求中确定特定的用户，该特定用户拥有不同于普通用户的权限，以这种方式来达到防御未授权用户访问的目的。然而ｗｅｂ应用程序中验证机制和会话管理存在的缺陷将使得攻击者可以绕过这一防御机制．从而获取原本不属于他的应用程序权限。这种漏洞经常出现在注销，密码管理，超时，记住我，密码问题，账号更新等实用功能中。（４）不安全的对象直接引用‘３２４】：这种漏洞产生的原因是ｗｅｂ应用程序在产生网页的时候使用了对象真实的名字或者关键字却没有正确地检查用户的访问权限。一个已经授权的用户通过手动更改访问时的关键字或者名字，从而可以访问到原本并没有得到授权的对象。这种漏洞可以危害到所有可以被访问时关键字和名字所引用的数据。（５）跨站请求伪造口２４１：它是指强迫受害者的浏览器浏览器向一个易受攻击的ｗｅｂ应用程序发送请求，最后达到攻击者所需要的操作行为。它一般分为站内和站外两种类型。这种攻击利用了ｗｅｂ应用程序特定行为的细节都可以被攻击者所预测。由于浏览器会自动发送会话ｃｏｏｋｉｅ，攻击者可以创建一个恶意网页，并利用这个网页来产生特定伪造的请求．而这种请求很难和正常的用户请求进行区别，因此一旦用户在此时发送了正常的请求，它的会话ｃＯＯＫＩＥ也会被发送到服务端，ｗ曲服务器将无法区分出伪造请求，从而执行伪造请求的内容。（６）不安全的配置【３２４】：这种漏洞可咀发生在ｗｅｂ应用服务器上的任一级别，例如操作系统，应用程序．ｗｅｂ应用服务器等。表现在ｗ曲应用服务器没堡主堂垡丝兰笙三雯堕！生！塑塑兰生塑堕！！墨垫１９立墨有被正确地进行安全设置，操作系统没有打上合适的补丁，应用程序留有没用的文件，没有被正确保护的目录．使用了默认的账户，开启了没用上的服务等。（７）不安全的加密存储ｐ斟】：这种漏洞源自于需要加密的信息没有被加密，例如２０１１年ｃｓＤＮ用户信息数据库泄密事件。或者使用的加密算法比较脆弱，从而容易被破解出加密的原始信息，或者使用来加密的密钥存放在一个不安全的地方，从而被攻击者获取或者使用了未加入盐值的ｈａｓｈ算法ａ（８）ｕＲＬ访问失败【３圳：类似于漏洞不安全的对象直接引用，这种漏洞产生于对原本应该私有和受保护的页面的访问没有进行正确的身份验证。这些页面的访问是通过系统的配置来确定的，但是系统却没有被正确的配置，在这种情况下攻击者通常只要请求该页面，就可以对其进行访问。（９）无效的传输层保护【３２４】：这种漏洞源自于、ｖｅｂ应用程序对网络传输的用户敏感数据没有进行加密（例如使用明文传输用户认证的用户名和密码），或者在认证的时候采用了加密的传输ｓｓＬ，ｒＬｓ，却使用了过期的证书和不正确的配置。（１０）重定向攻击【３】：这类漏洞源自于应用程序提取用户可控制的输入，并且使用这个数据执行一个重定向，指示用户的浏览器访问一个不同于用户请求的ｕＲＬ。由于用户访问的是一个他信任的网站链接，但是被重定向到一个攻击者精心制作的假冒网站中，攻击者可以利用这类漏洞进行钓鱼攻击或者让用户访问恶意页面。２２ｗｅｂ应用漏洞检测的方法以下是几类在自动聃铀应用漏洞扫描软件中可以实现的漏洞检测方法：（１）ｓ０Ｌ注入漏洞的捡测【４＂８】：ｓＱＬ注入漏洞根据其向攻击者展现的漏洞信息细节的多少可以分为普通ｓＱＬ注入漏洞和ｓＱＬ盲目注入漏洞两类。普通ｓＱＬ注入检测：因为单引号是ｓＯＬ查询语句中标记字符串边界操作符与转义字符，它作为字符串边界操作符时需要成对出现，通过在ＧＥＴ请求或者ＰＯｓＴ请求中的参数中拼接单引号。如果原ｗｅｂ应用简单的将请求中的参数传递给数据库并且构造查询时没有对输入参数作类型判断，那么插入的单引号就会破坏原有的查询语句结构．触发一个查询语法错误，如果Ⅵ，ｅｂ眼务器的配置中没有屏蔽产生错误的信息的话就会将此错误信息展示给攻击者。攻击者可以根据展示的攻击信息得到数据表的相关信息，进而一步步获得数据库的相关信息甚至是操作系统的控制权，ｓＯＬ盲目注入漏洞检测：当ｗｅｂ应用服务器做了正确了配置，即使产生了硕士学位论文第二章、№ｂ应用漏洞产生的原因以及检捌方法查询错误，ｗｅｂ应用服务器也有一个通用的出错页面展示给客户而不会暴露错误的细节．在这种情况下如果ｗｃｂ应用依然没有正确的处理用户输入的信息，那么这种情况下还是存在ｓＱＬ盲目注入漏洞。ｓＱＬ盲目注入漏洞的硅险性同普通ｓＱＬ注入漏洞一样，只不过是它屏蔽了错误的细节，给攻击者进一步获取信息增加了难度。但是只要这种漏洞存在，攻击者通过盲目二分猜测，也可以将数据信息以每次一个字符的方式读出来。经典的ｓ０Ｌ盲目注入工具Ａｂｓｉｎｔｈｅ采用二分猜测的方法，由于ｕ１１ｉｃｏｄｅ字符是１６位的．因此每次最多进行１６次比较就可以输出一个Ｊ下确的字符信息。针对ｓＯＬ盲目注入有基于页面内容的盲目ｓＱＬ注入漏洞检测方法和基于服务器响应延时的ｓＯＬ盲目注入漏洞检测方法：基于页面内容的盲目ｓＯＬ检测：这种检测方式首先要让程序知道一个查询条件永真的返回页面的特征并将之视为ＴＲｕＥ。然后让程序知道一个查询条件永假的返回页面的特征并将之视为队ＬｓＥ。然后通过插入转义符触发一个通用出错页面的特征，只要三者的特征不一致，便可认定目标页面存在ｓＱＬ注八漏洞。具体示例如下：针对数字型参数的检测方法：假设有链接ＨＴＴＰ：／／Ⅻｘ第一步：征值。第二步：ＨＴＴＰ：，／ｘＸｘｘｘｘｘｘ“ａｂｃｘｘｘｘｘｘ，ａｂｃａ５ｐ。ｐＩＹＹ正常访问ＨＴＴＰ：／／ｘ）【）ｃｘｘｘｘｘｘ，ａｂｃａｓｐ？ｐ＝ＹＹ将得到的响应流取特ａｓｐ？ｐ＝ＹＹ’（附加一个单引号），此时ａｋＡｓＰ中的ｓｏＬ语句变成了耐ｅｃｔ＋矗鲫表名ｗｈ眦字段＝ＹＹ’，ａｂｃａｓｐ运行时产生了错误，这个时候由于服务器屏蔽了错误信息，用户浏览器将转向到一个出错页面：第三步：ＨＴＴＰ：Ⅳｘ麒ｘｘｘｘｘ“ａｂｃａｓｐ？ｐ＝ＹＹｏｒｌ＝１－－．ａｂｃｘｘｘ，ａｂｃａｓｐ运行正常，对得到的响应流取ＭＤ５值而且与访问ＨＴ丁Ｐ：，／ｘｘｘＭＤ５值相同；ｘｘｘａｓｐ？ｐ＝ＹＹ时取得的第四步：ＨｒｒＰ：Ⅳ“ｘｘｘｘｘｘｘ／ａｂｃ船ｐ？ｐ＝ＹＹａｎｄｌ＝２一，ａｂｃａｓｐ运行正常，将响应流取ＭＤ５值并且与步骤ｂ和步骤ｃ中的ＭＤ５值相比较，三者的值不一致：如果以上四步全面满足，那么可以判定ａｂｃａｓｐ中存在ｓＱＬ盲目注入漏洞。针对字符型参数的检测方法与针对数字型参数的检测方法类似，不同的是考虑到ｓＱＬ语句中。字符型参数都应该被单引号包围，因此串接的条件式响应的改为ｏｒ’ｒ＝‘１‘一和ａｎｄ‘１－＝’２～影响这个检测成功的因素之一是在第三步中构造的请求中ｗｅｂ应用服务器没有数据记录返回，那么第三步和第四步响应流的特征值将会一致，因此，在这种情况下，即使原来的ｗ曲应用存在ｓＱＬ盲目注入漏洞，在此次检测中也检查硕士学位论文第二章Ⅵ铀应用漏洞产生的原因咀及检测方法不出来。基于ｗｅｂ服务器响应延时的盲目ｓＯＬ注入检测：这种方式是利用数据库中提供的延时函数，并计算正常请求和延时请求两次所需的时间差，如果大于或等于所设定的延时时间，那么可以确定，该页面存在注入漏洞。这种方式的优点是，判定的正确率比较高，缺点是速度太慢。ｓＯＬ盲目注入漏洞的检测方法同样可用于普通ｓＱＬ注入漏洞的检测，因为它对漏洞所展示的详细信息依赖更少。（２）系统命令注入漏洞的检测：通常可以使用山ｇ命令让服务器在一段时期内检测它的回环接口，从而触发时间延迟。ｗｉｎｄｏｗｓ和ｕＮⅨ平台在处理ｐｌｎｇ命令和命令分隔符方面存在一些细微的差别。如果用户被插入到系统命令中的输入没有被过滤，那么使用以下命令可以引起目标服务器３０秒钟的延迟。ｐｉｎｇ—Ｉ３０１２７０．ＯＩ；ｘ０ｐｉ“ｇ—ｎ３０１２７０Ｏ１＆如果检测到延迟，那么可以通过改变延迟的时间来进行确认命令注入漏洞是否存在。重复几次测试过程以排除延迟不是网络延时或者其它异常造成的。（３）跨站点脚本攻击漏洞口川１检测方法检测反射型和保存型的跨站点脚本攻击漏洞的方法比较类似。检测步骤如下：第一步：选择一个特定的字符串并且保证该字符串不曾出现在应用程序的任何地方，为了让其不被针对ｘｓｓ的过滤所影响，让这个字符串仅包含字母字符。第二步：将这个字符串向应用程序提交，将它作为每个页面的每一个参数，且每次只针对一个参数。第三步：检查应用程序的响应，看其中是否出现这同一个字符串。与反射型跨站点脚本攻击漏洞检测方式稍微不同的是．针对保存型跨站点脚本攻击漏洞的检测需要对页面的每一个表单输入都要提交参数。针对基于ＤＯＭ的跨站点脚本漏洞的检测需要审查检查客户端所有的Ｊａｖａｓｃ＾ｐｔ，看其中是否使用了任何可能会导致漏洞的ＤＯＭ属性。（４）路径遍历漏洞【３一Ｊ：当ｗｅｂ应用程序使用用户可控制的数据以危险的方式访问位于应用程序服务器或其它后端文件系统中的文件和目录，就会出现路径遍历漏洞。通过提交专门设计的输入，攻击者可以在被访问的文件系统中读取或者写入任意内容。从而导致攻击者能够获取到服务器的敏感信息，最终在服务器上执行任意命令＝这种漏洞一般发生在ｗｅｂ应用程序提供的允许用户上传或者下载文件的功能上，除了这种明显的目标功能外。还有其他各种行为表示应用程序需要和文件系统进行交互的地方也可能存在这种漏洞。检测方法：如果程序检测到用户提交的参数被附加到应用程序预先设定的目硕士学位论文第二章ｗｅｂ应用漏洞产生的原因咀及检测方法录之后，那么插入一个子目录和一个遍历序列，修改参数的值。例如检测到用户提交的参数ＡＡｔｘｔ被作为参数ＤｅｓｔＦｉｌｅ＝６ｌｅ／ＡＡｔｘｔ传递给ｗｅｂ应用程序，那么可以尝试提交ＤｅｓｔＦｉｌｅ２ｍｃ／ｔｅｍＤ，／从戗ｔ如果这两种情况下应用程序的行为完全相同，那就表示它易于受到路径遍历漏洞的攻击。有些程序对用户的输入做了一定程度的过滤和，那么在这种情况下，通过使用字符编码、换行符（％Ｏａ）和空字符（％ｏｏ），可以避开丌发者做的特定文件过滤及特定文件类型过滤。（５）不安全的配置口创】：在ｗｅｂ应用漏洞自动扫描软件中易于实现的是如下几类安全配置检查：ａ）、常见的ｗｅｂ服务器如ＩＩｓ，ｔｏｍｃ址，Ａｐａｃｈｅ等都有自己的默认页面，这些页面在用户部署正式的应用的时候应该被移除。通过构造相应的ｕＲＬ请求目标页面，如果返回状态码为正常（２００），则表示目标服务器存在此类漏洞。ｂ）、常见的Ⅵ铀服务器（ＩＩｓ，ｔｏｍｃ乱，Ａｐａｃｈｅ等）都应该配置成屏蔽出错信息的模式。ｃ）、常见的ｗ曲服务器都应该配置成不允许调试的模式。ｄ１、常见的ｗｅｂ服务器都应该修改默认的请求头信息，以防止服务器版本和使用的技术的信息被泄露。上述配置漏洞在提交给服务器的请求后得到的响应流中通过匹配相关的关键字就可以得到确认。（６）备份文件检测出】：开发人员或者维护人员在修改部分代码的时候没有将原先代码各份到专门的备份文件目录，而只是简单的留在了当前目录。为了省事，一般而言备份文件的文件名就是当前目录名加上压缩文件的扩展名。这些备份的文件中可能包含程序的逻辑代码，甚至是关键的配置信息虽然用户在浏览网站的时候并不能直接访问到这些备份文件，但是通过构造相应目录串接备份文件名的ｕＲＬ可以请求这些文件。通过服务器的返回码是产生错误，还是正常响应可以判定是否存在相应的备份文件。２３ｗｅｂ应用漏洞检测方案研究１２３ｗｅｂ应用漏洞检测方案从前面ｗｅｂ应用产生的原因及检测方法上可咀看出许多Ⅵ铀应用漏洞并不适台采用纯粹的自动化扫描工具来进行。通过辅以手动排查方式和对代码进行审硕士学位论文第二章Ⅵ＇ｅｂ应用漏洞产生的原因以及检测方法查的方式可以更高效的确定目标ｗｃｂ应用漏洞是否存在。例如针对ｕＲＬ访问失败类漏洞，通过手动操作来进行排查要比使用自动化ｗｅｂ应用漏洞扫描器来进行检查要有用的多，因为自动化扫描工具并不能从大量的网站链接中区分哪一个链接是重要的，但是检测者一眼就可以分辨那个链接指向了一个重要页面。然而，自动化的Ⅶ铀应用漏洞扫描工具“２，”１仍然在漏洞检测方面扮演者很重要的角色，设计良好的自动化工具可以协助漏洞检测者执行大量重复细致的检测工作．如构造一系列变异的附带攻击载荷的ＨＴＴＰ请求，对目标网站每一个页面的输入参数进行提交，并且检测响应中的关键字，这些工作如果仅靠人力手工来处理的话，将是不可想象的繁复，需要消耗大量时间与精力。所以设计良好的自动化扫描工具除了拥有强大的自动扫描漏洞的能力之外也拥有强大的手动定制化检测方法的能力，这些能力包括提供对指定页面链接的抓取，对指定请求内容进行手动修改后再提交，对指定参数进行修改或者并且以指定的编码形式提交等。为了达到对指定ｗｅｂ应用进行完整漏洞扫描的目标，可以从以下几个步骤对目标ｗｅｂ应用进行漏洞检测：（１）了解具体的ｗ曲服务器平台和ｗｅｂ应用程序，对、№ｂ服务器平台可能存在的漏洞进行估计，同时了解ｗｅｂ应用程序的主要业务和应用逻辑。（２）使用Ⅵ－ｅｂ应用漏洞扫描工具对目标ｗｃｂ应用程序进行漏洞检测。第一步的工作可以帮助确定扫描器使用合理的扫描策略来进行扫描，从而提高扫描的效率。当然设计良好的扫描器会自动探索目标ｗ曲应用的相关信息，并且优化扫描策略。在扫描的过程中将尽量完整抓取目标网站的所有资源链接，并对所有页面的输入参数进行测试，根据对响应特征的分析来确定相应的ｗ曲应用漏洞是否存在。（３）当ｗｅｂ应用漏洞扫描工具在完成对指定ｗｅｂ应用的安全扫描之后，将生成一个详细的扫描报告。由于ｗｅｂ应用自身的复杂性，不能排除扫描结果存在有误判的可能性，因此扫描人员需要根据扫描结果中的漏洞信息对漏洞进行确认。（４）扫描人员利用扫描工具定制化检测方法的能力，针对目标Ⅵ，ｅｂ应用定制相应的检测策略并进行仔细的测试，以排除那些扫描器不适用的ｗｅｂ应用漏洞和由于目标ｗ曲应用复杂的业务逻辑而不易被检测的漏洞存在的可能性。２３２综合性的漏洞检测方案要确保、ｖｅｂ应用的安全，从、№ｂ应用本身出发进行的检测工作和防护【６１２１仅仅只能降低ｗｅｂ应用本身被攻击的风险。但是ｗ曲应用本身就部署在某一个平台中（如；ＩＩｓ，Ａｐａｃｈｅ，Ｔｏｒｎｃａｔ等），而这个平台又处于一个操作系统下硕士学位论文第二章Ⅵ协应用漏洞产生的原因以及检测方法（ｗｉｎｄｏｗｓ，Ｌｉｎｕｘ，ｓｏｌａｒｉｓ等），这个系统所在的主机又位于一个网络之中．而这个网络中赊了该主机之外还有路由器，交换机，防火墙和其他主机等设各。这些设备的安全性彼此是相互关联的，它们之间的任何一个存在着安全隐患都会提高最终的ｗｅｂ应用系统受到攻击的风险。因此，我们提出一种综合的漏洞检测方案，它从一个立体的层面保障目标ｗ曲应用的安全性。（１）对目标ｗｅｂ应用服务嚣所在的物理环境进行审查。这一步将排除目标ｗｅｂ服务器物理环境可能存在的隐患，比如机房堆砌杂物，放置易燃易爆物品，有不明网线或者通信设备接入等。（２）对目标ｗｅｂ应用服务器所在的网络环境进行审查。这一步的目标是保障目标、№ｂ服务器基本的网络环境或者网络防护设备处于一种有效工作的状态下，比如防火墙和路由器的配置是否处于一种合理状态。（３）对目标ｗｅｂ应用服务器操作系统环境进行审查。这一步的目标是保障目标ｗ曲服务器的主机安全，比如目标操作系统关闭了所有没有必要使用的服务，数据库处于一种安全的配置下，关键文件和目录的的访问权限设置正确，没有多余的应用程序被安装，所安装的应用程序都已经打了虽新的升级补丁。（４）对目标ｗｅｂ应用进行审查。这一步将对目标、Ⅳｅｂ应用本身的安全｜生进行检查。将使用自动化的ｗｅｂ应用漏洞扫描工具对目标ｗｅｂ应用进行扫描，对于不适合使用扫描工具进行检测的漏洞，扫描人员使用辅助工具进行定制化的漏洞检测，同时验证自动化漏洞扫描软件产生的结果。（５）除了以上各方位的检测之外，不能忽视的还有对于ｗ曲应用的日常管理制度和ｗｅｂ应用管理员自身的安全意识。一般防御良好的系统，其最脆弱的地方往往在于使用的人。攻击者一般会利用社会工程学的方法渗透到目标系统的组织内部，从而收集到足够的信息。因此，虽后还要对ｗｅｂ应用安全管理制度进行审查，并督促其建立完善解决前面发现的漏洞与风险的机制。２４ｗｅｂ应用安全漏洞扫描软件的结构设计在本文中，我们针对ｗｅｂ应用本身的安全检测层面设计实现了一个ｗ曲应用漏洞扫描软件，其整体框图如图２—１所示。该框图主要分为基础功能模块层、扫描信息抓取模块、漏洞分析与检测模块、公共数据信息、报告生成模块这５部分。基础功能模块层向上层提供本软件运行所需的基础功能和服务，包括日志记录、线程池、Ｈ订Ｐ通信、网页信息模型和实用函数，其中实用函数根据系统平台的不同而不同，包含网页编码与解码以及对系统ＡＰＩ封装的函数等。硕士学位论文第二章Ⅵ曲应用漏洞产生的原因以及检测方法报告生成模块ＯｗＡｓＰ标准ＷＡＳＣ标准ｓＡＮｓ标准漏洞分析与缝删模块公共数据信息分析嚣基本１分析；爹９棱心函数己处理对象队列扫描信息抓取模块术处理对象队列抓取横块基本抓取模块用户配置配置核心函数扫描器状态数据基础功能模块培日志记录蛙程池ＨＴＴＰ遥信坩页模裂实用函数图２一１ｗｅｂ应用漏洞扫描软件框图扫描信息抓取模块负责抓取到目标、Ⅳｅｂ应用的网页信息和协议信息，它包含基本配置、用户配置信息及核心函数，其中核心函数用于按照所加载的配置信息执行扫描信息的抓取任务。漏洞分析与检测模块负责对目标ｗｅｂ应用构造漏洞测试用例．并且发送测试请求，它包含分析模块的基本配置、分析模块的用户配置及核心函数，其中核心函数用于构造测试用例并且判断目标ｗｅｂ应用是否存在相应的漏洞。在运行的时候该模块先读取配置文件，然后加载用于漏洞检测的插件，在一个线程池中对抓取模块中产生的网页节点信息进行漏洞检测。针对每一种漏洞类型（ｓＯＬ注入，ｘｓｓ攻击，路径遍历．备份文件检测等）构造用于检测的ＨＴＴＰ请求，并且分析响应的特征，以确定相应漏洞是否存在。公共数据信息包含已处理对象队列、未处理对象队列及扫描器状态数据这三部分。其中已处理对象队列和未处理对象队列用于扫描信息抓取和分析的过程中，以保证扫描信息获取和漏洞分析的完整性和不重复性，扫描器状态数据用于记录扫描器运行中的统计信息，同时记录当前扫描器执行的状态，以便暂停、重新开始扫描等操作的执行，并且在用户保存当前扫描信息的时候将公共数据序列化到存储文件之中，以便下次扫描时加载使用。报告生成模块将最终扫描器产生的结果以一定报告的格式展现给用户，根据用户所需要的形式以ＨＴＭＬ、ＤＯｃ或者ＰＤＦ的形式展现出来，并且在展现的时候需要考虑到兼容现有的权威的漏洞标准比如０ｗＡｓＰＴＯＰ１０、ⅥＡｓｃ威胁分类、ｓＡＮｓＴＯＰ２０等，这种方式的兼容使得用户能够清楚地了解自己ｗ曲应用在同行业中的安全状况。由于篇幅原因，本文将重点阐述在设计Ⅵ，ｅｂ应用漏洞扫描软件时两类关键性问题——ｗｅｂ应用漏洞扫描信息获取技术和ｗ曲应用编洞分析与检测关键技硕士学位论文第二章Ⅵ铀应用漏洞产生的原因咀及检测方法术研究与设计，并在理论研究的基础上介绍相关技术的实现２５本章小结本章主要针对ｗ曲应用漏洞相关的关键技术进行了研究，首先介绍了现今最为常见和威胁最严重的几类ｗｅｂ漏洞的起因和检测方法，之后总结了ｗｅｂ应用漏洞产生的原因，最后结合ｗｅｂ应用漏洞产生的原因、特点以及其所处于的具体环境，提出了一种实用ｗ曲应用漏洞检测方案硕士学位论文第三章Ⅶ曲漏洞扫描网页抓取和分析技术研究与实现第三章ｗｅｂ漏洞扫描信息获取关键技术研究与设计Ⅶ铀漏洞扫描信息包括页面信息和ＨＴＴＰ协议交互信息两类。其中页面信息又包含ＨＴＭＬ文本．Ｊａｖａｓｃ“ｐｔ脚本，ｃｓｓ样式文件，Ｆｌ础、Ａｐｐｌｅｔ等对象。这些信息都会由浏览器进行渲染与解析，最终以内容丰富的网页形式展现在用户面前。而这些信息又是我们进行漏洞检测的基础。Ｈ丌Ｐ协议交互信息主要指用于向目标ｗｅｂ服务器发送的ＨＴＴＰ请求信息，以及服务器针对该请求反馈的响应信息。通过定制ＨＴＴＰ请求信息，我们可以探测目标ｗｅｂ应用存在相应漏洞，而通过请求反馈的响应信息，我们可以确定其是否存在相应漏洞。本章将对如何获取至Ⅱ用于ｗｅｂ漏洞检测的原始信息（页面信息）和判定信息（ＨＴＴＰ协议交互信息）做深入的研究。３１ｗｅｂ漏洞扫描中网页抓取与分析的目标网页抓取技术通常被实现为一个网络爬虫也称为网络机器人（Ｒｏｂｏｔｓ）或者蜘蛛程序（ｓｐｌｄｅｒ），它被广泛地使用在搜索引擎系统中。它作为搜索引擎的重要组成部分，通过不断的抓取网页，尽可能多和快的给索引部分输送网页，从而实现强大的数据支持。在互联网中，网页之间的链接关系是无规律的，它们的关系错综复杂，如果一个爬虫从一个起点开始爬行，那么它将会遇到无数多的分支，由此生成无数条爬行路径，因此如果爬虫没有准则地爬行，将会陷于海量数据的之中，甚至都没有爬行完的可能。因此对于搜索引擎而言，在提高爬行速度的同时．也要提高其抓取网页的质量。网络爬虫对搜索引擎的查全，查准都有影响．决定了搜索引擎数据容量的大小，而且网络爬虫的好坏直接影响搜索结果页中的死链接的个数。另外识别垃圾网页，避免抓取重复网页，也是高性能爬虫的设计目标。网页抓取技术在搜索引擎系统中已经有了很好的实现，因此通过对比搜索引擎中使用的网页抓取技术，可咀给我们研究ｗ曲应用漏洞扫描软件中的网页抓取技术提供很好的借鉴意义。ｗｅｂ应用漏洞扫描软件中使用的网页抓取与分析的目标如下：（１）网站页面及其资源的完整性扫描。与搜索引擎系统不同，在ｗｅｂ应用漏洞扫描软件中，抓取网页的质量并不是需要考虑的目标．而如何才能全面完整地扫描到整个网站的页面及其资源才是最重要的目标。威胁往往存在于人们所容易疏忽的地方，而那些一般访问不到的边边角角却通常是隐含ｗ曲应用漏洞的地方，而根据短扳原理，不管这个系统在其他方面的安全做的如何的好，一旦它隐藏着威胁，那么它就被认为是不安全的。（２）指定目标范围的抓取。ｗｅｂ应用漏洞扫描软件针对的通常是一个或者指定的几个目标ｗｅｂ应用，因此它不像在数据量快速膨胀的互联网中抓取网页的搜索引擎那样需硕士学位论文第三章ｕ妯漏洞扫描网页抓取和分析技术研究与实现要处理海量数据。扫描软件的抓取范围是由用户指定的几个种子ｕＲＬ或者ＩＰ地址所决定，与该ＩＰ地址不同的网页．或者域名与这些ｕＲＬ不同的网址都不在抓取范围之内。因此ｗｅｂ扫描软件可以抓取并保存同目标ｗｅｂ应用详细的ＨＴＴＰ交互信息，用以进行详细的漏洞测试和漏洞重现过程，并且生成一份详实且具有说服力的漏洞检测报告。（３）更加关注网页的结构特征。搜索引擎系统中，网页内容的语义（与关键字的匹配程度）是其最关心的内容之一，而ｗｅｂ应用漏洞扫描软件更关注的是网页的结构特征。因此对于动态网页而言，搜索引擎更关注的如何全面地获取到将要显示于网页中的数据库中的内容，从而如何遍历存储于数据库中的信息是它关心的问题。而对于Ⅵ，ｅｂ应用漏洞扫描软件而言，它关注的提交给动态网页的参数类型和参数个数的不同从而可能导致的ｗｅｂ应用漏洞。（４）扫描信息获取的高效性。在对目标ｗｅｂ应用进行漏洞扫描的时候需要通过使用Ｈ兀Ｐ协议进行文件信息传输，而这种传输的过程具有一定的延时性，并且通常是同步阻塞完成的；由于目标ｗｅｂ应用服务器所处网络环境的不同，由网络延时带来的影响也不同。因此，为了能更有效率的进行扫描信息的抓取，可以采用多线程并发的方式来实现抓取的过程。也有部分扫描系统同搜索引擎一样采用分布式的信息获取方式，这类漏洞扫描系统由中心控制端进行扫描任务调度，并将任务分发给分布式扫描端进行执行。通常这类扫描系统可以充分利用硬件资源的优势同时执行一系列漏洞扫描任务。ｗｅｂ应用漏洞扫描软件与搜索引擎系统中使用的网页抓取技术的差异源自于应用的场景不同，然而由于其局部功能的相似性，它们在一些方面也存在许多共同点ａ３２页面抓取遍历策略的设计与选择在网页抓取技术中使用的策略［”１可以分为网页重要性度量，深度优先遍历策略，广度优先遍历策略，最佳优先遍历策略。这些策略各有特点（Ｉ）网页重要性度量在面对海量页面数据的时候，如何尽可能的先抓取重要性的网页，这就要求爬虫在抓取网页的时候遵守一定的网页抓取原则。网页重要性通常由链接欢迎度、链接重要度和平均链接深度这３个方面决定。ｌ、链接欢迎度１Ｂ（Ｐ），它可以通过反向链接的数目和质量来衡量。如果有很多网页指向一个页面，那表示其他网页对该页面的认可度就很高。另外，如果有很多重要性高的网页所指向它，那么它的重要性也越高ａ２、链接重要度ＩＬ（Ｐ）是一个关于ｕＲＬ字符串的函数，考察的是字符串本身，比如认为包含顶级域名（如ｃｏｍ或ｈｏｍｅ）的ｕＲＬ重要性高，以及层次较少的ｕＲＬ重要性高。３、平均链接深度ＩＤ（Ｐ），它表示网页离初始站点的距离．通常这个距离越短，表明该网页越容易被访问到，因此可以认为其重要性也越高。硕士学位论文第三章ｗ曲漏洞扫描网页抓取和分析技术研究与实现网页的重要性Ｉ（Ｐ）可以通过以上的两个量化值线性决定即：Ｉ（Ｐ）＝Ｑ＋１Ｂ（Ｐ）十Ｂ＋ＩＬ（Ｐ）（２）深度优先遍历策略深度优先遍历的策略是尽量向离初始ｕＲＬ远的地方进行抓取。在抓取并解析一个页面之后，访问该页面中第一个不重复的链接，并对该链接的响应进行分析。然后递归访问该响应的第一个不重复链接，直到满足退出条件。使用这个策略进行扫描时采用的是逐链接进行探索的方式，每次在找到新链接的时候将对新链接进行探索。在进行深度优先遍历的时候需要记录爬行过的总链接库和每次爬行的分支节点，通过这些已录的内容来避免重复地爬行节点。（３）广度优先遍历策略广度优先遍历策略是一种层次优先的遍历方法。与深度优先遍历策略不同的是，广度优先遍历策略在抓取并解析一个页面之后．要将该页面中的所有链接保存在一个队列结构中，直到该页面中所有的链接都被访问之后才开始进行下一层次的链接的访问。使用这个策略进行扫描时采用的逐页进行探索的方式，在继续下一个页面前需要先探索完上一个页面的所有链接。（４）最佳优先遍历荒略最佳优先策略的算法是按照一定的网页分析算法，预测候选的ｕＲＬ与目标网页的相似度，或者是与这个网页的主题的相关性，并选取评价最好的一个或几个ＬＲＬ进行抓取。目前主要有基于立即回报价值评价的搜索抓取策略模式和基于未来回报价值评价的搜索抓取策略模式这两大类优先黄略。上述几种策略在网页抓取程序中被广泛使用，然而根据ｗｅｂ应用漏洞扫描程序的特点，一般选择实现深度优先遍历策略和广度优先遍历策略。由于在多线程环境中无法提前确定哪个线程处理的任务先完成．因此并不能保证每次探索的都是离根ＬＲＬ距离最远的节点，所以在实现深度优先遍历的获取扫描信息的时候需要把获取信息的线程数目设置为ｌ即采用单线程的模式运行，这样的话会在一定程度上影响到扫描的执行速度。而使用广度优先策略进行遍历的时候容易控制遍历的深度，并且由于一般站点都具有以域名为根ＬＲＬ的树状层次关系，通过采用公共数据队列的方式可以保证上一页面的所有链接先于下一页面中的链接被访问的宽度优先原则，因此在ｗｅｂ应用漏洞扫描软件中使用广度优先遍历策略符合该应用场景的特点。如果用户不希望采用多线程访问的方式来对目标ｗｅｂ应用造成一定的压力．并且有足够的时间来等待扫描过程地完成，也可以选择使用深度优先的抓取策略来进行扫描。在本ｗｅｂ应用漏洞扫描器中默认使用宽度优先搜索策略去进行网页的抓取．在抓取的过程中使用了一个全局链接队列来保存页面解析中产生的网页链接。网页抓取的流程如图３－１所示。鉴于队列先进先出的特性，只有先前页面中所有的链接都被访问过之后，后硕士学位论文第三章ｗｅｂ漏洞扫描网页抓取和分析技术研究与实现面页面中的链接才有被访问的可能。那么，为了防止爬行器重复地抓取相同的页面＜二霹ｉｉ譬＞１取ｍ链接井自该链＜奎＞丑◇解析响应７疆葡页焉１藤焉弭一———＿ｌ——结束囝３—１抓取页面流程圈对每一个抓取到的链接都需要进行判重处理。对于已经抓取并且解析完毕的链接，将其放入到一个已抓取链接队列之中，在进行链接判重的时候需要检索未抓取链接队列和已抓取链接队列，以此来判断新的链接是否是已经处理过的链接，或者是待处理的链接。３３基于正则表达式的页面内容提取通过上一节讲述的扫描信息抓取目标和页面遍历策略将ｗｅｂ应用的网页资源抓取到本地，然后需要进行的是对抓取到的资源进行分析。ｗ曲应用漏洞扫描程序需要解析目标响应中的ＨＴＭＬ文本，Ｊ“ａｓｃ由ｔ脚本，ｃｓｓ样式表，以及网页中的对象。对于Ｊａｖａｓｃｎｐｔ脚本和样式表，扫描程序需要静态和动态的从中解析出网页ｕＲＬ。对于网页中对象（Ｆｌａｓｈ，Ａ口口１ｅｔ等），现有的商业扫描软件可以通过模拟播放ｎａｓｈ的形式从中动态解析出网页链接。在本节中将研究一种基于正则表达式提取页面内容的方法。硕士学位论文第三章Ⅵ铀漏洞扫描网页抓取和分析技术研究与实现３３１正则表达式简介在本文的网页元素分析过程中使用了正则表达式强大的文本分析能力来实现对网页标签和标签属性值的获取。正则表达式［４９邡１由一系列的元字符和普通字符组成，根据正则表达式流派的不同，元字符集会稍有差异，但是大部分是一致的。根据正则表达式引擎工作方式的不同可以分为确定性有穷自动机（ＤＦＡ）和非确定性有穷自动机（ＮＦＡ）两种。ＤＦＡ是文本主导型引擎，它在第一次遇见正则表达式的时候需要对其进行详细的分析，并且在内部建立一张详细的匹配路线图，在建立这张路线图的时候是需要时间和内存消耗的，但是之后的匹配过程则会比较快速。ＮＦＡ是表达式主导型引擎，它在报告匹配失败之前，必须尝试正则表达式的所有变体，因此在匹配的过程中会进行大量的回溯操作，因此它比较容易支持反向引用，在面对糟糕的正则表达式的时候这些回溯操作会消耗很多时司，而使用ＤＦＡ引擎却不管是正则表达式写的是好是坏，匹配时间都一致。这两种引擎各自具有自身的优点和不足，因此，在具体的实现上，某些匹配程序会针对表达式的特点在匹配过程中在ＤＦＡ引擎和ＮＦＡ引擎中间切换以糅合两者的优点。用于正则表达式中的元字符主要包括以下几类ｌ、用于匹配对象的元字符，包括点号（），字符组（卜·］），排除型字符组（卜－】），转义字符（＼）：２、用于提供计数功能的元字符，包括问号（？），星号（·），加号（＋），区间量词（ｆｍｌｎ．ｍａｘ｝）。３、用于匹配位置的元字符，包括脱字符（一），美元符（￥），单词开始分界符（、＜），单词结束分界符（悟）。４、其它的元字符，包括选择符（｜），括号（（）），反向引用（、１．＼２）等。３３２使用正则表达式进行网页元素的匹配和分析在本文所述的ｗｅｂ应用漏洞扫描软件中使用ｐｃｒｃ正则表达式阻５”来实现对网页元素的匹配和分析。用于解析网页元素的两类正则表达式如表３．Ｉ和袭３．２所示。由于ＨＴＭＬ语法规定中本身并没有强制要求对应的网页源码格式遵循其规范，因此很多时候浏览器在解析和渲染网页时即便是遇到部分格式不正确或者不符合规范代码的网页也能够正确处理，因此对于ｗｅｂ应用漏洞扫描软件而言，正确处理这部分链接也是其可用性的体现。用于抓取网页链接的正则表达式如下所示：（９ｈｒｅ目”ｃＩｕｒｌ）忆＋２忆＋（’：Ⅵ［叶”’】＋）ｍ？４）’、＿．Ｉ、‘（ｆ”？］＋＂”＋）？Ⅶｒ吣ｗ＞？】＋）ｍ？＋、＼ｓ＋Ｊ’）上面这个ｕＲＬ包含三部分，虽然ＨⅣＬ标准规定对于属性值需要用双引号包含起来，但是实际中可能会遇到被双引号包含的，单引号包含的或者没有引号包含的链接值的情况ａ上述ｕＲＬ模式对应于这三种情况。同理，在表３—１与表３．２中的正则表达式中也增项士学位论文第三章Ⅵ协漏洞扫描阿页抓取和分析技术研究与实现加了许多对于属性值边界情况的判断。表３—１解析网页标签的正则表达式标签名Ｂ孤ｅ标签Ｉｎｐｕｌ标签用于匹配标签的正ⅢＪ表达式（ｂ越ｅ忆＋’（［＾＞卜？灿＋？）＜ｊｎｐｕｎｂ＋？（【＾＞］＋’）、、ｓ＋？＞ｓｅＪｅｃｆ标签奄ｅｌｅｃｔ恬＋’（ｆ＾＞】＋∞忆＋》（．＋∞坼ｅ】ｅｃｎｕ＋々）Ｔｅｍ口ｅａ标签Ｏ巧ｅｎ标签Ｏ州。ｎ标签Ｆｏ砘ｍａｒｃ挑＋’（【＾＞】－？）忆＋９（＋？）‘／Ｉｅｍａ”扎＋？＞＜ｏｑｅｃ“ｂ＋’（［＾＞】十？）＼、ｓ＋？＞（‘’）舶ｑｅｃｔ＼、ｓ＋＇＞‘叩ｎｏｎ＼、ｓ＋？（【＾＞］＋’）忆”’（＋？）舶ｐｔｉｏｎ忆＋？＞＜如ｍｎｓ＋？（［＾＞】＋？舳’？＞（‘？Ｈ如ｒＩＴｌ憾＋？＞袁３—２解析网页标签属性的正驯表达式ｎＩｌ标签标签名标签名标签值用于匹配标签属性的正则表达式协＋’ｎ锄ｅ忆＋？踯ｓ＋（Ⅳ】｛Ｏ，１｝）（［～”。】＋？卅１“惺ｕｓ＋’）№＋？ｖ出ｕｅ忆＋。地＋（旷】｛０，１））（【１”’】＋？）＼、ｌＯ、ｚ忆＋ｐ）怄＋’可ｐｅ忆＋？＝帖＋（ｒ】｛０，１））（【１”’】＋？）＼、ｌ（忆忆＋ｐ）忆＂ｍｅ廿ｌｏｄ忆＋？＝帖＋（［、＿＿＿】｛０，１））（［１“‘】＋？）ｎｌ（忆忆＋’）标签类型表单提交方法表单提交ｕＲＪ惦＋？ａｃｔｉｏｎｋ·？＝怕‘（ｒ】（０，ｌ｝）（【吖”］¨）＼、１（忆１时’）３４交互式网页内容提取现在的ｗｅｂ应用中，与用户交互的元素运用的越来越多，这些交互元素极大的丰富了ｗｅｂ应用的展现形式并且增强了用户的友好体验。然而对于扫描信息抓取而言，这些技术也增加了扫描软件实现的难度。交互式网页内容主要分为传统的交互式表单内容与现在流行的ＡＪＡｘ网站内容，同时还有一些嵌入于网页中的ＦＬＡｓＨ、Ａｐｐｌｅｔ对象等。３４１交互式表单内容的抓取交互式表单内容叭”１的抓取是网页抓取技术中的难点之一。许多互联网中的页面隐藏在需要验证的表单页面之后，而对于通常的博客和论坛系统都需要有用户填写完注册表单之后才能够访问一些需要注册会员权限才能访问的数据。Ｇｏｏｇ】ｅ公司在２００８年声称其升级后的网页抓取机器人已经可以根据网页内容自动提交表单内容，并且访问提交表单后续的页面。对于网站管理员而言，如果不希望自己网站的表单被自动提交，需要在ｒｏｂｏｔｓ文件中显示地指明。在自动进行表单内容提交的的时候，爬行器需要模拟用户操作表单的行为，因此它需要能够理解表单元素的特点才能够正确处理表单元素的属性和参数，同时由于ｗ曲应用硕士学位论文第三章ｗｃｂ漏洞扫描同页抓取和分析技术研究与实现开发者为了能够从用户那里收集到合理的数据，通常会针对数据的内容作正确性验证．如果是非法数据，那么这个表单是会被服务器的处理逻辑拒绝掉，从而无法造成真正意义上的数据提交。因此，扫描器也需要对需要提交数据的内容有基本的理解。及多行文本域（ＴＥｘＴＡＲＥＡ）。这三种元素又有其各自的特点。ＩＮＰｕＴ和ＴＥｘ眦Ａ元（１）表单元素的特点。表单元素包含包含输入域（ⅢＰｕＴ），选择域（ｓＥｌＥｃＴ）以素都具有ｎ跏ｅ和ｖａｌｕｅ属性，这两个值通常是构成提交请求的参数字符串的参数来源。输入域（ＩＮＰｕＴ）具有７种不同的类型分别为：ＴＥｘＴ＇ＨＩＤＤＥＮ，ｓｕＢＭＩＴ’ｃＨＥｃＫＢＯｘ，ＲＡＤＩＯＲＥｓＥＴ，ＰＡｓｓｗＯＲＤ。不同的类型的输入域（ｍＰｕＴ）在网页上的展现方式也不同，而其所具有的功能也不同。当ＩＮＰｕＴ的类型为ＲＥｓＥＴ和ｃＨＥｃＫＢＯｘ时其作为参数提交的值可以被忽略。选择域（ｓＥＬＥｃＴ）由一系列选项（０ＰＴＩＯＮ）组成。在构造ＰＯｓＴ参数的时候选取ｓＥＬＥｃ丁的ｎａＩＴｌｅ属性和ＯＰＴＩＯＮ的ｖａｌｕｅ属性构成一个键值对。表单信息类如表３．３所示。表３３表单信息类消包内容内容作用表单提交方法保存表单的ｍｅｆｈｏｄ值表单提交的ＬｌＲＩ保存表单的ａｃｔｌｏｎ值输八域列表表单中ＩＮＰｕＴ标签列表选择域列表表单中ｓＥＬＥｃＴ标签列表多行文本域列表表单中ＴＥｘＴＡＲＥＡ标签列表在表单信息类中使用的表单标签类如表３．４所示：——墨！二！墨兰堑垒墨属性属性作用标整名字表单标签Ｎ砌ｅ属性，用于与别的ＤＯＭ元素进行区分标签值表单标签Ⅷｕｅ属性，对于ＳＥＬＥＣＴ标签而言，在表单自动提交的时候通常取其第二个０ＰｎｏＮ标签的值作为它的值进行提交．第一个值在实践中默认作为说明该选择域用选的文字。类型指明ｒＮＰｕＴ标签的类型（２）提交正确的表单元素值。为了能够给相应的表单元素附上正确的值可以采用对标簦名字属性进行匹配的方式来处理。可以这样做的原因在于通常ｗｅｂ应用开发人员在后端的逻辑代码中会通过标签ＩＤ引用页面的标签元素，而标签ＩＤ的值一般为一个与标签内容相关的值ｔ这个值通常会说明这个标签的用途或者这个标签应该输入的内容。而标签名（Ｎ蜘ｅ属性）与标签ＩＤ的值一般来说是一致的，在前端的Ｊ“ａｓｃ打ｐｔ脚本与ｃｓｓ样硕士学位论文第三章Ⅵ曲漏洞扫描网页抓取和分析技术研究与实现式表中对页面标签的引用是通过标签名来进行的。当然应用开发人员如果并没有根据的对标签命名，或者命名的时候虽然与标签有一定相关性，但是采用了过度缩写的方式或者是特殊的命名方法，在这种情况下，这种通过标签名字来确定标签内容含义的做法也会面临若失败。另一种方式是通过匹配相邻的ＨＴＭＬ文本内容以确定该标签的作用和应该填入的值的类型。采用这种方式的时候需要需要对相邻文本的边界做出有效界定，以减少匹配的范围并且提高匹配的精度，另外由于ＨＴＭＬ文本中可能会有许多经过了ＨＴＭＬ编码的符号．而这些符号通常是空格，单引号，分号，尖括号等，其本身并不会影响到ＨＴＭＬ的语义，因此可以进行过滤处理。虽然对通过处理的ＨＴＭＬ文本进行匹配可以大致确定标签应该填充的内容，但是有的情况下该ＨＴＭＬ文本与标签无关，或者用于提示标签作用的是一张图片等原因，这种确定方式也有面临失败的风险。表３—５默认字段填克表表３—５中字段描述说明了即将匹配的标签可能有哪些含义，那么针对这些含义在对表单名或者表单附近的ＨⅢＬ文本中如果匹配到了匹配项（也就是字段匹配部分列的值），那么就用第三列中的默认值进行填充。标签名匹配和标签附近ＨＴＭＬ文本匹配这两种方法可以结合起来使用，必提高识别的成功率，如果实在识别不出来，那就用未知内容行的值进行填充。在对一个表单进行自动提交后，需要通过服务器响应的内容与表单提交前内容的差异以及服务器响应的状态码来判断表单的提交是否成功。如果依然没有提交成功，那就说明这个表单页面需要扫描者通过手动的方式进行探索。自动表单提交过程如图３－２所示。由于交互式表单一般涉及到与数据库之间的数据查询与插入等操作，频繁的向一个论坛表单提交数据可能造成大量的服务器资源被消耗，从而导致拒绝服务攻击。因此对于ｗｅｂ应用漏洞扫描程序而言，在使用侵入式（具有影响原ｗｅｂ应用正常使用的方式）扫描的模式时，可以对目标ｗ曲应用的表单频繁自动构造提交的数据，以检测其是否易于受到攻击。｛拿］垒＿—｝、＊ｍ｜墼｝图３—２自动表单提交过程（３）结合手动操作对一些无法自动化提交的表单进行抓取。对于需要多步完成的操作，比如电子商务网站的支付过程，用户一般需要填写多步表单，最后一步才是支付页面，又比如网上报名系统或者求职系统，通常每个页面都仅包含一个主题的信息，然后下一步再填写下一个主题的信息，考虑到用户还有对上一步填写的信息有修改的可能。因此还会有连接到上一步的回退按钮。对于这类表单，如果提交的序列不是按照正常的步骤一步步往下进行，那么爬虫在自动提交的过程中可能无法达到最终事务结束的页面，或者是经过很多不必要的提交过程才最终到达事务结束的页面。因此对于这类需要多步提交完成的页面操作ｔ可以由扫描者手动访问，并生成一个操作序列的脚本供自动扫描器使用以提高其扫描效率和准确性。这一技术同样可以应用在需要登录验证的表单提交页面中。许多ｗｅｂ应用为了防止表单页面被反复恶意提交或者是防止暴力破解登录口令，在这类表单页面都会有验证码图片，最简单的验证码图片是内容为几个数字的图片，通过使用图像识别技术可以识别出具体的数字是什么。比较高纽的验证码图片技术会增加图像的干扰园素，或者是使用变形的中文汉字，或者是一个提问，然后要求访问者输入问题的答案。对于这类无法自动提交通硕士学位论文第三章ｗｅｂ漏洞扫描网页瓠取和分析技术研究与实现过的表单，同样可以采用登录序列生成的方式，借助于扫描者提供的手动操作，通过获得井使用其已认证的会话㈣，从而通过表单的验证。（４）动态页面表单提交。不同的动态网页（ＡｓＰｘ、ＪｓＰ、ＰＨＰ、ＡｓＰ等）在生成响应的时候会有自己格式的特点。为了能够让漏洞扫描器自动提交表单，本文在实现的过程中研究了两类典型的动态页面生成响应的特点。１＞对于Ａｓｐｘ页面，为了能够自动处理表单控件的回送事件，在生成的响应中，ｗｅｂ服务器会插入一些默认的代码。如下所示＜ｉｎｐｕｔ呻ｅ２”ｈｉｄｄ刚ｎ锄ｅ＝“』ｖＥＮＴｒＡＲＧ¨舻１』ｖＥＮ丌ＡＲＧ刚Ｖａ】啪‘””卢Ｅｉｎｐｕｔ计Ｐｅ＝”ｈｌｄｄｅｎ”㈣掣一ＥｖＥＮＴＡＲＧＵＭＥＮＴ”ｉｄ－”—ＥＶＥＮＴＡＲＧＵｍＮＴ”ＶａＩｕｅ‘…’卢＜ｉｎｐｍ卯ｅ＝”ｈｉｄｄ酬㈣掣—ｖＩＥＷＳ工ｍ”ｉｄ２”—ｖＩＥＷＳＴＡＴＥ”Ｖａｌｕｅ＿””序上面是默认生成的三个隐藏输入域，的控件名：ＥｖＥＮｌＴＡＲＧＥＴ的值用来表示发生回送事件ＥｖＥＮＴＡＲＧｕＭＥＮＴ值用来表示向回送控件发送的参数：一ＶＩＥｗｓＴＡＴＥ值用来保存页面中控件的状态值。另外ｗｅｂ服务器还会自动插入处理这个回送事件的方法，如下所示ｆｕｎｃ渤—ｄｏＰｏｓＩＢ虻ｋ（ｅｖｅｎｔｌａｒｇＨ。ｅＶｅｍＡ唱唧ｅｎＩ）｛ｌｆ（！ｔｈｅＦｏｍｏｎｓｕｂｍｌ圳（ｔｈｅＦｏ丌ｎｏｎｓｕｂｍｎ０１＝血１ｓｅ））（ｔｈｅＦｏ丌ｎ』ｖＥＮＴＴＡＲＧＥｒｖａＩｕｅ＿ｅＶｅｎｔｌａｒｇｅＩ；ｍｅＦｏｍ—ＥｖＥＮＴＡＲＧＵＭＥＮｔＶａｌｕｅ训ｅｍＡ嘻ｕｍｅｎｔ，血ｅＦｏ兀ｎｓｕｂｍｉｔｏ；））这段脚本被用来处理发生回送事件的来源以及参数的赋值，并且触发了表单的提交。通过使用类似ｊａｖａｓｃ咖ｔ＝一ｄｏＰｏｎＢａｃｋ（’ｇｏｓｅａｒｃｈ＿’）的语句可以调用上述的脚本，并且触发表单的提交，其中印ｓ咖曲表示触发事件的控件名。对于这类动态页的处理过程如图３—３所示在匹配ｄｏＰｏｓｔｂａｃｋ事件的时候使用的正则表达式为：ｄｏＰｏｓｔＢａｃｋ＼Ｉｎ¨‘（［ａ．ｚＡ－ｚ０·９ｊ’？州叭¨Ｙ盈－ｚＡ－ｚｏｌ９ｊ＋珊ｍＩ）由于在ｃ－＋语言和正则表达式中转义字符都是反斜杠，而在ＨＴＭＬ语言中，为了表达一个单引号需要使用反斜杠作为转义符，因此上述正则表达式中出现了四个反斜杠用来表达一个反斜杠字符的写法。因为在该类请求中，隐藏参数值的正确设置将影响到提交的表单是否能够正确被服务器接受并处理，所以在取到ｄｏＰｏｓｔｂａｃｋ调用参数的时候需要重新对一ＥｖＥＮＴＴＡＲＧＥＴ和ＥｖＥＮＴＡＲＧｕＭＥＮＴ进行赋值。硕士学位论文第三章ｕ曲漏洞扫描网页抓取和分析技术研究与实现／————、、一————／开始拿萋害国３—３＾ｓｐｘ动态页面表单提交２＞对于ｊｓｐ页面，通常使用自定义的脚本来处理页面控件的回送事件，在脚本中通过ＤＯＭ函数来触发表单的提交。例如ｄｏｃｕｍｅｍｆｏｍｓｆ’ｖｌｅｗＮｅｗｓＬｉｓｔＦｏ嘲。】ｓｕｂｍｉｔ（），上面的代码通过表单名“ｖｉｅｗＮｅｗ暑Ｌｉ盯ｏｒｍ”找到对应的表单，然后通过ｓｕｂｍｎ方法触发表单的提交。这种通用化的方式相比于Ａｓｐｘ页面而言虽然增加了其应用开发的难度（服务器不生成额外的代码，表单控件的控制由开发者自己写脚本来实现），但是其不需要服务器任何默认的处理也体现了它的灵活性及跨平台的优势。对于这类页面的表单提交，不需要额外的赋值隐藏域的操作。３４２ＡＪＡｘ网站内容的抓取ＡＪＡｘ指异步ｊａｖａｓｃ邱ｔ和ｍ】－它的核心是ｊａｖ拈ｃｒｉｐｔ的ｘｍＩＨ卸Ｒｅｑｕｅｓｔ对象，它是一种支持异步请求的技术，简而言之，它可以让用户使用ｊａｖａｓｃ打ｐｔ向服务器提交请求并处理响应，而不阻塞用户。用户所需求的数据可以于实际的网页服务端并且被动态的写入网页中，这种技术使得缓慢的Ⅵ，ｅｂ应用体验有了像桌面应用一样的实时响应的特点。然而如何抓取萄ａｘ网站的内容却是当前网络爬虫所面临的难题。现有的网络爬虫只需模拟用户的超链接请求并解析对应的响应页面，然后再分析页面内容、语义以及衍生的硕士学位论文第三章ｗｅｂ漏洞扫描网页抓取和分析技术研究与实现超链接，以此进行网页内容的抓取。与之不同的是，Ａｉａｘ更多的改用了Ｊａｖａｓｃ＾ｐｔ驱动的异步请求，响应。而对于现有的网络爬虫而言，它们对Ｊａｖａｓｃｒｌ口ｔ缺乏语义理解，因此对于模拟触发ｊａｖａｓｃｉｐｔ的异步调用并解析异步调用返回的内容存在一定困难。由于Ａｊａｘ技术是一种事件驱动的模型，以往基于ＨＴＴＰ协议的网页抓取和分析的技术如果要适于Ａｊａｘ技术产生的页面，就需要做到事件驱动。因此新的网络爬虫需要解决以下问题：能够模拟解释执行浏览器端的ＪａｖａｓｃｎｐＩ脚本，能够对浏览器中操作ＤＯＭ的网页元素事件进行触发并模拟发送请求。同样的问题也存在于包含ｎａ洲ｎｅｘ以及ｗＰＦ，Ｅ、ｘｕＬ的应用中，在这种应用中．为了能够获取这些应用脚本动态产生的链接，甚至需要爬行器理解并模拟播放这些应用的文件以发现仅通过解析可能发现不了的链接。３５网页模型类研究与设计网页模型类是用于本文第二章中图２．１所示公共数据信息部分用于保存扫描和分析过程中产生信息的数据结构。对于每次扫描器向ｗｃｂ应用服务发送了请求，并且接收到响应，我们可以认为扫描器与ｗｅｂ服务器交换了～次消息，这个消息将包含扫描器发送ＨＴＴＰ请求的方式，请求的参数以及服务器返回的响应消息头以及响应消息体。从上述描述中可以看出一个消息包含三部分：ＨＴＴＰ请求消息头和请求参数，ＨＴＴＰ响应消息头，Ｈ丌Ｐ响应消息体，其中Ｈ１ＴＰ请求消息头和ＨＴＴＰ响应消息头通常是浏览器自己来构造发送并且接收处理的，而ＨＴＴＰ响应消息体就是展现在浏览器中的页面信息。而要对目标ｗｅｂ应用进行漏洞检测，就需要能够定制化ＨＴＴＰ请求消息头，并且能够根据响应消息头判定请求的状态。３５１ＨＴＴＰ请求消息头和ＨＴ什响应消息头的内容在本节中我们将详细介绍ＨＴＴＰ协议的内容…”，并且指出哪些部分在设计ｗ曲应用漏洞扫描软件的时候是需要关注的。在ｗｅｂ应用漏洞扫描器的设计中，解析ＨＴＴＰ消息是关键的部分，ＨＴＴＰ仂议∽删的特点和内容直接影响到扫描器对目标网站是否存在相应漏洞所进行的判断。通常ＨＴＴＰ消息包括客户机向服务器的请求消息和服务器向客户机的响应消息两部分。这两种类型的消息由一个起始行，一个或者多个头域，一个只是头域结束的空行和可选的消息体组成。ＨＴＴＰ的头域包括通用头，请求头．响应头和实体头四个部分。每个头域由一个域名，冒号（：）和域值三部分组成。域名是大小写无关的，域值前可以添加任何数量的空格符，头域可以被扩展为多行．在每行开始处，使用至少一个空格或制表符。典型的请求消息如下所示：ＧＥＴｈ曲：Ⅳｗ…ｕｅｄｕｃｒ咖ｍｌｊｎｅ＾ｎｄｅｘｈｎｎｌ硕士学位论文Ｈｏｓｔ第三章Ⅵ铀漏洞扫描网页抓取和分析技术研究与实现ｅｄｕｃｎｗ…ｓｕＡｃｃｅＤｔ＋ｐＰｍｇｍａｎｏ。ｃ扯ｈｅＣａｃｈｅ—ＣｏｎＩｒｏｌｎｏ—ｃａｃｈｅＲｅｋｍｒ：ｈｎＤ肌…ｃｓｕｕｓｅＰＡｇｅｎｌｅｄｕｃ州Ｍｏｚｊｌｌ“０４…（ｗｉｎｘＰ；ｗ毗Ｉ；Ｎ“）在上述请求消息中，第一行表示发起的ＨＴＴＰ请求方式以及请求目标，可能的请求方法如下表３６所示：表３—６ＨＴＴＰ请求中使用的方法方法名方法作用请求获取Ｒｅｑｕｅｎ－ｕＲＩ所标识的资源在Ｒｅｑｕｅｓ■ｕＲＩ所标识的资源后附加新的数据请求莸取由Ｒｅｑｕｅ女．ｕＲｊ所标识的资源的响应消息报头ＰＵＴ请求服务器存储一个资源，井用Ｒｅａｕｅｓｔ＿ｕＲＩ作为其标识请求服务器删除Ｒｃｑｕｅｎ．ｕＲＩ所标识的资源请求服务器回送收到的请求信息，主要用于测试或诊断ＣＯＮＮＥＣＴ保留将米使用请求查询服务器的性能，或者查询与资源相关豹选项和需求满足人们日常浏览网页需求的Ｈ丌Ｐ方法是ＧＥＴ和Ｐ０ｓＴ。在诊断和测试的时候可以使用ＴＲＡｃＥ方法，它会将服务器收到的信息全部发送回来，并且包含ｃｏｏＫＩＥ值，使用ＴＲＡｃＥ方法可以对标记有ＨＴＴＰＯｎｌｙ的ｃ００ＫＩＥ值进行窃取。因此，ｗｅｂ应用漏洞扫描器至少要支持ＧＥＴ，ＰＯｓＴ，ＰＬＴ，ＴＲＡｃＥ这三种ＨＴＴＰ发送消息的方式。Ｐｒａｇｍａ与ｃａｃｈｅｃｏｎｔｒｏｌ的值表明用户数据在浏览器中是否需要进行缓存，一般设置为ｎｏ—ｃａｃｈｅ，这样即使用户访问的网站交换了重要的数据也不会因为在浏览器端缓存，而造成被人窃取的风险。Ｒｅｆｅｒｅｒ值表明发起的请求来自于的ＬＲＬ，在一些网站中会有运行于服务端的脚本来检查该宇段的值来确认对当前页面的访问是否来自于本站中具有访问权限的页面（比如对向一个下载链接的请求来检查它是否来自于指定的下载页等）。Ｌｓｅｒ—Ａｇｅｎｔ值表明了客户端代理的类型，某些服务器只会处理相应代理类型的请求。因此，在扫描器的实现中需要正确的设置该值，典型的响应头消息如下所示：Ｈ兀，，１０２０００ＫＤｍｅ：Ｍｏｎ３１Ｄｅｃ２０１２０２：２Ｓ：５７ＧＭＴＳ州ｒＡｐ８ｃｈ“１３１４（ｕｎｌｘ）Ｃｏｎｌｅｎ｝帅ｅ：ｔｅｘ坍１ｔｍｌ硕士学位论文第三章ｗｅｂ漏洞扫描网页抓取和分析技术研究与实现Ｌ拈ｔ。ｍＯｄｌｆＩｅｄ：Ｉｕｅｌ７ＡＯｒ２００１０６：４６２８０Ｍ】ＣＯｎｔｅｎ－ｌｅｎｇｍ３９７２５４２６响应头的第一行指明了使用的ＨＴＴＰ协议版本以及响应的状态码。扫描器在实现时需要关注响应头消息中的状态码值，它指示了所进行的ＨＴＴＰ请求是处于一个什么状态，这个状态可以说明所进行的测试是否成功。ＨＴＴＰ状态码值的含义如下所示：ｊｘｘ：服务端内部错误，服务器不能正确处理一个正确的请求４ｘｘ：客户端发生错误，客户请求包含语法错误或是不能『Ｅ确被执行３ｘｘ：重定向响应，为了完成指定的动作，必须转到其它链接接受进一步处理２ｘｘ：处理成功响应，表示动作被成功处理ｌｘｘ：信息响应，表示接收到请求并继续处理响应头中ｓｅｒｖｅｒ值表明目标ｗｅｂ服务器的类型，比如上面的响应头中。我们可以看出该请求是向一台Ｕｎｉｘ服务器发送的，并且进行处理的ｗｅｂ应用服务器是Ａｐａｃｈｅ。ｃｏｎｔｅｎｔ—ｔｙｐｅ表明了所请求的资源的类型，ｃｏｎｔｅｎｔ—ｌｅ“ｇｔｈ表明了响应内容的长度。３５２ＨＴＴＰ响应消息体的内容ＨＴＴＰ响应消息体的内容通常是一个Ｄ叫文档口”，有的时候当请求的方法不同时也会有不同的响应。比如使用ＨＥＡＤ方法，服务器的响应中就只有响应消息报头，而响应消息体ｆｉ＃ｄⅢＡＤ＞冈罔厂］圈篇，Ｉ竺竺ｌ竺竺ｌｒｉ《Ｗ¨㈣１，，【＃Ｈｋｈｒ圈３—４ＨＴ札ＤＯＭ结构图的内容就会为空，另外使用ＴＲＡｃＥ方法，返回的信息中将包含响应消息所经历的代理服务２８堡主芏垡丝壅墨三兰鲨！坚塑塑堂！夏塑里翌坌堑堇查堕窒ｉ壅型——一器处理过的信息。通常的ＤＯＭ结构文档如图３４所示。它显示一个ＤＯＭ文档结构有一个根元素节点（ｈｔｍｌ＞，这个根元素节点有两个主要的孩子＜ｈｅａｄ＞和＜ｂｏｄｙ＞，对于这两个主要的孩子，他们也有自己许多的孩子节点，每个孩子节点有自己的属性，包含于其中的文本等内容。在扫描软件中，需要关心的孩子节点有链接（Ａ元素）、图片（ＩＭＡＧＥ元素）、表单（ＦＯ蹦元素）、框架（ＦＲ心Ｅ元素）、脚本（ｓｃＲＩＰＴ元素）、样式衰（ｃｓｓ元素）以及ＨＥＡＤ节点中的ＭＥＴＡ和ＢＡｓＥ元素。３５３网页模型类设计网页模型类是一系列用柬保存ＨＴＴＰ协议通信过程所产生数据并且用于描述每次ＨｒｒＰ会话的类。对于每次扫描器向ｗ曲应用服务发送了请求，并且接收到响应，我们可以认为扫描器与Ⅵ桃服务器交换了一次消息，这个消息将包含扫描器发送ＨＴＴＰ请求的方式，请求的参数以及服务器返回的响应消息头以及响应消息体。表３—７表示当次会话中扫描器需要关心的请求消息的内容类，表３．８表示当次会话中响应头消息的内容类，表３．９表示用于一次会话中交换的消息的内容类。表３．７与表３．８所描述的内容被包含在表３．９之中。表３—７请求头消息美消息内容内容作用请求方法表明提交的ＨＴＴＰ请求是使用何种方法上一个链接对应于请求消息头中的Ｒｅ＆商字段用户代理对应于ｕｓｅｐＡｇ∞ｔ字段用于请求的参数扫描器向服务器提交请求时附带的参数，根据其所提交请求方法的不同，参数字符串的串接方式也不同，ＯＥＴ方式需要用问号将参数的键值对甜加在请求的ｕＲＬ后面，而采用ＰＯｓＴ方式的时候需要对参数值进行ｕＲＬ编码。表３－８响皿击消息粪消息内容内容作用响应状态码表明请求是成功还是被重定向或者是发生错误的一个三位整鼓ＨＴＴＰ协议版本可能的值为ＨＴｌＰｌ１，ＨＴＴＰｌＯｔＨ丌Ｐ０，９内容的类型表明响应的内容是个图片，文本／网页．文本，脚本或者是其它资源服务器类型表观该ｗＥｂ应用服务器的类型比如ｕｎ诜或者ｗｍｄ洲ｓ上一纽链接一般设置为找到该链接的页面的ｕＲＬ原始响应头消息保存未被解析过的原始响应头字符串，用于生成报告，或者重现原始的扫描过程。硕士学位论文第三章Ⅵ，ｅｂ漏洞扫描网页抓取和分析技术研究与实现裹３－９错消息类消息内容内容作川请求方法表明扫描器向服务器提交请求的方式，可以为ＧＥＴ、ＰＯｓＴ、ＰｕＴ，ＴＲＡＣＥ请求头请求头是一个包含ＨＴｌＴ协议中请求信息中用到字段的类响应头响应头是一个包含Ｈｍ协议中响应消息中用到字段的类链接列表保存响应网页中所有的链接元素（Ａ元素）图片列表保存响应网页中所有的图片元素（】ＭＡＧＥ元素）表单列表保存响应网页中所有的表单元票（ＦＯＲＭ元素）框架列表保存响应网页中所有的框架元素（ＦＲＡＭＥ元素）对象列表保存对象元素（０勘ｅｎ元素）．通常指ｎ盘Ｓｈ，ＡｐｐｌｅｔＡｃｔｊｖｅｘ对象脚本文件集合保存对应网页上采集到的ＪＡｖＡｓｃＲｌＰＴ脚本样式表文件集台保存对应网页上采集到的ｃｓｓ样式表文件ＢＡｓＥ元素保存ｂ器ｅ元素的值，当这个值存在的话，该页面所有的相对地址都要以该值作为基地址请求的ｕＲＩ所请求的资源的位置原始响应消息体保存未被解析过的原始响应字符串，用于生成报告，或者重现原始的扫描过程３６本章小结本章主要针对ｗ曲漏洞扫描中网页抓取及分析的关键技术进行了深入的研究，首先介绍了现有的网页抓取需要达到的目标，之后比较分析了几种网页抓取技术策略的优缺点，然后通过使用正则表达式技术研究了如何提取网页中的元素信息，接下来研究了交互式网页内容的抓取过程中所面临的问题和解决方法。最后结合网页元素的特点和ＨＴＴＰ协议信息的特点设计了网页模型类，出用于漏洞扫描器的实现ｃ翌主堂堡堡苎——笙！童鲨！鏖旦塑塑塑塑茎壁垫查里窒！望！．第四章ｗｅｂ应用漏洞检测关键技术研究与设计在获取到了用于扫描漏洞的原始信息并且研究了怎样来存储这些信息之后，本章将研究如何来描述一个漏洞以及利用先前扫描到的信息来检测目标ｗｅｂ应用漏洞机制。最后为了弥｛｝纯粹的自动、№ｂ应用漏洞扫描工具的不足，我们也对用于辅助手工进行ｗｅｂ漏洞检测的工具进行了研究与设计。４１漏洞定义及其说明（１）漏洞定义；目前存在很多对漏洞㈨５５‘６０境义的解释。在ＲＦｃ２８２８中对它的定义为在系统的设计，实现，操作和管理阶段中存在的错误或者弱点，它们可以被恶意者利用从而使得系统的安全策略达不到预计的效果。ＤｏｆｏｔｈｙＥＤｅ衄ｉ“ｇ等人在《ｃ聊ｔｏ舯ｐｈａｎｄＤａ诅ｓｅｃ州ｔｙ》１５ｑ一文对漏洞的定义是从访问控制的角度给出的。系统中通过访问控制矩阵的方式来实现主体对对象的访问．而这个访问控制矩阵具体实现的就是安全策略，当安全策略和系统的操作之间相冲突时，安全潺洞就产生了。ＭＢｉｓｈｏｐａＩｌｄＤＢ越Ｉｅｙ等人在《Ａｃｄｔｉｃ甜Ａｎ出ｙｓｌｓｏｆｖ１曲ｅｒ曲ｉｌｎｙｌ缸ｏｎｏＩｎｉｅｓ》”“一文中认为。由若干描述实体配置的当前状态组成了计算机系统．这些状态被定为易受攻击状态、不易受攻击状态以及受损状态、非受损状态。攻击就是将系统的状态从非受损状态向受损状态转变的过程。而容易受攻击的区别于所有非受损状态的特征就被定义为漏洞。王丰辉在《漏洞相关技术研究》口３】一文则是从安全域的角度来定义潺洞的，它认为安全域存在于任何运行的系统或软件中，任何操作在该域内都是可控的、安全的，一旦违反了安全策略或者超出该域，系统或软件的运行就是未知的、不可控的。由安全域切换到非安全域的触发点就构成了漏洞。因而漏洞是被动的、静态的，但是可以被触发。从上述说明中我们可以看出，漏洞的存在使得系统的行为不为管理者所预计和掌控成为了可能，那么检测漏洞的过程，一种有效的方法就是去触发漏洞，使它对系统的不良影响得以展现，从而得到相应的消除漏洞的方法。一旦系统被提交漏洞并触发后表现出了违反其安全策略的行为或者已经是一种受损状卷的话，通过这些特征就可以诊断系统存在着相应的漏洞。那么对ｗ曲应用系统中的漏洞检测而言，本文也将采取这种触发漏洞然后匹配漏洞响应的方式以确定ｗｅｂ应用系统的漏洞是否存在。（２）漏洞说明。为了能够完好地描述一个漏洞产生的原因、带来的影响及针对硕士学位论文第四章Ⅵ铀应用漏洞检Ⅻ４关键技术研究与设计它的修补措施，以便生成一个权威且格式良好的漏洞扫描报告，还需要对漏洞进行说明。大多数网络安全检测产品公司都声称其产品针对的漏洞知识库能够兼容ｃｖＥ（公共漏洞和暴露）。ｃｖＥ¨”表现为一个字典表，通过它可以查询到广泛认同的信息安全漏洞和弱点的公共的名称。利用这个公共的名称，用户可以在各自的各种漏洞数据库和漏洞评估工具享数据。那么针对ｗｅｂ应用安全漏洞的说明，也应该兼容到ＯｗｓＡＰ、ｗＡｓｃ、ｓＡＮｓ等漏洞分类标准。这样用户在使用本漏洞扫描软件获得详细的漏洞信息之后也可以去与上述标准兼容的漏洞知识库中查询相关的预防和修补措施。表４—１设计了用于ｗｃｂ应用漏洞扫描软件中的漏洞说明表。袁４一ｌ漏洞说明类字段值漏洞１Ｄ漏洞产生原因漏洞修补措施漏洞引用的页面漏洞分类漏洞威胁等级字段值说明用以唯一标识该漏洞的值用于描述该该漏洞产生的原因用于向用户提供漏洞修补建议提供用于说明漏洞的权成页面或文章的链接用于说明漏洞所属的类别用于说明漏洞威胁是严重，中等．轻等４２可扩展的漏洞检测机制研究由于漏洞发掘技术和利用的手段在不断变化更新，因此对于、№ｂ应用漏洞扫描工具而言，将漏洞检测机制设计为可扩展的是非常必要的，它使得用户在面对新的漏洞的时候可以扩展扫描器的功能以适应新的需求和变化。现有的可扩展机制主要有通过添加新的配置文件的方式和添加新的扫描插件的方式。（１）扩展配置规则文件。通过在配置文件中添加一个描述漏洞说明的纪录项，这个记录项包含了漏洞说明表内容，检测向量判定结果字符串组。扫描器在加载了轰４—２配置纪录项兰嬖堕漏洞说明类兰垦堕望塑包含表４—１中用咀说明漏洞的信息用于暴露相应漏洞的一系列字符串，在检测的时候通过逐个串接在请求参数后面的形式构造一个个畸形的ＨＴｌ’请求，以选到暴露目标ｗｅｂ应用漏洞的目的。漏洞检测向量漏洞判定向量用于在服务器接受到测试请求之后，用于在对应的响应之中逐个匹里！坠堡塞！！堑曼墨查壹垄塑壁塑鉴！壁里塑塑配置文件之后会应用默认的扫描过程对目标ｗ曲应用进行所配置漏洞规则的对堕主兰堡堡茎兰！兰鉴！堕！堡塑竺型茎壁垫查堡塞皇堡生应检测向量进行检测，在收到来自服务器的响应之后，匹配相应的判定结果字符串组，以确定相应漏洞是否存在。配置纪录项内容如表４－２所示。扩展配置文件是一种很方便的扩展方式，并且仅需要少量简单的修改就可以使得扫描器具有检测新的ｗｅｂ应用漏洞的能力。这种扩展方式对用户而言也很容使用，只需要参照用户帮助文档理解了配置文件中各个配置项的作用就可以自己动手修改配置文件了，或者用户觉得这个方式太麻烦且容易出错，那么也可以通过扫描软件本身的配置界面进行配置，由扫描程序自动生成或更新对应的配置文件。但是这种方式也有其明显的缺点，因为可用于配置的内容仅限于表４．２中描述的配置纪录项，而无法决定扫描漏洞的过程，这样对于一些需要特殊的扫描过程才能够判定的ｗｅｂ应用漏洞类型而无法进行检测。（２）扩展扫描插件。扩展扫描插件的方式能够有效的弥补仅通过扩展配置文件方式所带来的不足。在扩展的扫描插件中，用户可以定制化用于漏洞检测的过程，并且使用自己定义的初始化信息填充对应漏洞说明类以及检测及判定向量。目前主要有两种方式来实现扩展扫描插件的方式，一种是使用一个脚本解析执｛亍器来解释执行对应的插件，这样的情况下，插件就可以通过相应的脚本语言来编写完成．典型的采用这种方式的扫描软件如ＮＥｓｓｕｓ。另一种是通过实现扫描程序提供的ＡＰＩ接口来编写用户定义的扫描插件。对应的接口函数应该包括插件的初始化函数，用于被扫描程序调用的执行扫描函数｜三ｌ及用于清理插件所占用资源的清理函数。这种方式被广泛应用于大型软件的实现之中，例如ＩＩｓ服务器提供了ＩｓＡＰＩ接口以供用户在Ｈ兀Ｐ提交给服务器之前自定义对其处理的过程．又如Ａｐａｃｈｅ服务器的扩展开发模块，用户可以自己编写用于Ａ口ａｃｈｅ加载使用的功能模块。使用脚本编写插件的方式需要实现一个脚本解释执行程序，并且用户如果要编写自己的插件的话需要学习使用脚本的语法及插件的编写方法。相对于用脚本来编写插件的方式，直接实现扫描程序ＡＰＩ接口的方式显的简单易行。不过用户最好使用与扫描程序同样的开旋语言来进行开发，并将开发好的插件放置于配置文件中指定的目录下。同时，还需要遵循扫描程序对于实现函数的要求．例如扫描程序在一个多线程的环境下调用插件的实现函数的话，就需要所实现的函数具有线程安全性。（３）用于Ⅵ曲应用漏洞扫描程序中的插件机制选择。大部分ｗｅｂ应用漏洞检测的实质是一种采用精心构造的内容作输入的ＦｕｚｚＩＮＧ技术吼对于这类、№ｂ应用漏洞的检剁都可以采用一致的检测流程，即提交请求并检查响应的方式，因此使用配置文件扩展的方式可以比较轻便的满足此类问题扩展的要求。但是对于某些类型的漏洞检测，如ｓＱＬ盲目注入检测，需要使用额外的判定过程，因此需要使用插件扩展方式。在本文的实现之中，为了避免实现一个复杂的脚本解释执行程序，采用硕士学位论文第四章ｗｅｂ应用漏洞检测关键技术研究与设计了基于扫描程序ＡＰＩ扩展的方式实现插件４３漏洞分析器研究与设计不管是漏洞配置规则文件还是用于扫描漏洞的插件都应该由漏洞分析器进行加载和初始化，并且在进行漏洞扫描的过程中调用执行。漏洞分析器的总体结构如图４．１所示，它主要分为漏洞插件和规则、数据队列以及核心函数三部分。其中核心函数负责漏洞分析器的初始化资源分配以及扫描任务调度与分发的过程，数据队列保存的是未分析过节点的信息和已分析过节点的信息。［二亟［］■～—』竺竺竺兰＝二随圃雠ｊ。Ｉ制…插件满目幢“规Ⅲ％∞拴Ⅻ厂—］月ＰｉＲ规则Ｉ“Ｐ定Ｒｍ则。—＿一图４—１漏洞舟析嚣总体姑构图漏洞分析器的执行流程如图４．２所示。分析器首先需要被初始化，这个过程包括初始化漏洞检测规则以及漏洞检测插件。然后分析嚣将从数据队列中取出未被分ｊ，—孑二、１《吵’”墨釜篙赫捕””１翟茹捕”圉４—２分析器执行流程析过的节点，这个节点的内容是第二章表３－９所示的会话消息类，它包含了用于漏硕士学位论文第四章、ｖｅｂ应用漏洞检测关键技术研究与设计洞分析与检测的所有原始信息。接下来针对每个节点将进行两个阶段的扫描，分别为默认扫描过程检测与使用扫描插件自定义的漏洞扫描过程检测。（１）默认扫描检测过程。默认扫描检测过程的思想是针对每一个节点的每一个参数依次使用每一个扫描配置项中的检测字符串去构造测试请求。因此，假设一个站点有Ｍ个网页节点，平均每个网页可以提交Ｎ个参数，并且该漏洞扫描软件配置了Ｐ个漏洞检测项，平均每个漏洞检测项内包含Ｏ个检测向量，那么最终用于完成对该ｗ曲应用的漏洞扫描总共需要发送并接收ＮｕＭ＝Ｍ＋Ｎ·Ｐ＋Ｏ次Ｈ丌Ｐ请求。假设Ｍ２２０，Ｎ＝１０，Ｐ＝１０，Ｑ＝１０．那么总的ＨＴＴＰ请求将是２００００次。这也说明了厂■一卜佥ｆＪ＜唾爹一Ｊ＜爹为什么完成一个完整的漏洞扫描需要执行大量繁杂反复的工作。同时，太过于频繁的Ｈ兀Ｐ请求也容易对目标ｗｅｂ应用的正常使用带来额外的负担。默认检测流程如图４＿３所示。这个流程图展示的是针对每一个节点采用的扫描过程，它是图４．２中的一图４—３默认捡剥流程“使用默认扫描过程检测”部分的细化。在上述检测过程中，即便在应用到某一检硕士学位论文第四章ｗｅｂ应用漏洞检测关键技术研究与设计测项检测到了漏洞，剩余的检测项也应该继续应用于检测中，因为针对一个检测点可能存在几个不同类型的漏洞。（２）扫描插件检测部分。一种典型的不能通过上述默认检测流程检铡出来的ｗｅｂ应用漏洞就是ｓＯＬ盲目注入漏洞，因为即便目标ｗｅｂ应用具有ｓＯＬ盲目注入漏洞，那向目标ｗｅｂ应用提交的测试请求也无法导致响应中包含出错信息，从而无法进行漏洞特征匹配。但是通过本文２２节所示的检测方法也可以对ｓＱＬ盲目注入漏洞进行检测，检测的思想就是通过改变查询的条件以判断插入的字符串是否被提交给了后端数据库进行处理。如果确认是被处理了，那么目标、№ｂ应用就存在ｓＱＬ盲目注入漏ｆ｜可。ｓＱＬ盲目注入漏洞的检测流程如图４—４所示。一’＊蛤Ｊ红娘有参数后面串接±苎存在ｓＱＬ盲目注入漏洞ｌ，—ｊ—～、ｈ｝——————————————－——一ｆ结束１圉４—４、、、．．．．．．，————一，，ｓ０Ｌ盲注插件检测流程这个检测的过程需要在对应的检测点不存在普通ｓＱＬ注入漏洞的时候进行ａ因为一旦某个检测点存在普通ｓＱＬ注入漏洞，那么使用盲目注入漏洞的检测方法就必然能够检测出它存在ｓＱＬ盲目注入漏洞，因而没有进行ｓＱＬ盲目注入检测的必要ｎ上述检测流程实际上是相对于默认检测流程（图４－３）中“匹配响应是否存在漏洞特征”的另一种用于判定漏洞是否存在的方法。因此在进行ｓＱＬ盲目注入漏洞检测的时候也进行了大量的Ｈ兀Ｐ请求。用户在定制自己的漏洞检测插件的时候也可以针对漏洞本身的特点，选择发送少量ＨＴＴｐ请求来进行其它漏洞的判定。（３）特殊类型漏洞的检测。特殊类型的漏洞包括两类，一类是通过使用不同的检测方式来确定漏洞的存在，一种典型的例子就是测试目标ｗｅｂ应用是否存在访问硕士学位论文第四章Ⅵ柚应用漏洞检测关键技术研究与设计权限方面的问题。首先使用一个普通用户的权限来访问目标ｗｅｂ应用，然后使用具有初级权限的用户来访问目标ｗ曲应用，再使用具有高级权限的用户来访问目标Ⅶ．ｅｂ应用．保存用户访问到的所有资源。通过比较这些用户所能够访问到资源的差异，可以确定相应的ｗｅｂ应用中的访问控制策略是否得到了完整的实施，或者是否存在未授权用户可以越权访问的现象。另一类是针对具体ｗｅｂ应用已知漏洞的检测，这种方式类似于针对现有的系统和应用漏洞的检测方法。由于现在大量的开源ｗｅｂ应用被广泛使用，比如知名的Ｄｉｓｃｕｚ、ｗｏｒｄｐｒｅｓｓ、Ｊｏｏｍｌａ等，针对这些具体的ｗｅｂ应用存在的漏洞，许多检测的方式已经被发掘出来，并且可以应用到扫描软件之中。当扫描人员已知扫描的对象中含有这类可能存在已知漏洞的ｗ曲应用的话，那么可以直接选择相应的检测措施就可以对相应漏洞进行检｛雯４。使用这种方式的优点是针对一个检测点只需要进行少量的ＨＴＴＰ请求（通常是一次）就可以了，并且完全不依赖于前期所获取的扫描信息，检测过程具有很强的针对性和准确性。缺点是应用的对象范围有限。４４辅助扫描检测工具的研究Ⅵ，ｅｂ应用漏洞检测【２２捌过程中除了应用自动化工具进行扫描以外，还应该由漏洞扫描者针对部分区域进行定制化检测，比如扫描软件报告的待手动检测ｕＲＬ列表或者扫描者认为的可能存在未被检测出来的漏洞页面。这个时候，为了能够方便用户进行手动探索，应该提供一组辅助扫描检测工具。这些工具主要包含编码／解码工其、用于定制ＨＴＴＰ请求并且接收响应的工具、ｓＱＬ盲目注入信息获取工具以及本地代理工具等ｃ这类工具本身的原理并不十分复杂，但是却可以给手动探索、№ｂ应用漏洞提供极大便利。（１）编码／解码工具。编码／解码工具作用是对字符串进行处理，这些处理操作包括ｕ砒一编码懈码，Ｂａｓｅ６４编码懈码．字符串加密与解密以及对字符串进行啥希操作。用于ＨＴＴＰ请求的参数通常都需要进行Ｈｎｎ编码，否则请求中的参数不会被正确处理。编码的思想是大小写字母，数字和【，＿·】保持不变，如果是空格，转换成＋，其它的字符按字节首先加％．再按字节转换成１６进制的形式．１６进制中的字母需大写。Ｂａｓｅ６４、Ｂ船ｅ３２、Ｂａｓｅｌ６编码与解码的定义与原理可见于ＲＦｃ３４５８㈣。Ｂ拈ｅ６４已经成为网络上常见的传输８ｂｉｔ字节代码的编码方式之一，它主要是把一些二进制数转成普通字符用于网络传输ｔ以避免直接传输二进制字符时可能与协议控制字符冲突的问题。采用这种编码方式之后的内容将是原始数据的４如大小。字符串加解密方式包含ＤＥｓ，３ＤＥｓ等常用的密码学加解密算法。另外对于字硕士学位论文第四章ｗｅｂ应用漏桐检Ⅻ４关键技术研究与设计符串进行哈希的算法包括ＭＤ５，ｓ｝ＩＡｌ等。由于该工具是为方便扫描者处理字符串，以达到构造正确的Ｈ丌Ｐ请求．验证响应内容完整性，分析响应内容的目的．因此在后续实现中还可以增添很多实际遇到的处理方式。（２）定制ＨＴＴＰ请求并且接收响应。针对特定的ｕＲＩ。发送定制化的请求时，这个请求的头信息是Ｈ兀Ｐ协议中的相关字段，对于扫描者而言，记住这些字段的写法显的有些繁琐，他们只需要关注与漏洞相关字段的内容以及请求字符串的设定。因此该工具可以针对目标ｕＲＬ生成一个默认的ＨＴＴＰ请求头信息，而扫描者仅需要要根据其需要修改请求的一部分，并且手动提交请求。该工具负责接收并且显示响应的内容，并且将匹配到的扫描者定义的漏洞特征内容高亮显示。实际上，本工具是扫描软件中页面抓取模块的部分功能，只是这里将其分离出来。变成手动提交的方式以方便使用。（３）ｓＯＬ盲目注入漏洞信息获取。有时候当判定一个页面存在ｓＱＬ盲目注入漏洞的时候并不能令人信服，因为漏洞触发的错误信息被服务器屏蔽了。那么在不使用破坏性的攻击方式前．能够通过这个漏洞获取到什么信息，往往是这个漏洞严重性的很好证明。已有很多方法可以利用ｓＱＬ盲目注入漏洞提取信息，比较经典的方法有Ａｂｓｉｎｔｂｅ中实现的通过二分判断逐字节获取信息的方法。（４）本地代理工具。本地代理工具也是一类必要的辅助扫描检测工具，它的工作方式是通过在本地建立一个监听服务器，然后将ＨＴＴＰ请求发向那个监听服务器的地址和端口，代理工具可以拦截到请求的详细内容，用户可以通过该工具选择转发该请求或者放弃转发。这种方式的优点是当发送请求的是某种具体的浏览器（ＩＥ，ｃｈｒｏｍｅ，Ｆｉｒｅｆｏｘ等），用户可以很方便的看到在正常浏览器中对具体页面的请求内容应该是个什么样子，并且使用这种方式也可以检测某些在浏览器端进行内容认证的漏洞旧为浏览器端进行的认证方式是容易被绕过的）ａ４５本章小结本章主要针对ｗｅｂ应用漏洞检测关键技术进行了深入的研究与设计ａ首先研究了如何正确的描述一个ｗｅｂ应用漏洞，之后研究了可扩展的漏洞检测机制，并且针对ｗｅｂ应用漏洞的特点采用了配置扩展和插件扩展结合的漏洞扩展扫描机制ａ然后对漏洞分析器的结构和分析流程进行了深入的研究和设计。虽后，为了弥补纯自动化漏洞扫描软件的不足并且减少手工检测的难度，研究了一系列辅助手工漏洞检测的工具。硕士学位论文第五章ｑ岫应异ｊ扫描软件的详细设计与实现第五章ｗｅｂ应用扫描软件的详细设计与实现本章主要介绍了ｗｅｂ应用扫描软件的详细设计与实现。首先介绍了常用的ＨＴＴＰ传输库Ｌｉｂｃｕｒｌ并对其进行封装，设计了一个封装类以方便使用。然后介绍了网页抓取功能的设计与实现，并且指出了实现过程中碰到的问题。接下来介绍了漏洞检测功能的设计与实现。最后给出了扫描器执行的结果，结果显示，该扫描器可以有效检测常见的ｗ乩应用编洞。５１Ⅵ曲网页抓取与分析模块的详细设计与实现５１１使用Ｌｊｂｃｕｒｌ进行开发ｃｕＲＬ【捌是ｃｌ胤ｎｆｏｆｕｒｌ的简写，意思为ｃＲＬ的客户端。ｃＬＲＬ项目是由ｃＬＲＬ命令行工具和ｌｉｂｃｕｒｌ库组成的。它作为一个成熟的网络传输工具，许多操作系统已经默认集成该工具。按照ｃｕＲＬ官方文档的介绍，Ｌｉｂｃｕｄ有以下优点：（１）１ｍｃ一是一个易于使用的客户端ｕＲＬ传输库。（２）１１ｂｃ州支持多种通信协议。（３）ｌｌｂｃＩｌｒｌ高度可移植。（４）ｌｉｂｃ州免费自由、线程安全、兼容ＩＰｖ６、特性丰富、快速、社区支持。、ｕｂｃⅥｌ库被设计成易于使用的一个库．因而提供ＡＰＩ调用接口也相对比较简单。它提供三组常用的接口，ｅ船ｙ类，ｍｕｔｉ类和ｓｈａｒｅ类。其中ｅａｓｙ类一组特点是同步完成ｔ高教并且快速的，每次完成一个传输请求。而ｍｕｎ类一组具则有异步完成的特点，它能够同时开始一组传输操作。除此以外．这个库还提供其他一些有用的操作，总共有４０个左右的ＡＰＩ函数。使用该库函数进行网页抓取的流程大致如下：（１）调用ｃｌｌｒｌ＿９１０ｂａｌ－ｉＩｌｉｌ来初始化ｌｉｂｃ训所需要的程序运行环境。在每个程序中，这个调用必须在１ｊｂｃ删中任何函数被使用之前执行至少一次。值得注意的是，这个函数调用不是线程安全的，因为在它内部会调用一些非线程安全的调用。困此，一般在使用多线程处理之前执行此函数调用。（２）调用ｃ删一ｅａｓｙ—１１１ｉｔ来初始化一个ｃｕＲＬ句柄。ｃｕＲＬ句柄指向一个ｓｅｓｓｊｏｎＨａｎｄｌｅ结构，它包含了用于一次会话可能用到的数据信息如域名信息，采用何种接口信息（ｅａｓｙ．ｍｕｔｉ，ｓｈａｒｅ），请求的信息．用户指定的信息，ｕｆｌ状态，ｃｏｏｋｉｅ信息以及数据流使用的编码等。ｃｕＲＬ句柄是一个很重要的结构，虽然由于该库对其进行了封装，使得在运用的时候几乎不需要了解它的细节，但是从提供的源码中对它进行了解，有助于理解ｌｉｂｃⅥ１函数库的工作方式和其运行时需要记录的信息。硕士学位论文第五章Ⅵ协应用扫描软件的详细设计与实现需要注意的是ｃｕｄＪ拈ｙ—ｍｌｔ调用会在内容检查是否调用了ｃｕｒｌ＿ｇｌｏｂ出－ｉｎｉｔ，如果没有调用的话将自动调用ｃ删＿９１０ｂａｌ－ｉｎｉｔ，所以要让该调用具有线程安全性的话，需要在之前手动调用ｃｕｒｌｇｌｏｂｍｉｎｉｔ（３）调用ｃ州＿ｅａｓｙ－ｓｅｔｏｐｔ来设定会话参数来制定一个特定的请求，并且指定响应内容处理的方式。通过ｃｕｒｌｅ８ｓｙｓ豇ｏＰｔ函数可以设定上百个选项，ｌｊｂｃ删对诸多通信协议和认证方式的支持都是通过设定不同的参数选项来实现的。常用的参数选项如表５—１所示：表５—１ｌｉｂｃｕｒｌ中常用的设定选项选项名ＣＬＪＲＬＯＰＴＵＲＬＣＵＲＬＯＰＴＵＳＥＲＡＧＥＮＴｃｕＲＬＯＰＴＦＯＬＬＯｗＬＯＣＡＴＩｏＮＣＵＲＬＯＰＴＷ刚ＴＥＦＬＪＮＣＴＩｏＮ选项作用指定所请求的ＵＲＬ指定请求头中ｕｓｅｐＡ窟ｅｍ字段的值指定请求资源时候是否白动跟踪跳转指定获取响应资源所需要执行的操作指定存储响应瓷源的数据结构指定获取响应头所需进行的操作指定存储响应头的数据结构指明读取初始ｃ００ｋｊｅ的文件．并擞活ｃｏｏｋｉｅ相关操作指明写入ｃｏｏｋｉｅ的文件ＣＬ瓜ＬＯＰＴＷＲＪＴＥＤＡＴＡＣＬＪＲＬＯＰＴ｝瑾ＡＤＥＲＦＵＮＣＴｌ０ＮＣＵＲＬｏＰＴＷＲＩｒＥＨＥＡＤＥＲＣＵＲＬＯＰＴＣＬＪＲＬＯＰＴＣＯＯⅪＥＦ１ＬＥＣ００ＫＩＥＪＡＲＣＵＲＬＯＰＴＥＲＲＯＲＢＵＦＦＥＲＣＵＲＬＯＰＴＰＯＳＴＦｌＥＬＤＳＣＵＲＬＯＰＴＰＯＳＴＦＩＥＬＤＳＩＺＥＣＬ爪ＬＯＰＴ指定出错信息存储的缓冲区指定用于Ｐ０ｓＴ的数据指定用于Ｐ０ｓＴ的数据的长度指定代理ＰＲＯＸＹＰｏ盯ｃ０ＲＬ。ＰＴ』ｕｓ丁ｏＭＲＥＱｕＥｓＴＣＵＲＬＯＰＴＰＵＴＣＵＲＬＯＰＴＧＥＴＣＵＲＬＯＰＴＰＯＳＴ指定请求使用的方法，可以为ＤＪｅｋ，Ｔ口∞等指定请求中使用的方式为ＰｕＴ指定请求中使用的方式为ＧＥＴ指定请求中使用的方式为ＰＯｓＴ上表为常用的设置选项，而需要进行ｓｓＬ认证或者定制请求头的内容的以及其它功能的选项可以在源代码文件中找到，其使用的方式具有一致的风格。通过使用ｃｕｒｌｅａｓｖｓｄｏｐｔ调用可以定制接下来网络传输的特性。在需要维护认证ｃｏｏｋｉｅ的时候需要开启ＣｕＲＬＯＰＴｃＯＯⅪＥＦＩＬＥ选项。而在传输图片或者是音频等资源对象的时候，ｃｕＲＬＯＰＴｗＲＩＴＥＦｕＮｃＴＩＯＮ指定的函数操作中需要类似使用ｍｅｍｃｐｙ的内存区域复制函数，因为这些资源对象本身包含很多０字符，而对于字符串而言，Ｏ字符是结束符，所以使用字符串复制类函数将无法正常下载到相应的资源。（４）调用ｃｕｒｌｅａｓｙｐｅｒｆ０叫来进行传输。这个传输是同步阻塞进行的，直到堡主堂堡丝塞塑亘皇些！生旦塑塑堑堡！鲎塑堡生！壅望一传输内窑完成或者出错，该函数才会结束。通过查看上步ｃｕＲＬＯＰＴＥＲＲＯＲＢｕＦＦＥＲ中指定的缓冲区的值可啦查看错误的详细信息ａ（５）调用ｃｌｌｒｌ』ａ５ｙ－ｃｌｅａｎ“ｐ来清除一个ｃｕＲＬ句柄所占用的资源。（６）调用ｃｕｒｌ—ｇｌｏｂａｌ—ｍ１Ｉ来清除１ｉｂｃＩｌｒｌ的程序运行环境所占用的资源ａＨＴＴＰ传输类定义如下ｔｃｌａｓｓＨｎｐｕｔｉｌ｛ＨｎｐＵｔｉｌ（ｋ～ＨｔｔｐＵｔｉｌ（）；、＋ｏｉｄｓｅｔｕｒ】（ｃｏｎｓｔｓｔｄ：：ｓｔｎｎｇ＆ｕｒＩ）；ｓｍｎｇｇｅｔｕｎ（）；Ｄｕｂｌｉｃ：ＧｅｔＢｕ肺啦ｃｏｎｓｔｓⅡｌ“ｇＧｎＥＨｏｒＢｕ雎哦ｃｏｎｓｔｓＵｌｎｇｃｏｎｓｔｓｍｎｇＧｅｌＨｅａｄＢｕ行ｅｒ（）；ｂ００１ｖｏｉｄｓｔ甜ｉｃｍａ｛１ｃＰｅｒｆｏ衄ＴｒａｒＩｓｆ）：ＲｅｓｅＩＢｕ圩ｅｒｆｌ：／，开始传输∥全局初始化ｖｏ讨Ｇｌｏｂ出Ｉｎｌｔｃｕｒｌ（１仰ｇｎａｇｓ）；ｖｏｉｄｏｌｏｂ出Ｄｅ¨ｔＣｕＴｌＯ；脯理全局句柄，全局函数各调用一次ｔＤｒｏｔｅｃｔｅｄｎｇ【ｉｃｖｏ．ｄｓ诅ｔｊｃｓｉｚｅ｜ｎｔｗｄ把“ｖｏ｜ｄ＋ｂｕ鼢，ｓｉｚｅｔｔｓｉ理．ｍｚｅｎｍｅｍｂ，ｖｏｉ扩｛）：ＲｃｖＨｅａｄｅｆｓ（ｖｏｌｄ铀ｕ丘ｂＬｓｌｚｅｊｓｉｚｅ，ｓｌｚｅ—ｔｎｍｅｍｂ．Ｖｏｉｄ＋ｕｓｏｒｐＬＳｅｔＢｕ旋ｒ（ｃｈａ工岫ｕ髓ｒ，ｓｉｚｅ－ｔｓｉｚｅ，ｓ魄－ｔｎｍｅ“山ＩｓｅｔＯｐｔｉｏｎｓ（ｓ砸ｎｇｏｐｔ、ｈｌｕｅ．ｉｎｔＯＰＴＩＯＮ），ＣＵＲＬ＋ｍ－ｐｃｕ吐ｂｏｏｌｃｈａｒｍｅ丌ｏｒＢｕ脑『ｃｕＲＬｈｅａｄＢｕ如ｒ：ｓｔｎｎｇｍ∥保存传输中的错误信息ｓＩｚＥ】，ｐａｇｃＢｕｆ琵ｒ．ｍ｛ＴＴＰ协议体内容ＥＲＲＯＲｍｉｎ２）；ｍ删ＴＴＰ协议头内容∥用于传输的ｕＲＬ地址ｓⅡｉｎｇｍｓｚｕｒｌ：在上述这个类中，ＧｌｏｂｍＪ血ｔｃ洲与ＧｌｏｂａＩＤｅＩ血ｔｃｕｄ是非线程安全的，它们用于初始化】ｉｂｃｕｄ库的运行环境，各自仅需执行一次即可。ｐｅ晌ｍＴｒａｎｓ是线程安全的传输函数，用来执行请求的发送与接收，而ｗｄ船和ｒｃｖ№ａｄ啪是传输过程中使用到的回调函数，因此被声明为静巷的。ｓｅｔＯ州０１１ｓ用来为传输设置选项，它主要是将用户定义的选项值转化成传给ｌｉｂｃｌｌｒｌ库的选项值。５１２网页抓职功能设计与实现网页抓取在漏洞扫描软件中是一项很重要的功能，它决定了扫描软件是否能够检查到网站中的所有链接，匿此对最终扫描的结果是否完各有设具有决定性的意义。网页抓取的过程通常是一个用户指定的初始链接开始的，通过解析这个初始链接返硕士学使论文第五章Ⅵ协应用扫描软件的详细蹬计与实现回的响应，抓取程序会获得更多的链接。根据前面的本文３．３节讲述的网页抓取策略，抓取程序椅继续访问更多的页面，直到本站所有的页面都被访问完毕或者达到了用户事先定义的结束标准。同页抓取程序中使用的线程池叫的工作示意如图５．１所示在使用ＨＴＴＰ协议进行囤５—１罗线程进行网页抓取示意图网络资源传输的时候，由于所进行的操作延时取决于所传输资源的大小和网络传输速度的影响，在传输没有完成的时候，对网页的解析操作是被阻塞的，因此使用基多线程来处理传输过程能够提高网页抓取的效率。通过使用一个线程池来管理进行网页抓取的工作线程可以很大的减少线程不停地创建和销毁所产生的资源消耗，同时使用线程池也可以控制工作线程的数目，从而使得程序消耗的系统资源在可以控制的范围之内。线程池通过一个线程分配器查询线程池中各工作线程的状态和总的工作线程数目。当有一个新的网页抓取请求到来时，分配器先查看线程池中的工作线程是否有执行完毕正在等待任务的，如果有空闲线程，则把抓取任务给该线程去执行。如果没有空闲线程，则判断工作线程的数目是否已经达到上限，如果没有达到数目上限则创建新的工作线程来执行此抓取任务，否则，该任务暂时被阻塞，直到线程池中有空闲线程的时候再把该任务提交给空闲线程去执行。在网页抓取的过程中过程中为了使抓取程序具有足够的灵活性和有效性需要注意以下几个问题：（１）链接判重问题链接判重时需要使用全局队列中的数据，因此要保证操作的线程安全性。另外在对链接进行判重的时候不单是比较ｕＲＬ，同对要比较用于请求的参数名和参数个数是否相同。由于对于同一个动态页面提交不同的参数值往往硕士学位论文第五章ｗｅｂ应用扫描软件的详细设计与实现可以构造不同的条件从而导致动态页面显示不同的内容．但是这些不同的内容往往足服务器从数据库中读取出来并且填充在动态页面内返回给用户的。这些内容的不同并不会改变原有网页的结构，因此也就不会导致新的ｗｅｂ应用漏洞。对于这类链接．不必要每一个链接都去抓取，通常抓取一个就可以代表一类了。这类页面可以通过请求的参数名和参数个数来进行分类。（２）相对地址向绝对地址的转换在网页上抓取到的网页链接有许多是相对地址，在抓取网页的时候需要将这些相对地址转换成绝对地址才能请求到相应的网页资源。转换时需要先查看该网页是否有ｂａｓｅ属性值，如果有的话将取到的相对地址串接到ｂａｓｅ值后面即可，否则的话串接到当前网页目录后面即可。值得注意的是有的地址使用一／表示网站的根目录，使用／表示网站的当前目录，使用／表示上一级目录，因此在链接中遇到这些符号的时候需要做相应的处理，以便生成一个正确的资源ＵＲＩ。（３）网页抓取程序除了可以抓取指定的种子网址，同时也可以对用户配置的一个网址列表中的域名和ＩＰ地址进行抓取。同时，用户有些网址和ＩＰ也不愿意扫描器去进行检测，对于这些特殊的地址，文件扩展名或者是特殊的参数，扫描器需要读取配置，然后执行用户想要的行为。（４）网页抓取程序由于并发对服务器提交大量的请求，因此，它也会对目标ｗｅｂ应用服务器资源造成一定消耗，同时因为网络带宽的，如果网络状况不好而并发度太高的话，会造成请求超时而失败的后果。因此对于抓取程序设置了抓取请求延时参数。通过设定这个延时参数可以减轻扫描器对网络带宽的需求。（５）定义抓取程序的是大抓取深度。抓取深度的定义是到达一个特定的页面需要从种子网址点击多少次。通过在全局的链接队列中的每个链接中附加一个指示链接深度的值来实现。每当抓取一个新的页面的第一个链接的时候，这个值在原有的基础上加一。设定抓取程序的抓取深度可以让用户选择检测比较容易访问到的（通常也是比较重要的）页面是否存在着ｗ曲应用威胁，那些一般访问不到的页面内容就不需要被检测了．这个选项在面对网页数目急剧膨胀的ｗ曲应用时可以大大缩减用于扫描的时间。（６）对于某些不能够自动提交的验证表单，比如使用了验证码技术的登录界面，为了能够访问到授权后的页面内容．抓取程序将标记这些页面，将其归类为需要手动探索页面。在用户手动输入验证信息并且通过验证之后，扫描程序将获取到用户的登录会话，并使用它作进一步的自动扫描。５１３漏洞检测粪功能设计与实现（１）漏洞检测类详细实现。ｃＡｂｓ们ｃｔＰｌ“ｇｉｎ是一个抽象类．它提供了其子类必须实硕士学位论文第五章ｗｅｂ应Ｈ｛扫描软件的详细设计与实现现的三个方法ｈｌｌｌ、Ｄｅｉｎｉｔ和ｓｃａｎ。另外它也提供了描述一个扫描插件所需要的数据成员。ｃｌａｓｓＣＡｂｓｎ∞ｔＰｌｕｇｉｎ｛Ｄｕｂ】ｉｃ：ｃＡｂｓ耵ａｃｔＰｌｕｇｉｎ（ｖｏｉｄ），ｖｉｎｕａｌ￣ｃＡｂｓⅡａｎＰｌ”９１ｎ（ｖｏｉｄ）；ｖｉｍｍｌｖｏｉｄｓｃａＩｌ（ｃＰ８９ｅＩｎｆｏ＋ｐＩｎｆ０）＝０；ｖｌｎｕａｌｂ００１Ｉｎ∽；Ｄｅｉｎｉｔ（）；ｖｉ咖酊ｂｏｏｌ１ｍｓｔｒｉｎｇ１ｍ∥公用接口，表示父类是抽象类／，子类须实现的初始化函数Ⅳ子类须实现的清理函数ＧｅｔＩＤ（）｛ｒｄｌｌ丌ｌｎＩｄ，）ＧｅｔＰｌ“９１ｎＮｍｎｅ（）（ｒｅｔｍｍＪｌｕｇｉｎＮｍｅ０Ｇｅｔｃｍｅｇｏｒｙ（）｛陀ｔＬｌｍｍｃａｔｅｇｏＴｙ｝０Ｈｓｏｌｕｔｉｏｎ（）｛ｒｅｍｍｒｎ—ｓｏｌｕｔｉｏｎ；）ＧｅｔＲｅｆｅｒｅｎｃｅｓ０｛ｒｅｎｌｍｍＲｅｆｅｒｅｎｃｅｓ：｝ＧｅｔＩｓＥｎａｂｌｅｄ（）｛ｒｅｔｍｍ＿ＩｓＥｎａｂｌｅｄ；）ｍＩｄ：ｍＰｌｕｇｉｎＮａｍｅ；ｓ啊ｎｇｓｍ“ｇｂｏｏｌＤｒｏｔｅｃｋｄ：ＩｎｔⅣ唯一标识插件的ＩＤｓｎｌｎｇ，／插件的名称Ⅳ用于漏洞的描述ｓｔｒｉｎｇｌｍｍ—Ｐｌ“９１ｒ１Ｄｅｓｃ打Ｐｔｉｏｎ：ｍｃａｋ２０ｒｖ：Ⅳ用于漏洞的分类ｓｔｒｉｎ￡ｓｔｒｉｎｇｂｏｏＩｍｓｏｌｕｔｉｏｎ：ｍＲｅｆｅｒｅｎｃｅｓ：ｍＩｓＥｎａｂｌｅｄ：／佣于说明漏洞的解决办法Ⅳ用于说明漏洞的引用文档Ⅳ标志该插件是否已经被启用｝；对于一个具体的漏洞扫描插件而言，它需要继承ｃＡｂｓ昀ｃｔＰｌｕｇｉｎ类，并且提供自身的Ｉｎｉｔ、Ｄｅｉｎｉｔ和ｓｃａｎ方法的实现，因为这些方法会在ｃＡｎａｌｙｓｅｒ类中被调用，其中Ｉｎｉｔ与Ｄｅｉｌｌｉｔ用来做插件的初始化和清理工作而ｓｃａｎ方法用于定制化插件自身的检测流程。例如：ｃｌａｓｓｃＢｌｉｎｄｓＱＬＩＰｌｕ咖ｃＡｂｓ们ｃｔＰＩｕｇｌｎ｛Ｄｕｂｌｉｃ：ｃｓＱＬＩｑｅｃｔｌｏｎＰｌｕｇｉｎ（ｖ０１ｄ）；～ｃｓＱＬＩ脚ｅｃｔｌ０１１Ｐｌ“ｇｉｎ（ｖｏｉｄ），ｖ０１ｄｓｃａｎ（ＣＰ３９ｅＩｎｆｏ＋ｐＩｌｌｆ０）；ｂ００ｌＩＩｌｊｔＯ；ｂ００１ＤｅｉＤｉｔ（）：ｐｎ、ｒ乩ｅｖｏｉｄＡｎａｌｙｓｅＲｅｓｕｌｔ（ｓｍｎｇ＆ｐａｇｅｓⅡ）；ｖｏｉｄＦｌｎｄＡｎｃｋ（ｓ仃ｉｎｇ＆ａｎｃｋＩｎｆｏ），Ⅳ分析是否存在ｓＱＬ盲注攻击的方法∥找到一个攻击．将其记录）：第五章ｗｅｂ应用扫描软件的详细设计与实现５２扫描器执行结果下面是对某个小型新闻网站的执行扫描的结果。扫描器在ｗｉｎｄｏｗｓｘＰ平台上执行，运行该扫描器之后，在命令行的模式下输入目标ｗｅｂ应用的ｕＲＬ．扫描器首先抓取目标ｗｅｂ应用的链接．然后针对每个链接提交参数进行漏洞测试。最终将检测到的漏洞信息替换到一个ＨＴＭＬ模板之中，生成以下结果。【６、虹）ｊＩ－●＿｜曼曹ｌＬ女ｎ№吐血Ｌｍ命令注入。链接路径遍历：攻击点５·垃卫●－■—鱼蔓曼曼世堕竖鱼』！Ｌｇ垫盟！韭盟Ｌ瑚Ｊ链接攻击点囝５—２检测结果总览扫描器执行之后会生成一系列ＨＴＭＬ文档作为输出，图５—２显示的是对某正在硕士学位论文第五章Ⅵ，ｅｂ应用扫描软件的详细设计与实现运行中的站点运用该扫描器检测之后产生的结果报表。从生成的结果看来，该站点存在１８个漏洞，并且大部分是严重的ｓＯＬ注入漏洞以及ｘｓｓ漏洞，扫描器针对泼站点构造了大量的测试请求。每一个漏洞的链接指向该漏洞的详细信息，用户可通过点击该链接查看相应的详细信息文档。检测详细结果类趴ｓ。Ｌ注＾威胁等级，高惑嚣’。等＝‘。’”““““血』…一产生雁目：攻击者在用户输入中嵌人了粹０构造的ｓｏＬ罱甸，以破坏原先查询的结构．并且试图执行奉来不被允许的操作解决方囊ｚ仔细柱测脆弱点ａ“ｍｕｎ＊的输凡－消除其中可能导致ｓ啦凡攻击的关键字请柬详细内窑＝Ｏ旺Ｔ■ｈＤＴ晰女ａ岫ｊ岫Ｌｐ３５ｐ。ａｍ。虬“一，缸ｍ呲Ｊ。撇ｓ咖ＨＰＥｐ虾。。９０’Ｅ≯ｄ＾。ｄ二Ｚｒ开１Ｃａｎｂｅ舢？江Ｔ－ｓｍｌ叫扛研ｈｍ４，轴ｑｑ；ｔｅＩｃ吨＾…ｃ’＋ｊＳ难Ｓ≈ａｑ∞Ｕ８ＢⅨＵ§＝ｏＥＤ嫩００×环埘Ｃ贼０Ｅ（郇ｒｓ“一＾：ｍｉ吐４ｉ０５ｔ：‘●■＿响应详细内窑：＾ｃ‘印ｔｉｍＥ“峰“∞ｆＳ０“ｏｍ口ａｔ酣ｅ·、：ｓ正６Ｏ：Ⅵ。“：，Ｒ妇％ｈ叩．■●●■—●－ＤＴｓ对ｅｂａ如血ａ触－舶ｄ雠ｄ镕ＸＨＰｓｅ止。出￡＾ｓ啦ｓⅢｄｍｃｑ～ｃＢＲ＾ｓｃｃＤ｝ｍ斌ｉＧｏ强１艇ＧＢＧ０ⅨＬｐＩｌ５。。ｋ池ⅡｄＳｄＹＨｈＣ㈣ｉｑ“５Ｓ０ａＥｌｌ＝Ｃ…一ｄｏｓＥＤⅢｒ’ｈＤ却ｒ１０１１∞ｉｔ当∞ＳＨｒ％、ＫⅡｏｍⅢＳ）∞…ｄ女＾”ⅡＴ６ＯＣ＾＆ｅ￡∞ｍｍ匹配转肇窘：Ｃ吼ｔ嘣－Ｔ弹Ｅｌ毗协ｍ‘ｐｌ柚ｏ‘曲ｊ：］ｎ北Ⅱｅ三ｆ‘；“Ｋ妇１ｔ＞（＆ｍ血ｆ＝｛；体５Ｉ＝Ｆ，错误ｓ３：．ｋ：一１∞【，咄ｍｔｎ：ｔ一束体一：）在ｓＱＬ语句结尾之后牧到字符。（ｆ伸Ｅ）图５—３ｓＯＬ注入漏洞详细检测图图５—３显示的是ｓＱＬ注入漏洞的详细信息。对于ｓ０Ｌ注入漏洞，用户需要知道它所针对的目标ｕＲＬ以及脆弱点。对于ｓＱＬ注入漏洞产生的原因，以及相应的解决方案也在详细漏洞检测结果中体现出来。详细的漏洞检测结果图中还包含了探测该漏洞时所用到的ＨＴＴＰ请求头，以及相应的响应头，用户可以使用该请求头重复该测试。匹配特征内容给出了软件判断该处存在ｓＱＬ注入漏洞的原因。上述的请求在用户输入的信息中添加了～个单引号，而单引号在ｓＯＬ语言中是表示字符串的开始或结束的关键字，这个新加的单引号提前结束了原先查询中的字符串，从而导致原有堕主堂竺丝兰苎互兰坠！生塑塑塑鏊壁塑堂塑堡盐皇壅翌的查询多了一个单引号．因此得到一卟服务器内部错误，并且提示在“ｓＱＬ语句结尾之后找到字符’。检测详细结果类别：ｘｓｓ攻击威胁等级：高目标ｕｕ：ｈ印．■··————日ｉ血ｍｄｅｘｓｅ诎ａ甲脆弱点：Ｋｅ博啪ｄ蠢｜雾器户输＾十嵌＾了罔直脚奉Ｈｇ诹用户的舍话信息，并且试图利用谖台语信息代替用户执行掉作篝麓氯弱点神州的输＾，消际箕÷可能导轴蛳自的目页脚车请求详细内窑＝ＰＯＳＴＩｂｈｍｄ“Ｓｅ毗ｈａｓ口；五｝ｌＪｃｏ。ＨＥ＾ＳＰ轾ＳＳ：ｏ、Ｄ＾钮Ｂ舢啦∞、鼬ＣＰｏ、０００Ｉｃ３扎旺Ⅻ．＾ｓＰ征Ｔ＿ｓｍｌａｄｄ—－：ｗ“！ｊｈ“ｑ审呲ｍｍｇＣ㈣Ｌ“｝ｍｊ＾…ｃ’‘０Ｒ☆Ｅｈｑ：－ｌ拙ｈⅢｄＢｍｄ—ｐＹｍｏ叩ｔｉ“；”；…－ｒｓ三三ｏ＃■■■■■一５日趣眦、：ｏ珊ａ一扎ｃ。唧龇＋、：ｓＥ６々．ｗ砒≈Ｃｏ脚．Ｔ印哪Ｅ……々一☆ｍ删…“ｄＫ忖∞亡【·‘ｓ饥Ｐ呲旧§ｓ！ｅ５ｔ‰ｃ｝ｊ衅ｓ。ｐ口＆§ｅ甜一ｄＯ响应详细内窑ｔ＃ＨＰｌｌ二∞ＯＸＣｏ…ｎＤｍｆ、：咀二ｊ却ｆ：：ｊ：０二：Ⅲ岛ⅡＣｏｍ呱ｉ忸｝虹Ｓ！一：ｃｋ；ｅＳ“ｖ＊＾ａ…ｏ＂ｓ６０Ｘ｛附研ｄＢｖ＾Ｓ？二《＝Ｃ删Ｊ弹Ｅｎｎ枷Ｃｈｓｅ删ｃａｄｌｃ‘。ｎ口ｎ…ｅ匹配Ｉ牟怔窑ｔｓｅ“：ｈ【、ｋｎ【：ｏｌ一’ｄ）·一Ｅｓ：１∞Ｅ，Ⅲ·ｎｊ鹞：ｅ＂ｓ—ｓ｝柚Ｉ５砷２Ｈｍｎｔ３】图５—４ｘｓｓ攻击漏洞详细检测图如图５０所示．与ｓＯＬ注入详细检测结果使用的模板相同．ｘｓｓ攻击漏洞详细检测结果也包含了上述信息。在上述结果用户请求中，用户的输入项中添加了“－－）（ｓｃ＾ｐｔ’ａｋｎ（）（ｓｓＴｃｓｔｓｕｃｃｅｓｓｆＬｌｌ）叫ｓｃ＾ｐｔ＞“，该输入中包含了一个没有在该站点出现过的字符串”ｘｓｓＴｅｓｔｓｕｃｃｅｓｓ舢’。响应的结果表明，该请求得到了服务器的正确处理，并且在输出的响应中包含了该特殊字符串，这表明该页面没有对用户输入的内进行正确的处理就将其直接展现在响应的内容之中，而嵌入在用户输入中的恶意脚本代码也被执行，因此存在严重的跨站点脚本攻击漏洞。图５．５显示的备份文件检测漏洞的详细信息，从该详细信息中可蚍看到，针对目标ｗｅｂ应用构造的对于一个压缩文件的请求得到了服务器的正确响应，响应的状态码为２００，也就是处理成功。这说明扫描软件成功检测到了一个存在于阀站执行目硕士学位论文第五章Ⅵ曲应用扫描软件的详细设计与实现录中的各份文件。攻击者可以下载该文件，从中可能得到该ｗｅｂ应用的敏感信息如关键的事务处理逻辑，用户账户信息等。检测详细结果类别：备份文件威胁等级：中目标ｍ：ｈ印：－—＿·－正赴ｓｍｂ哪－脆弱点。ｍｂ掣瞄产生巨目；用户对日标、、蚰用晌备份文件没有进行正随的管理．而在ｎｂ应用的执行目录下留下了可毗被下戴的备份文件解决方素：使用指定的备份目录，清渐有冈站目录下舳备甜文件请柬详蛔内搴ｔＧＥＴ＿ｍ“ｍｂ～ｎ口１ｃｏｏｈＥ＾Ｓ？∞女Ⅸ叨＾轺日）Ｒ＾Ｓ啦回、斑ＣＣＰ０、ｏｄＯＩａ班ＯＥ：Ⅺ：０＾ｓＰ二｛Ｔ－ｓｅｓｇ咖ｄ孙０＊叫ｊｊｈｑｑ；＂ｃｄ二叫ｍ…’４如‘ｑ。Ｌ越９雌ｒｄ“Ｓ０ｓ＊＾！眦。ｌ：ｏ山ｊ０：ｃ蛳口《ｄＭｅ：、￡旺６Ａｗ叫０三￡。ｃｃ■■■●■一跏由Ｋｈ卸■■■■■■一ｒｍｌｌ２。。ｏＫ憾洋■＾＃ｔＣ…‘∞！ｎ‘￡∞Ｏ……Ｃ删Ｊ冲￡ｏ卯ⅡｃａｎｏｎＬ∞ｍｄｍｅ女ｈｉ∞Ｓ∞：∞９０１＝。１：１６乱玎＾ｃ。■“ｈｇｔ宰＝ｂＨ。！玎蜂。０３ｅｌｂ９６；：＆ｎ靠”ＸＰ口硼ｔ４ｋ＾ＳＰ二Ｅ：Ｓ“Ｋ、＆…＾．Ⅱｓ５０ＤｎＥ、札｝却ｆ：０１１０１ｓ；瑚孙ⅡＣｏ∞ｔｄｈｍｓｅｄ脯ｔｇ：！＝＇．：：∞０ｘ图５—５备份文件漏洞详细检测图５３本章小节本章首先介绍了广泛使用的ＨＴＴＰ传输库ｌｉｂｃｕｄ，并且分析了其开发流程和注意事项，基于该库，实现了用于扫描器的ＨＴＴＰ传输类。然后给出了网页抓取模块和漏洞检测模块的实现，并且分析了其中关键函数的功能，最后给出了用于实现插件机制的类定义以及常用的漏洞检测向量，并且给出了扫描器的执行结果。堡±兰生堡主————第六章结束语６兰查兰苎壅堕１工作总结本文对Ⅵ铀应用应用漏洞产生的原因以及检测的方法和技术进行了研究，同时结合ｗｅｂ应用漏洞检测本身的特点提出了一个ｗ曲应用漏洞检测方案，并且给出了一个ｗｅｂ应用安全漏洞扫描软件的总体结构设计。之后选择了Ⅵ铀应用漏洞检测中的两类关键技术作为研究对象，对其原理和相关技术进行了深入的研究。由于Ⅶ铀应用以其方便、美观和功能强大的特点越来越被广泛应用于各种领域的信息管理系统中。但是ｗｅｂ应用漏洞本身危险性却没有引起足够的重视，许多ｗ曲应用都面临这潜在的威胁。一旦这些漏洞被攻击者恶意利用，造成的影响也是很严重的。因此莸们需要尽早地找出这些潜在的威胁．并且将其消除。然而由于ｗｅｂ应用漏洞的隐蔽性和多样性，手动进行完整的检钡４工作既耗时又耗力．因此我们需要研究自动化的扫描工具对目标ｗ曲应用进行漏洞检测，同时针对某些特殊的漏洞类型，我们也要提供必要的辅助检测工具以提高检测的效率。纵观全文，本文所完成的主要工作及研究成果包括以下几个方面：１、对ｗｅｂ应用漏洞产生的原园以及对应的检测机制进行了深入研究；同时结台ｗｅｂ应用本身的特点提出了一个Ⅵ，ｅｂ应用漏洞检测方案，给出了一个可行的ｕ铀应用漏洞扫描软件框架。２、深入研究了漏洞检测软件中扫描信息获取与分析技术，对漏洞扫描软件中同页抓取目标进行了深入的分析．并且研究了页面抓取的策略，在此基础上设计了网页抓取的模块，利用该模块可以对目标Ⅵｆｅｂ应用页面进行完整抓取。针对基于正则表达式的网页元素提取和交互式网页内容进行了深入的研究。同时完成了网页元素内容的分析和提取。研究了ＤＯＭ文档特点和ＨｎＰ协议信息内容，在此摹础上设计并实现了扫描信息获取模块，达到了对目标ｗ曲应用进行扫描信息获取的目的。３、研究了漏洞扫描软件中漏洞的表示方法并且分析比较了常用的漏洞扩展检测机制在此基础上设计了一种基于插件和用户配置文件扩展的漏洞检测方法。针对主流的ｗ曲应用漏洞（如ｓＱＬ注入漏洞、ｓＯＬ盲目注入漏洞、ｘｓｓ攻击漏洞、路径遍历漏洞以及备份文件检澳４漏洞）设计并实现了相关的漏洞检测插件和一个用于ｗｅｂ应用漏洞检测的漏洞分析器。最后研究了定制ＨＴＴＰ请求、编码，解码、ＨＴＴＰ代理等用于辅助ｗｅｂ应用漏洞检测的工具，以提高Ⅵ曲应用漏洞检测的效率＝硕士学位论文第，Ｙ章结束语４、实现了一个可以检测目标ｗ曲应用漏洞的屎型软件。结果表明，该软件可以有效的检测主流的ｗｅｂ应用漏洞。６２进一步工作展望目前ｗｅｂ应用安全仍面临着巨大的挑战，随着新的攻击方式不断出现，新型的ｗｅｂ应用漏洞也被逐渐发掘出来，那么用于检测这些漏洞的方法和技术也在不断地更新。由于时间和精力等多方面的原目，本文设计的Ⅵ铀应用漏洞扫描软件并不能确保完全检测出一个复杂应用的所有安全漏洞。可｜三【从以下的几方面对其进行进～步的研究和完善：（１）通过研究最新的ｗｅｂ应用攻击方法，同时收集针对具体ｗｅｂ应用的漏洞检测方法，并且形成自身的Ⅵ，ｅｂ应用漏洞检测库。将其应用于本ｗ曲应用漏洞软件以提高本漏洞扫描软件的速度和精度。（２）针对ＦＬＡｓＨｆＬＥｘ以及ｗＰＦ，Ｅ、ｘｕＬ等应用中的漏洞检测。为了能够检测出这类应用中的漏洞，需要扫描软件能够理解这类应用脚本的语义，并且通过动态解析的方式检测出潜在的漏洞。本文并没有对如何动态执行脚本并分出漏洞做出深入的研究，为了提高扫描器的检测能力，可以针对这类漏洞的检测做进一步研究。（３）针对Ａｉａ）‘网站内容的漏洞检测，本文设计的漏洞扫描软件仅能进行静态的分析，识别其ｘｍｌＨ卸Ｒｃｑｕｅｓｔ对象，并提取其目标链接。而需要完善的解决这类问韪，需要扫描器能够模拟执行Ｊａｖａｓｃｒｉｐｔ脚本，并且动态的触发页面上的事件。（４）针对辅助扫描工具，可以开发出具有更多有用功能的工具，如弱会话验证分析工具，暴力口令破解工具等。并且将辅助工具与扫描器做到数据共享．使得辅助工具可以轻松的从漏洞扫描软件中获取数据，并且辅助工具产生的结果可以轻便的集成到原漏洞扫描软件的结果之中，甚至用于改善自动化漏洞扫描软件的行为，提高其扫描效率。（５）本工具的用户友好性ｊ丕有待加强，以使得该工具成为一款轻便．成熟，有效的ｗｅｂ应用漏洞扫描工具。总之，随着新的ｗｅｂ应用技术的不断运用，新的ｗｅｂ应用漏洞会不断涌现而新的Ⅵ铀应用漏洞检测方法也会随之出现。本论文为ｗ曲应用漏洞检测技术的研究和实现打下了一个良好的基础，目前已经可以解决部分常见的ｗｅｂ应用漏洞检测问题，期待后续的开发能够扩展更多功能，最终形成一个轻便、智能、成熟、有效的综合漏洞检测工具。硕士学位论文参考文献参考文献…ｏｕＡｓＰＡｕｃｏｎｋ—ｅ２００９［ＥＢ，０Ｌ】ｈ郇ｓⅣ”ｍｏｗａｓｐｏ咖ｎｄｅ”ｐｈｐ／０ｗＡｓＰ＿Ａｕ—ｃｏ咄ｒｅｎｃｃ＿２００９，２０１２［２］赵亭，陆余良等Ｆｕｚｚｉ“ｇ技术综述［Ｊ］．计算机应用研究，２０１０２７（３）：８２９．８３４口］ＯｗＡｓＰｊｅｓ２００４Ｆｏｕｎｄａｔｉｏｎ１１他把ｎｍｏｓｔｃｄｔｉｃｍｗｅｂａｐｐ】ｉｃ砒ｌｏｎｓｅｃｕ五ｔｙｖｕｌｎｅｒａｂｉｌｊｔｙｕｐｄｍｅ［ＥＢ／０Ｌ】ｈｎｐ：ⅣｕＷｏｗａｓｐｏ圳ｎｄｅｘｐｈｐｒｒｏｐ＿１０＿２００４，２００４ｔｅｎｍｏｓｔ【４］ＯｗＡｓＰＦｏｕｎｄａｔ】ｏｎＴｈｅｃｒｉｔｉｃ址ｗｅｂａｐｐＩｉｃ砒ｉｏｎｓｅｃ嘶ｔｙｖｕｌｎｅｒａｂｉｌｊｔｉｅｓ２００７“ｐｄ砒ｅ［ＥＢ／ＯＬ］ｈｔｔｐ：Ⅳｕｍｕｏｗａｓｐｏｒ酣ｎｄｅｘｐｈｐ仃ｏｐ－１０－２００７，２００７【５］ＯｗＡｓＰＦｏｕｎｄａｔｌｏｎＯ、ⅣＡｓＰＴ０ｐＴｅｎＰｒｏ】ｅｃｔ２０１２【ＥＢ，ｏＬ】ｈ印：∥ⅥⅥｗｏｗａｓｐｏ叫ｉｎｄｅ。ｐｈＰ／ｃ叭。ｇｏｒｙ：ＯｗＡＳＰ一。ｒｏｐ＿Ｔｅｎ＿Ｐｒｏｊｅｃｔ，２０１０［６】李昌ｗｃｂ应用安全防护技术研究与实现『Ｄ１长沙：中南大学，２０１０年５月［７】ｃＮＣＥＲｒ／ｃｃｃＮＣＥＲｌＹＣｃＡ１１１１ｕａｌＲｏｐｏｎ２叭０ｈｎｐⅣＨｒｗⅥｃｅｎｏ唱ｃ删ｓｅｒＦｉｌｏｅｓ，ＦｉＩ“ＣＮＣＥＲＴＡｎｎｕａｌＲｏｐｏｎ２０１０ｖ２ｐｄ￡２仇２［８］ｃＮｃＥＲＴ，ｃｃ２０１０年中国互联网网络安全工作报告【ＥＢ／ＯＬ】ｈ“ｐ：／／ｗｗｗｃｅｎｇｃ仉ＪｓｅｒＦｉｌｅ虾ｉｌ以０１０ａｎｎｕａｌ％２０ｒｏｐｏｎ４ｐｄ￡２叭Ｏ［９］ｗ砥ｃｈａｒｄｓｔｅｖｅｎｓＴｃＰ／ＩＰ详解卷１：协议『Ｍ１北京机械工业出版社，２０００ｓｔｅｖｅｎｓ［１０】ｗＲｉｃｈａｒｄＴｃＰⅡＰ详解卷３：ＴｃＰ事务协议，ＨＴＴ只ＮＮＴＰ和ＬＮＩｘ域协议［Ｍ］北京机械工业出版社２０００［１１］ＲＦｉｅｌｄｌ”ｇ．ＪＧｅｎｙｓ．ＪＭｏ呲ＨｙｐｅｎｅｘｔＴｒ珧ｆｅｒＰｒｏｔｏｃｏｌ～Ｈ兀Ｐ『１１［ＥＢ／０Ｌ］ｈｎｐ：∥、ｖ”ｖｗ３ｏｒｇ伊ｒｏｔｏｃｏｌｓ脓２６１６厅托２６１６ｈ叫，１９９９［１２】严承ｗｅｂ服务器安全监测系统的研究与开发『Ｄ］长沙：中南大学２０１０年５月【１３］刘奔群搜索引擎技术基础【Ｍ］北京：清华大学出版社２０１０ＨＴＴＰｓ协ｔｅ［１４］ＭｅｃｈａｎｊｓｍＭａｎａｇｅｍｅｍ２０１２『ＥＢ，ＯＬｌｈ“ｐ∥ｗｗｗｒ丘－ｅｄｉｔｏＬｏ咖＆厅托６２６５Ｒｔ［１５］ＲＦｃ３５４８一ＴｈｅＢａｓｅｌ６，Ｂａｓｅ３２，ａｎｄＢａｓｅ６４Ｄ砒ａＥｎｃｏｄｌｎｇｓ２０１２［ＥＢ／ＯＬ］ｈｎｐ：／，、、ｗｗｆａｑｓｏ咖盘ｓ厅觅３５４８ｈｔｍｌ，２０１２【１６］单国栋，戴英侠ｔ王航计算机漏洞分类研究［Ｊ】计算机工程２００２，２８（１ｏ）３—６［１７】沈寿忠基于网络爬虫的ｓＱＬ注入与ｘｓｓ漏洞挖掘『Ｄ１．西安电子科技大学硕士论文．２００９【１８］赵亭，陆余良等基于表单爬虫的Ⅵ，ｅｂ漏洞探测［Ｊ】．计算机工程，２００８，３４ｒ９１：１８６－１８８２】５［１９］ｓｃｏｎＭｅｙｅ皓．Ｅ髓ｃｔ眦ｃ＋＋，Ｔ１１ｉｒｄＥｄｉ廿ｏｎ［Ｍ］侯捷译电子工业出版社，２００６硕士学位论文参考文献［２０］赵静使用Ｒａｄｏｎ甜Ａｐｐｓｃａｎ保证ｗｅｂ应用的安全性第１部分：Ⅵ，ｅｂ安全与ＲｍｉｏｎａｌＡｐｐｓｃａｌｌ入门［ＥＢ／０Ｌ】ｈｉｔｐ：／＾ｖｗⅥ１ｂｍｃｏＩ州ｄｅｖｅｌｏｐｅｒｗｏｒｋ“ｃｎ，ｒａｔｉｏｎａｌ／ｐｃｎ—ａｐｐｓｃ丑ｎ】，２００７［２１】孙听使用ＲａｔｉｏｎａｌＡｐｐｓｃａＩｌ保证Ⅵ，ｅｂ应用的安全性，第２部分：使用Ｒａｔｉ小ｎ副Ａｐｐｓｃａｎ应对ｗ曲应用攻击［ＥＢ／ＯＬ］ｈ郇／／ｎｗｗｌｂｍｃｏｒｒ埘ｅｖｅｌｏｐｅ州ｏｒｋｓ／ｃ“ｒ缸ｉｏｎａｌ／｝ｃｎ－８ｐｐｓｃａｔｌ２，２００７［２２】丁妮ｗｅｂ应用安全研究［Ｍ］南京：南京信息工程大学．２００７［２３】郑光年ｗｅｂ安全检测技术研究与方案设计【Ｄ］北京：北京邮电大学，２叭０年６月【２４］Ｄａｆｙｄｄｓｔｕｎ砌ＭａｒｃｕｓＰｉｎｔｏ黑客攻防技术宝典：ｗｅｂ实战篇ｆＭｌ北京：人民龆宅出版社，２００９［２５］邓巍巍跨站点脚本技术的成困与防街【Ｊ】技术研究与应用，２００７．０９：２７—３０［２６］ＪｅｒｅｒｎｉａｈＧｒｏｓｓｍａｎ，Ｒｏｂｅｎ“Ｒｓｎａｋｅ”Ｈａｎｓｅｎ，ＰｅｔｋｏｃｒｏｓｓｓｙｎｇｒｅｓｓＰｕｂｌｉｓｈｉｎｇ，Ｉｎｃｓｉｔｅｓｃｒｌ口ｔｉｎｇＡｎａｃｋｓ：ｘｓｓＥｏｐｌｏｉＢａｎｄＤｅｆｃｎｓｅ［Ｍｌ【ＥＢ，ｏＬ］，【２７］ｃｒｏｓｓ－ｓｉｔｅｓｃ“Ｐｔｉｎｇｈ却∥ｅｎ谢咖ｅ池ｏｒ∥ｗｌｋｉ，ｃｍｓｓ－ｓｉｔｅ＿ｓｃ邱ｔ吨／２０１０一０４［２８］ｃｒｏｓｓ－ｓｉｔｅｓｃ＾ｐｔｌ“ｇｗｅｂＡｐｐｌｉｃａｎｏｎｓｅｃｕｄｔｙｃｏｎｓｏｎｉｕｍ（２００ｓ）Ｒｅｔｉｅｖｅｄｏｎ２００８一０５‘２８［ＥＢ，ＯＬ］ｈｎｐ：Ⅳｕ＾Ｖ砒ｗｅｂ印ｐｓｅｃｏ‘ｇ，ｐｒ叫ｅｃｔｓ仙ｒｅ“ｃｌａｓｓｅｓ，ｃｒｏｓｓ·ｓｌ‘ｅ－ｓｃｒ卸ｉｎｇｓｈ【ｍＩ，２０１２［２９］沈寿忠基于网络爬虫的ｓＱＬ注入与ｘｓｓ漏洞挖掘『Ｄ】西安：西安电子科技大学，２００９年１月口０ｒｘｓｓ（ｃｒｏｓｓｓｉｔｅｓｃｎ’ｐｎｎ由ｃｈｅｅｔｓｈｅ毗”［ＥＢ／ＯＬ］ｍｔｔｐ，ｍａｃｋｅｒｓｏ唱，ｘｓｓｈｔｍｌ［３１］邱杰勇跨站脚本攻击与防御技术研究［Ｄ］北京：北京交通大学２叭０年７月ｆ３２】ＤｏｃｕｍｅｎｔＯ巧ｅｎＭｏｄｅｌｈ婶：／ｋｎｗｉｋ呐ｅｄｉａ。ｒ咖ｌｋｌ巾ｏｃｕｍｅｎＩ－ｏｑｅｃＩ－Ｍｏｄｅｌ口３］Ｊｅ缶。ｙＲｊｃｈ把Ｌｗｉｎｄｏｗｓ核心编程【Ｍ］北京清华大学出版社口４］Ｊｕｓｔｉｎｃｌ灯ｋｅｓＱＬ注八攻击与防御［Ｍ】北京：清华大学出版社口５】ｃｈｅｃｋ埘ｔｈＡｃｕｎｅ氐ｗｅｂｘｖｕＩｎｅｒａｂｉｊＩｔｙｓｃａｎｎｅｒ［ＥＢ／ＯＬＪｈｔ［ｐ＾＋ｗｗ砒ａｃ如ｅｎｃｏｍ，Ⅵｌｌｌｌｅｒａｂｉｌｉｔｖ—ｓｃ蛐ｅ“口６］刘勃范欣周荷琴基于ｃＶＥ标准的漏洞库设计Ｃｃ】第十二届电子对抗学术年会．２００１：１７０．１７５［３７］Ｎｉｌ（【ｏ［ＥＢ／ＯＬ】，ｈｔ币：／，ｗＷ帆ｃｉｎｎｅｔ．２０１２口８］Ｐ哪ｓＰｒｏｘｙ【ＥＢ，ＯＬ］，ｈ“ｐ：Ⅳｕ＿ｗｗｐａｒｏｓＰｒｏｘｙｏ唱．２叭２口９］ｌｉｂｃｕｒｌ－ｔ１１ｅｍｕｌｔｉｐｒｏｔｏｃｏｌ矗ｌｅⅡ躅ｓｆｅｒ１ｂｃｕｎ／２０１２ｌｉｂｒａｒｙＩＥＢ，０Ｌ】．ｈｎｐ：Ⅳｃｕｒｌｈ“ｘｓｅ，ｌ参考文献［４０】ＨＰ、ｖｅｂＩｎｓｐｅｃｔａｓｏＲｗａｒｅＤｍａｓｈｅｅｔ［ＥＢ／ＯＬ］ＨＰｗｅｂＩｎｓｐｅｃｔｓｏ胁ａｒｅＤｍｓｈｅｅｔｗⅥｖｗａｔｃｂｃｏｍｎｏ／ｎｋｍｇＬｐｈｐ？ｉｄ２７５，２０１２［４Ｉ】ＮＨｓｐａｒｋｅｒｃｏｎ瑚ｕｎｉ‘ｙ［ＥＢ／ＯＬ］，ｈｎｐｓ：，／ｎｅ‘ｓｐａｒｋｅＬｚｅｎｄｅｓｋｃｏ州．２叭２【４２】Ｈｕｌ－ｚｈｏ“ｇＥｖ村ｕ砒ｉｏｎｓｈｉ，Ｂｏｃｈｅｎ，Ｌ１ｎｇＹｕ．ＡｎｍｙｓｌｓｏｆⅦ，ｅｂｓｅｃｕｒｉ【ｙｃｏｍｐｒｅｈｅｎｓｉＶｅＴｏｏｌｓ［ｃ］ｓｅｃｏｎｄＩｍｅｍａｔｉｏｎａｌｃｏｎｆｅｒｅｎｃｅｏｎＮｅｔｗｏｆｋｓｓｅｃｌｌｒｉｔｙＷｉｒｅｌｅｓｓＣｏｍｍｕｎｉｃ乱ｌｏｌｌｓａｎｄ１ｈｓｔｅｄＣｏｍｐｕｔｉＩｌ出２０１０［４３许治坤，王伟，郭添森等网络渗透技术［Ｍ】北京：电子工业出版社，２００５【４４】郑理华ｗ曲应用安全测试评估系统的研究与实现【Ｄ１长沙：国防科学技术大学２００５【４５］ｔＰｉｅⅡａｓｚｅｋａｎｄｃＶ珀ｄｅｎＢｏ唱ｈｅｓｔｎ“ｇＤｅｆｅｎｄｉ“ｇａｇ越ｎｓｔＰｒｏｃｅｅｄｍｇｓＩ币ｅｃｔｉｏｎＡｔｔａｃｋｓｔ｝ｌｒｏｕ曲ｃｏｎｔｅｘｔ—ｓｅｎｓｊｔｉｖｅＥｖｍｕ砒１０ｎ［ｃ］ｏｆ血ｅ８ｔｈＩｎｔｅｍ乱ｌｏｎａｌＳｙｍｐｏ蛄ｕｍｏｎＲｅｃｅｍＡｄｖａｎｃｅｓｌｎＩｍｍｓｌｏｎＤｅｔｅｎｌｏｎ（ＲＡｌＤ），２００５：１２４－１４５［４６］蒋继娅．刘彤，王树威ｗｅｂ应用中的ｓＱＬ注入攻击与防护方案研究［Ｊ】计算机安全．２００８．０５０９．１２［４７】张楠，张振国基于规则的检测ｓＱＬ注入攻击方法的研究［Ｊ】陕西科技大学学报自然科学版，２００７，２５（０２）：１２１＿１２３．１３２［４８】陈小兵．张汉煜，骆力明等ｓＱＬ注入攻击及其防范检测技术研究［Ｊ］计算机工程与应用．２００７，４３ｒ１１）１５０．１５２，２０３［４９］Ｊｅ箭ｅｙＥＦＦ眦乩精通正则表达式［Ｍ】北京：电子工业出版社．２００５［５０］王功明，吴华瑞，赵春江等正则表达式在电子政务客户端校验中的应用［Ｊ】计算机工程２００７，３３（０９１［５１］ｗＡｓｃ２６９．２７１ｃＬＡｓｓＩＦＩｃＡＴＩＯＮＶ２０ＴＨＲＥＡＴ『ＥＢ／Ｏ¨［ＥＢ／ｏＬ】ＨＴＴＰ：∥ＷＷＷＷＥＢＡＰＰＳＥＣ［５２】ｗｅｂ０ＲＧ２０１２Ａｐ曲砒ｌｏｎｓｅｃ岬’ｙｓｃａ肌ｅｒＥｖａｌｕ甜ｉｏｎｃ＾ｔｅｉａｈ仲：Ⅳｗｕｗｗｅｂ印ｐｓｅｃｏ叫２叭２［５３］王丰辉漏洞相关技术研究［Ｄ］北京：北京邮电大学２００６年７月【５４１Ｄｏｒｏ吐ｗＥＤｅｒＩｒＩ洫ｇ．ｃ‘弹ｔｏｇ‘ａｐｈａｎｄＤｇ缸ｓｃｃｕ眦ｙ【Ｍ】ＢｏｓｌｏｎＭＡ．ｕｓＡ：Ａｄｄ】ｓｏｎ－ＷｅｓｋｙＬｏｎｇｍａｎＰｕｂｌｉｓｈｌｎｇ［５５】ＭＢｌｓｈｏｐａｎｄＤＢａｉｌｅＨＡｃ＾ｔｊｃ甜ａｎ出ｙｓｉｓｏｎｏｆⅦｌｎｅｒａｂｌｌｉ‘ｙ诅ｘｏｎｏｍｊｅｓＰｒｏｃｅｅｄｌｎｇｓｏｆｔｈｅＮＩＳＴａｐｐｅａｒｓａｓＩｎｖｉｔ札ｌｏｎ削ＷｏｒｋｓｈｏｐＶｕｌｎｅｒａｂｊ】ｉｔｌｅｓ．Ｊｕｌｙ１９９６，Ａ｝ｓｏＣｏｍｐｕｔｅｒＳｃｉｅｎｃｅ，ＵｍｖｅＨｌｔｙｏｆＴｅｃｈｎｉｃ柚Ｒ印ｏｎ９６·ｌｌ，Ｄ印ａｎＩｎｅｍｏｆＣ出ｌｆｏｍｉａ甜Ｄａｖｌｓ［５６］Ｄｅ、ｄａ亡【ａＡｋｈａｕｅ，ＡｄａｍＳｅｃｕｎ【ｙＢａｎｈｅｔｃＴｏｗａｒｄｓａＦｏ丌ｎ副Ｆｏｕｎｄ缸ｌｏｎｏｆ、№ｂ２０１０２３ｒｄＩＥＥＥＣｏｍｐｕｔｅｒＳｅｃｕｒｌｔｙＦｏｕｎｄ越ｉｏｎｓＳｙｍｐｏｓｉ岫Ｕｎｊｖｅｒｓｉｔｙｏｆ硕士学位论文参考文献Ｃａｌｌ±ｏｍｌａ，Ｂｅｒｋｅｌｅｙ［５７］Ｉｎｃ，“ｃｒｏｓｓ·ｄｏｍａｍｐｏ】ｊｃｙｎｌｅｓｐｅｃｉ６ｃａｔｌｏｎ．”［ＥＢ／ＯＬ］Ａｖａｉｌａｂｌｅ：ｈｎｐ：∥Ⅶ州ａｄｏｂｅｃｏ州ｄｅｖｎｅ“扒ｉｃｌｅｓ止ｍｓｓｄｏｍａｌ“ｐｏｌｉｃｙｎｌｅ８ｐｅｃｈｔ训，２００８［５８］ｓｔａｍｍ，’．ＣｏｎｔｅｎｔｓｅｃｕⅢｙｐｏｌｉｃ扩［ＥＢ／ＯＬ］Ａｖａｉｌａｂｌｅ：ｈｔｔｐｓ：Ⅳｗｌｋｉｍｏｚｌｌｌａｏｒ∥ｓｅｃ埘ｉｔｙ，ｃｓＰ／ｓｐｅｃ，２００９［５９］ＡｐｐｌｅＩｎｃ，’Ｒｅｍｏｔｅｓｃｒｉｐｔｉ“ｇｗｉｔｈＩＦＲＡＭＥ，一［ＥＢ／ＯＬ］ＡＶａｉｌａｂｌｅ：ｈｔｔｐⅣｄｅｖｅｌｏｐｅＬ８ｐｐｌｅｃｏ“ｉｎｔｅｍ副ｗｅｂｃｏｎｔｅｎ“ｌｆｒａｍｅ｝ｌ廿ｎｌ，２０１２［６０］ＤａｎｉｅｌＪａｃｋｓｏｎ，ｓｏｆ【、ｖａｒｅＡｂｓｔｒａｃｔＩｏｎｓ：Ｌｏｇｊｃ．Ｌａｎｇｕ８９ｅ，ａｎｄＡｎａｌｙｓｉｓ【Ｍ】ＴｈｅＭＩＴＰｒｅｓｓ２００６『６１１冯国良动态网络安全模型的设计与应用［Ｊ］广西民族师范学２０１０，（０３）［６２】纪泳Ｔｃｐ九ｐ协议安全分析［Ｊ］网络安全技术与应用，２００４，（０８）硕士学位论文致谢致谢时间如白驹过隙，三年的研究生学习转眼之间就要结束了。在研究生生涯当中，首先要感谢的是导师王伟平教授。在导师的精心指导下，我完成了课题的调研、研发以及论文撰写，其中每个环节都倾注了导师大量的心血。王老师知识渊博、治学严谨，使我受益匪浅。在三年研究生学习期间，导师在学习和工作上都给予了我很大的帮助，值此论文完成之际，首先要对王老师表示最衷心的谢意。感谢王建新教授、朱虹老师，您们对课题的研究工作提出了许多宝贵的意见。另外，还要感谢课题组的所有同学们，他们是贺永佳，米昂，梁文员，宋良梁，桂立振，吴伟。在整个课题项目的研究过程中，大家一起学习、共同努力，完成了课题组既定目标，同时他们也对我的课题研究给予了大量宝贵的意见和建议，对我的论文撰写提供了很多有参考价值的帮助。感谢实验室的所有同学们，戴龙泉，魏珊，孙杰英．李浩，费柳风等，三年来大家共同努力、互相帮助和学习，愉快地度过了研究生生活。感谢家人和亲爱的朋友们，谢谢你们一直以来的默默支持。最后感谢在百忙之中参与论文审稿工作的各位老师，谢谢你们的建议和意见！硕士学位论文攻读学位期间主要的研究成果攻读学位期间主要的研究成果［１］网站安全监测系统ｖ１Ｏ国家版权局计算机软件著作权登记号：２００９ｓＲ０５０２０７２００９１０［２】ｗｅｂ网站安全评测及防护平台２０１０年度米塔尔学生创新创业项目：１０ＭＹｌ６面向Web服务安全的漏洞扫描器的设计与实现
作者：
学位授予单位：
黄从韬中南大学
本文链接：http://d.g.wanfangdata.com.cn/Thesis_Y2199733.aspx
