用C#怎么写一个网页链接(死链)检测工具
我要写一个死链检测工具,也就是输入一个网站的URL后,这个工具能检查这个网站的所有超链接是否失效。用C#来实现。要怎么实现?思路是什么?要是有代码+说明就最好了。直接给我...
我要写一个死链检测工具,也就是输入一个网站的URL后,这个工具能检查这个网站的所有超链接是否失效。
用C#来实现。要怎么实现?思路是什么?
要是有代码+说明就最好了。直接给我说思路也行。 展开
用C#来实现。要怎么实现?思路是什么?
要是有代码+说明就最好了。直接给我说思路也行。 展开
2个回答
展开全部
http://www.oschina.net/p/nwebcrawler?from=rss
这是一个C#下的开源网络爬虫,你可以更改Fetch函数,以实现自己的应用。
按照你的需求,Fetch函数应该做以下工作:
1、检测抽取出的URL是否是本站的URL,如果是,继续爬行,如果不是,直接丢弃;
2、检测URL是否能正常访问(用HttpWebRequest),如果不能,那么是死链。
这是一个C#下的开源网络爬虫,你可以更改Fetch函数,以实现自己的应用。
按照你的需求,Fetch函数应该做以下工作:
1、检测抽取出的URL是否是本站的URL,如果是,继续爬行,如果不是,直接丢弃;
2、检测URL是否能正常访问(用HttpWebRequest),如果不能,那么是死链。
AiPPT
2024-09-19 广告
2024-09-19 广告
随着AI技术的飞速发展,如今市面上涌现了许多实用易操作的AI生成工具1、简介:AiPPT: 这款AI工具智能理解用户输入的主题,提供“AI智能生成”和“导入本地大纲”的选项,生成的PPT内容丰富多样,可自由编辑和添加元素,图表类型包括柱状图...
点击进入详情页
本回答由AiPPT提供
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询