C#中用httpwebrequest来抓取网页信息,由于数量过多,而导致网站拉黑,怎么将程序模拟成网页浏览。。。
3个回答
展开全部
是的,修改HTTP头模拟搜索引擎抓取就可以了,不然别人网站有压力,自然会认为你在CC攻击。。
追问
能具体点吗?不太会这些。。。感谢啦!
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
这个肯定数封IP了,只能代理IP
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
1.你使用上代理IP
2.httpwebrequest抓网页,你要随机停顿一下 ,你直接给人家网站拉垮了咋个行呢
2.httpwebrequest抓网页,你要随机停顿一下 ,你直接给人家网站拉垮了咋个行呢
本回答被提问者采纳
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询