构建搜索引擎时爬虫抓取的网页需要下载到本地吗?又如何构建数据库存放下载的网页

 我来答
zycwa3de
2012-04-08 · TA获得超过188个赞
知道小有建树答主
回答量:386
采纳率:0%
帮助的人:317万
展开全部
要下载到本地,因为你要根据抓取的网页进行解析和索引,数据库不用存放太多信息,根据你的具体需要存下网址、标题、内容之类的
精致且灿烂丶典范k
2012-04-08 · TA获得超过9583个赞
知道大有可为答主
回答量:1.3万
采纳率:3%
帮助的人:4119万
展开全部
弄个搜索引擎的实例(java写的)(爬虫从网页上抓取内容再检索再lucene搜索出来)简单的最好 ivspider 一个C语言开发、封装为dll的爬虫引擎,如把网页或图,yGwGjp
本回答被网友采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式