网络爬虫程序采集到的网页数据怎么在mysql中用sql语句进行清洗
2个回答
展开全部
你这个架构设计有问题，网页爬虫采集的网页数据结果一般都是非结构化的，会先存储在对象存储或者非关系型数据库中。针对非结构化数据中数据元素的提取和处理需要由其它的程序来完成，最后的结果可以考虑存放在MySQL一类的关系型数据库中。数据采集和分析处理必须解耦开。
本回答由提问者推荐
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
展开全部
好的，，我给你做.
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
推荐律师服务：
若未解决您的问题，请您详细描述您的问题，通过百度律临进行免费专业咨询
