Question

用Python爬取网页并用xpath解析，得到一个内容相同的集合，为什么

Answer 1

问题出在你每次得到的都是同一个list 每次取list[0] 当然永远是重复的第一个元素。
问题出在这个//*[@id="newsRegion"]/ul/li 取得的所有的li不是一个个别的li。返回的list 虽然有几十个元素，但每一个用后面的xpath匹配都是可以得到相同的结果

Answer 2

不敢把代码贴上来麼？
内容相同的集合...空集不也是内容相同麼？
如果本来後面有.extract()去掉看看，如果去掉出不同了，
说明问题找到了...
因为你找错xpath了，你找了个无标签内容的节点
如果你说的相同都是一些标签，则尝试在最後加入 .extract()
或者在xpath(//xx/../ <- #这里加入 text() )试试
顺便送个神器－
随便收藏个页面到书签栏，右键属性把里面网址替换成下面👇的js
---------------------------------------------------------------------------------
javascript:(function()%7Bvar%20s=document.createElement('script');%20s.src='https://raw.github.com/tmanderson/XPath-Bookmarklet/master/src/xpathbookmarklet.min.js';%20document.getElementsByTagName('head')%5B0%5D.appendChild(s);%7D)();
---------------------------------------------------------------------------------
此物在任意页面按住shift移动滑鼠🖱️将准确显示xpath