通过使用BeautifulSoup选择所有div兄弟姐妹 - python

我有一个html文件，其结构如下:

<div>
</div

<div>
</div>

<div>
  <div>
  </div>
  <div>
  </div>
  <div>
  </div>
<div>

<div>
  <div>
  </div>
</div>

我想选择所有同级div，而不在第三和第四块中选择嵌套的div。如果使用find_all()，我将得到所有div。

python大神给出的解决方案

您可以找到父元素的直接子元素:

soup.select('body > div')

获取顶级div标记下的所有body元素。

您还可以找到第一个div，然后使用Element.find_next_siblings()捕获所有匹配的同级兄弟:

first_div = soup.find('div')
all_divs = [first_div] + first_div.find_next_siblings('div')

或者，您可以使用element.children generator并对它们进行过滤:

all_divs = (elem for elem in top_level.children if getattr(elem, 'name', None) == 'div')

其中top_level是直接包含这些div元素的元素。