python - Beautifulsoup 从无序列表中提取文本和链接 div < ul

转载 作者：搜寻专家 更新时间：2023-10-31 08:32:45 26 4

我试图从此网页的左侧提取城市名称 (http://www.silvan.dk/butikker)。原因是我需要提取每个城市的物理地址(在链接指向的页面上可以找到，但是，我暂时开始提取城市名称)。更准确的说是从这个容器。然而，由于我才刚刚开始使用 Python 和 Beautifulsoup，所以我无法提取想要的信息。

结果应该给我:城市，城市链接。

到目前为止我有:

import urllib2
import sys, locale, os, re
import lxml.etree
from bs4 import BeautifulSoup

def cp65001(name):
if name.lower() == 'cp65001':
    return codecs.lookup('utf-8')

html_page = urllib2.urlopen("http://www.silvan.dk/butikker",'w')
soup = BeautifulSoup(html_page)
li = soup.select("ul > li > a")
for link in li:
    print link.get('href')

这给了我以下输出:

#1
#2
#3
#4    
#5
#6
#7
#8
#9    
#10
#11
#12
#13
#14    
#15
#16
#17
#18

如果有人能指导我找到解决方案，我将不胜感激。我厌倦了使用

div = soup.find('div', id='leftContent')
lis = div.find_all('li')
num_lis = len(lis)

但是运行一圈就停止工作了，我不知道为什么？感谢您的宝贵时间。

最佳答案

更改您的选择器:

li = soup.select("ul > li > a")

到:

li = soup.select(".subMenu li a")

输出:

http://www.silvan.dk/butikker/ballerup
http://www.silvan.dk/butikker/birkeroed
http://www.silvan.dk/butikker/city2
http://www.silvan.dk/butikker/esbjerg
http://www.silvan.dk/butikker/fisketorvet
http://www.silvan.dk/butikker/fredericia
http://www.silvan.dk/butikker/frederikshavn
etc

您可以找到非常好的选择器文档 here

关于python - Beautifulsoup 从无序列表中提取文本和链接 div < ul <li (斯堪的纳维亚字符)，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/19267175/

26 4 0

• jQuery:仅选择 ul，而不选择 ul ul

  我正在尝试使用 jQuery 来提交一个基本的 Accordion 样式菜单。 这是菜单: http://www.cybart.com/bscg/ 这是为其提供 Accordion 功能的代码片段:

• html - 增加嵌套 (ul ul ul li) 下拉导航列表项的宽度

  这是我的网站: http://www.simply-a-christian.com/index.html 在导航栏上，如果您移动到: 信念 玛丽安教义 您可以看到每个 Marian Dogma(列出了

• jquery - 当 ul ul 活跃时 ul parent 移动

  这可能是一个很容易回答的问题，但是，我找不到解决方案。我已经建立了一个非常简单的菜单，每当我将鼠标悬停在 ul 父项上时，它的子项 ul ul 就会变得可见。基本上它是有效的，但 parent 让位于

• HTML 下拉菜单 : "nav ul ul ul li" Too Low

  这是一张图片: 问题是(你可以看到):“页面”按钮太低，无法点击。我想要的是它应该靠近“联系人”。 现在是代码: HTML Home About

• jquery - 如何在不破坏每个
  位置的情况下向嵌套
  列表中的每个
  添加滚动条

  我有一个这样的嵌套 ul 列表: Subcat Subcat2

  • javascript - ul li a affecting ul li ul li a

    如果标题不好理解，我来解释一下... 我有一个 css/jquery 切换菜单。按“+”号时它变大，按“-”号时它变小。我使几个元素的填充、边距和高度在切换/单击时发生变化。菜单顶部充满了链接，然后当

  • javascript -
    上的 jQuery .appendTo() 适用于所有
    而不是指定的

    我正在尝试创建一个列表，该列表会在单击上/下时更改它的第一个元素。 This is what i want to do. 此代码运行良好。但问题是我也在我网站的主菜单中使用列表，并且这段代码也在我的主

    • html - 如何溢出 3 级深度菜单 ul > li > ul > li > ul > li

      我需要使用水平缩放的 ul > li > ul 的组合来创建一个菜单。每个 ul 都应该有一个 max-height 并在溢出时滚动。悬停在 li 上时，如果里面有另一个 ul 标签，它应该会在右侧打

    • html - ul in ul 的正确语义

      我正在 ul 中编写 ul 来制作 Accordion 式菜单。但是当我在 html 验证器中检查下面的代码时，它给了我这些错误 Element ul not allowed as child of

    • jquery - 将 LI 从 UL A 拖到 UL B 并从 UL A 中删除？

      我有两个列表，第二个列表是可排序的，我可以从第一个列表拖动到第二个列表，但不知道如何从第一个列表中删除。 如果我删除 helper: "clone" ，该项目 (li) 会被删除，但拖放操作效果不佳(

    • html - 当 css ul li 元素超出 ul 时，如何匹配 ul 的动态宽度

      JSFiddle 问题:https://jsfiddle.net/td6szj3o/ /我有一个 ul li，每个 li 都有标准文本项。该列表是动态的，因此有时每个内容 li 小于其所在容器的 wi

    • css - 第二个 ul li 元素(在另一个 ul 内)显示在第一个 ul 上

      我有两个元素 - 一个在另一个里面。问题是第二个元素显示在第一个 ul li 元素的顶部。 HTML: Home Merchants

    • javascript - 在
      • 的第一级上获取没有 id 和 e.preventDefault() 的
        列表中的子

        我有一些结构如下的菜单: First level link 1 Child link 1 Child link 2

        • xpath - 在Tritium中将
          拆分为两个

          我有很长的ul，李的数目不是恒定的 1 2 3 4 5 6 7 8 9 我想使用Moovweb SDK将其分为两个ul。 1 2 3 4

          • javascript - jQuery on ul 上的函数和其中的 ul

            已关闭。此问题不符合Stack Overflow guidelines 。目前不接受答案。 这个问题似乎偏离主题，因为它缺乏足够的信息来诊断问题。 更详细地描述您的问题或 include a mini

          • javascript - 如何选择子 ul 而不是父 ul？

            我有一棵信息“树”，显示在许多嵌套列表中(ul li ul li ....)。两个问题: 当我点击时，父 ul 和子 ul 都会切换。 如果我点击在其中没有 ul 的嵌套列表中(例如，下面的 Cran

          • jQuery:将最后一项从 UL 移动到新的 UL

            我正在尝试在 jQuery 中创建以下内容: 我有一个项目列表(例如 10 个)。如果项目数超过 6，则将剩余项目(从 6 到 10)复制到新的 UL 中以创建下拉菜单结构。 菜单的第一个版本是 ht

          • jquery - 单击切换 ul - 单击其他地方隐藏 ul

            嘿大家 - 我在工作中尝试 jquery 的第二天，有点卡住了。 我有一个无序列表的链接..在无序列表的链接中 点击 ，我想要的 child 变得可见。 点击(文档上的任何位置)后，我想要 child

          • JQuery - 从 UL 列表中查找列表项最少的 UL

            嗨，这就是我想要实现的目标。我有一个 ID="columns"的 div，在本例中我有 3 列，但可能会有更多或更少...我正在使用 JQuery 动态添加列表项。

          • jQuery append() 不添加

          这个问题已经有答案了: 已关闭10 年前。 Possible Duplicate: Using .after() to add html closing and open tags 我想显示高度几乎相