个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
28
4
当我尝试使用 urllib.request 和 Python 抓取 URL 中包含特殊字符的维基百科网站时，出现以下错误 UnicodeEncodeError: 'ascii' codec can't encode character '\xf8' in位置 23:序号不在范围内(128)
代码:
# -*- coding: utf-8 -*-
import urllib.request as ur
url = "https://no.wikipedia.org/wiki/Jonas_Gahr_Støre"
r = ur.urlopen(url).read()
如何使用 utf-8 编码的 urllib.request？
最佳答案
显然，urllib 只能处理 ASCII 请求，将您的 url 转换为 ascii 会给您的特殊字符带来错误。用 %C3%B8 替换 ø，这是在 http 中对这个特殊字符进行编码的正确方法，似乎可以解决问题。但是，我找不到像您的浏览器那样自动执行此操作的方法。
例子:
>>> f="https://no.wikipedia.org/wiki/Jonas_Gahr_St%C3%B8re"
>>> import urllib.request
>>> g=urllib.request.urlopen(f)
>>> text=g.read()
>>> text[:100]
b'<!DOCTYPE html>\n<html class="client-nojs" lang="nb" dir="ltr">\n<head>\n<meta charset="UTF-8"/>\n<title'
上面的答案不行，因为他是在请求处理完之后才编码，而你在请求处理的时候报错。
关于python - 使用 urllib 读取 url 时出现编码错误，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/39229439/
28
4
0
如有任何帮助，我将不胜感激。我使用 Python 3.4.1 并尝试导入 urllib.request 和 urllib.parse。没有成功。我总是收到: Traceback (most recen
我正在尝试一个教程代码，它从一个网站获取 html 代码并打印出来。我在 ubuntu 上使用 python 3.4.0。代码: import urllib.request page = urllib
根据这个answer几年前给出了一个相同的问题，Javascript 中的 encodeURIComponent(str) 应该等同于 Python 中的 urllib.quote(str, safe
1。弃用问题 在 Python 3.7 中，我使用 urllib.request.urlretrieve(..) 函数从 URL 下载了一个大文件。在文档 ( https://docs.python.
在 python 3 中，导入时出现此错误:没有名为“urllib.request.urlretrieve”的模块； “urllib.request”不是一个包 import urllib impor
import urllib print urllib.urlopen('http://www.reefgeek.com/equipment/Controllers_&_Monitors/Neptune
我在 gooogle colab 中使用来自 parselmouth 的 praat，在导入 from parselmouth.praat import call 时出现此错误 /usr/local/
是否有与 Python 的 urllib.parse.quote() 等效的 JavaScript 函数？和 urllib.parse.unquote() ? 我遇到的最接近的是encodeURI()
这个问题在这里已经有了答案: Importing installed package from script with the same name raises "AttributeError: m
Python 的 urllib.quote 和 urllib.unquote 在 Python 2.6.5 中无法正确处理 Unicode。这就是发生的事情: In [5]: print urllib
这个问题在这里已经有了答案: How to route urllib requests through the TOR network? [duplicate] (3 个回答) 关闭6年前。 示例代码
我正在制作一些简单的 python 帖子脚本，但效果不佳。 有两部分必须登录。 第一次登录使用' http://mybuddy.buddybuddy.co.kr/userinfo/UserInfo.a
我有以下脚本: from currency_converter import CurrencyConverter test = CurrencyConverter('http://www.ecb.eu
我正在编写一个小工具来监控学校的开课情况。 我编写了一个 python 脚本，每隔几分钟就会从每个部门获取当前类(class)的可用性。 该脚本一直正常运行，直到大学网站开始返回以下内容: SIS S
为什么下面的结果会出错？ import re from urllib import quote as q s = re.compile(r'[^a-zA-Z0-9.: ^*$@!+_?-]') s.s
我正在开发一个网络爬虫来自动下载巴西网站上的一些文档。并且它使用了一些未知的编码(head 标签中没有定义字符集)。 人们只需付出很少的努力就可以阅读这些文档。但真正的问题是，列出文档的页面使用的链接
我有一个程序，我需要打开许多网页并下载其中的信息。然而，这些信息位于页面中间，需要很长时间才能找到。有没有办法让 urllib 只检索 x 行？或者，如果没有别的事，之后就不加载信息？ 我在 Mac
我有一个脚本，使用 Urllib 打开我安装了谷歌分析的网页。我的问题是，为什么如果我执行脚本，GA 上不会显示访问次数？ 最佳答案 Google Analytics 脚本是 JavaScript 代
我正在尝试下载航类搜索结果，但我不断收到一个与通过右键单击并手动存储网站获得的文件不同的文件。我已经尝试过 urllib 、 urllib2 以及我在这里找到的每个命令都无济于事。 这是一个 MWE:
我最近用Python(Windows 64位v3.3.1)编写了一个程序，并试图将其移植到D。我遇到的问题是我使用了urllib Python 中的模块，特别是 urllib.request.Requ
我是一名优秀的程序员,十分优秀！