Python将网页代码写入文件报错

最新推荐文章于 2024-10-24 08:45:25 发布

原创最新推荐文章于 2024-10-24 08:45:25 发布 · 707 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#python #bug #debug

收录于

报错同时被 2 个专栏收录

9 篇文章

订阅专栏

Python

2 篇文章

订阅专栏

本文介绍如何使用Python进行网页爬取并将HTML代码保存到本地文件时遇到的UnicodeEncodeError错误。当使用默认的GBK编码在Windows系统下写入包含特殊字符的HTML时，会遇到此错误。解决方案是在打开文件时明确指定使用UTF-8编码。

Python将网页代码写入文件

原始代码

import requests
res = requests.get('https://localprod.pandateacher.com/python-manuscript/crawler-html/spider-men5.0.html')
code = res.text

file = open('abc.txt','w')
file.write(code)
file.close

产生报错

UnicodeEncodeError: 'gbk' codec can't encode character '\xa9' in position 3738: illegal multibyte sequence

解决方案

在windows系统中，新建的文本文件的默认编码是GBK，我们可以在程序中提前指定编码方式为通用的UTF-8.

file = open('abc.txt','w',encoding='utf-8') # 打开文件时候采用UTF-8编码

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Puppypaw

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

简单文件写入.py

10-18

可以将信息写入到文件中去，可用于新手的练习，文件写的方式简易使用

Python 常见的17个错误分析

weixin_43932460的博客

08-26

1039

对于刚入门的Pythoner在学习过程中运行代码是或多或少会遇到一些错误，刚开始可能看起来比较费劲。随着代码量的积累，熟能生巧当遇到一些运行时错误时能够很快的定位问题原题。下面整理了常见的17个错误，希望能够帮助到大家 1、忘记在if，for，def，elif，else，class等声明末尾加 : 会导致“SyntaxError ：invalid syntax”如下： if spam == 42...

参与评论您还未登录，请先登录后发表或查看评论

Python常见报错及其解决方案

qq_56920529的博客

03-01

7159

Python常见报错及其解决方案

python爬取的数据存到txt文本文件中。

m0_64000952的博客

06-13

1276

首先咱们得有python基础并熟练使用python代码！

Python中错误与异常

suxiang198的博客

05-11

460

简述Python允许程序运行时检测错误，可以抛出异常并进行处理。代码中添加错误检测及异常处理，只要将代码放在try-except语句中，try之后的代码是要管理的代码，except之后的代码是错误发生时处理错误的代码。try: filename = raw_input('Enter file name: ') fobj = open(filename, 'r') for

writehtml方法中使用到的一个类

一个懒虫的专栏

01-22

1168

/******************************** * 微软自身的接口声明 * 由于找不到可用的Interface声明 * 只好祭出Reflector，反编译Windows.Forms * 需要的朋友可以不用辛苦的自己搞了 * ******************************/using System;using System.IO;using System.Runt

python抓取网页图片时出现OSError: [Errno 22] Invalid argument

最新发布

qq_19482125的博客

10-24

631

利用python抓取网页中的图片时，因原图名称中包含分辨率使用了*号，导致open函数运行时报错OSError: [Errno 22] Invalid argument:，尝试增加一行代码用replace函数将 * 其替换为 x ，成功解决问题。

python错误‘NoneType‘ object has no attribute ‘text‘

weixin_45319326的博客

09-29

4633

今天自己做一个爬虫小练习，代码都正确但一直报错，很是无语 import requests from bs4 import BeautifulSoup if __name__ == "__main__": url = 'https://www.shicimingju.com/book/hongloumeng.html' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit

requests库爬虫实例——房价

一个大三的python爱好者

06-01

1192

本次爬虫试图获得各个城市2015年-2021年每个月的房价均价情况考虑到不同城市等级的城市房价可能存在明显差距，我们参考城市等级排名2022给所有城市划分等级本次爬虫主要爬取一线、新一线、二线这三个级别城市的房价作者：山东大学经济学院周鹏宇 ...

python日期选择框_python:爬取带有下拉框日期的数据？

weixin_39622587的博客

02-21

636

接上：我大概用了这段代码试了下，程序既不报错也没有结果。请问错在哪？import requestsimport xlwtfrom bs4 import BeautifulSoupimport datetimeimport tqdmdef datelist(start, end):start_date = datetime.datetime(*start)end_date = datetime.da...

python爬虫（3）将抓取的网页存入文件

xman4code的博客

07-10

5186

在抓取完数据后尝试将数据存到文件里。首先看了一下python简单的存取数据的例子：首先新建一个saveString.py的文件，通过查找文件在D:/learn/python/untitled/ 目录下。在saveString.py里写入如下代码： fileOb = open('saveString.txt','w') #打开一个文件若没有就新建一个 fileOb.write('hello...

如何把Python爬取的网页保存为.txt文件

Zhang_Jackson的博客

02-01

1万+

注意问题：涉及到中文时一定要在前面加 #encoding: utf-8 获取网页要知道返回的类型，可以先用type（）方法去验证返回的数据类型 # encoding: utf-8 import requests import urllib import urllib2 postdata = urllib.urlencode({ 'username': "Zhang_Jackson",

python爬取页面内容写入文件

csdn565973850的博客

12-31

4557

python爬取页面内容写入文件 # urllib.request用来发送请求获取响应 import urllib.request import chardet # urlopen方法传入要请求的地址，返回一个响应对象 # RFC规定即使是访问根目录也要加上/ page = urllib.request.urlopen('http://www.dongao.com') # read() 从...

【新手】用python抓取html代码并保存到txt文件

qq_34215016的博客

07-14

4697

import urllib r=urllib.urlopen(“http://www.w3school.com.cn/html5/index.asp“)//获取html代码 f=f.open(“\Users\Desktop\123.txt”,”w”) f.write(f.read())//写入文件 f.close()

python抓取一个网页的源代码并存储到本地文件

吴世俊的博客

04-08

2万+

1.1读取一个网页的源代码：url：我们要爬取的网页链接（例如：url = “https://www.hao123.com”）#读取一个网页的源代码import urllib.request def read_pageHtml(url): file = urllib.request.urlopen(url) data = file.read() return data u...

python爬网页存入本地文件

ZSZ_shsf的博客

04-25

2170

python爬网页存入本地文件

python如何爬取单个网页数据，并将数据保存到相应文件当中

weixin_40228600的博客

07-15

3755

网上爬虫的案例很多。本教程结合实际开发。设计一款比较容易上手的python爬虫案例。供大家学习参考使用。以下标注了整个代码制作的写作的过程及解释说明！以上按钮代码复制粘贴到PyCharm开发工具，即可编译使用！...

pythn基础-爬取到的网页直接写入文件

qq_42459926的博客

06-15

543

# -*- coding: utf-8 -*- # @Time : 2018/6/15 16:23 # @Author : smz # @File : 爬取到的网页直接写入文件.py # @Software: PyCharm import urllib.request urllib.request.urlretrieve("http://www.badu.com",filename...

【方法】HTML网页调用本地Python程序