Python爬虫所见问题集合:

1. NotImplementedError: Only the following pseudo-classes are implemented:
nth-of-type

Answer:nth-child 改为 nth-of-type

3.expected string or bytes-like object:

Answer:进行编码转换。

eg:re.findall(r’’,html.decode(‘utf-8’))

4. 'gbk' codec can't encode character '\xa5' in position 184823: illegal
multibyte sequence

Answer:f = open(html,’w’,encoding = ‘utf-8’)

5. 网页乱码问题:中文乱码

Answer :response = requests.get(url,headers = header).content

#content解决乱码

6. expected string or bytes-like object

Answer:转换为字符串格式,str(urls)

urls = soup.select(' div > div.nei_left.fl > ul > li:nth-of-type(2)> a')[0]

Href = re.findall(r'<a href="(.*?)" target="" title=".*?">(.*?)</a>',str(urls))

7.  Raise URLError (err)  <urlopen error [Errno 11001] getaddrinfo failed>

通常,URLError在没有网络连接(没有路由到特定服务器),或者服务器不存在的情况下产生

技术
©2020 ioDraw All rights reserved
程序员升职记第28关三排序代码使用ADB命令卸载安卓设备上的应用centos7部署springboot jar包网上赚钱的门路方法,大部分人都是利用这三种方法!每周计划思维导图模板mac解决Enter passphrase for key每次输入密码PHP 先返回结果到前端,PHP代码继续执行后续的任务MariaDB数据库用户创建/删除及权限授权/撤回Docker容器和镜像的导入、导出天猫等网店要挟用户成风?要硬钢!别惯他们臭毛病