添加 .text 属性时出现 AttributeError

Question

我已经尝试过下面的脚本，它工作得很好：from bs4 import BeautifulSoupimport requests pr= input("search: ")source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).contentsoup = BeautifulSoup(source, 'html.parser')url= soup.find_all('div', class_=('_3O0U0u'))whole_product_list= []whole_url_list= []main_product_list= []main_url_list= []        for i in url:    tag_a_data= i.find_all('a')    for l in tag_a_data:        product_list= l.find('div', class_= '_3wU53n')        if product_list:            main_product_list.append(product_list.text)        else:            product_ok= l.get('title')            main_product_list.append(product_ok)print(main_product_list) 例如，如果我传递“samsung”作为输入，它会返回具有给定类 ID 的可用属性“div”的列表，该属性作为参数传递，如果我传递其他内容作为输入，例如具有“title”的“shoes”属性它返回 html 中所有可用标题的列表。但如果我颠倒顺序，如下所示：from bs4 import BeautifulSoupimport requests pr= input("search: ")source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).contentsoup = BeautifulSoup(source, 'html.parser')url= soup.find_all('div', class_=('_3O0U0u'))whole_product_list= []whole_url_list= []main_product_list= []main_url_list= []        for i in url:    tag_a_data= i.find_all('a')    for l in tag_a_data:        product_list = l.get('title')                if product_list:            main_product_list.append(product_list)        else:            product_ok= l.find('div', class_= '_3wU53n').text            main_product_list.append(product_ok)    print(main_product_list)它开始给出属性错误：Traceback (most recent call last):  File "tess.py", line 28, in <module>    product_ok= l.find('div', class_= '_3wU53n').textAttributeError: 'NoneType' object has no attribute 'text'我不明白为什么第一个脚本基于 if-else 操作运行良好，但第二个脚本却不能。

Answer 1

在这一行中：

product_ok= l.find('div', class_= '_3wU53n').text

l.find('div', class_= '_3wU53n')返回None，意味着它没有找到 div。None值没有text属性，因此会引发AttributeError异常。

解决方法是使用新的 walrus 运算符：

if product_ok := l.find('div', class_= '_3wU53n'):
    product_ok = product_ok.text

Answer 2

假设您为“l”值收集了以下数据

• 项目1<title>title1</title><div class_= '_3wU53n'>xyz</div>

• 项目2<title>title1</title><div>xyz</div>

• 项目3<title>title1</title><div class_= '_3wU53n'>xyz</div>

使用第一个代码，您的product_list变量将包含 item1 和 item3。然后您就可以获取title给定项目的可用信息。所以代码运行没有任何问题。

使用第二个代码，您的product_list变量将包含 item1、item2 和 item3。但在这种情况下，您将无法获得所需的div标签，因为第二个项目不存在该标签。这会导致属性错误。

简单的事情是数据库中的项目总是有一个标题，但很可能不会总是有所需的div标签。

以下更改应该可以使其正常工作：

from bs4 import BeautifulSoup

import requests 

pr= input("search: ")

source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).content

soup = BeautifulSoup(source, 'html.parser')

url= soup.find_all('div', class_=('_3O0U0u'))

whole_product_list= []

whole_url_list= []

main_product_list= []

main_url_list= []

        

for i in url:

    tag_a_data= i.find_all('a')

    for l in tag_a_data:

        product_list = l.get('title')

        

        if product_list:

            main_product_list.append(product_list)

        else:

            if l.find("div", class_='_3wU53n'):

                product_ok= l.find('div', class_= '_3wU53n').text

                main_product_list.append(product_ok)    

print(main_product_list)