探险家的秘密武器：Python爬虫

在一个名为“代码王国”的神秘地方，有一位著名的探险家，他的名字叫“爬虫侠”。爬虫侠不是普通的探险家，他是一位Python程序员，擅长使用代码作为武器，探索未知的世界。今天，他接到了一个任务：从遥远的“电商星球”的店铺中，获取所有的商品信息。

准备阶段：装备升级

在出发前，爬虫侠需要准备一些必要的装备。首先，他需要导入一些强大的库，这些库就像是他的武器和盔甲。

import requests
import json

然后，他需要设置API请求的URL和密钥，这些就像是进入电商星球的通行证。

api_url = "https://api.example.com/products"
api_key = "your_api_key_here"
headers = {
    "Authorization": f"Bearer {api_key}",
    "Content-Type": "application/json"
}

探险开始：勇闯数据海

装备就绪后，爬虫侠踏上了征程。他使用requests这个强大的武器，向电商星球发送了一个GET请求。

response = requests.get(api_url, headers=headers)

如果一切顺利，他将获得一个包含商品信息的宝藏——一个JSON格式的数据包。爬虫侠小心翼翼地打开这个宝藏，开始解析里面的秘密。

data = response.json()
products = data['products']
for product in products:
    print(f"Product Name: {product['name']}, Price: {product['price']}")

遇到挑战：异常处理

在探险的过程中，爬虫侠可能会遇到各种挑战，比如网络不稳定、API限制等。这时，他需要使用异常处理这个技巧，来确保自己不会在这些挑战中倒下。

try:
    response = requests.get(api_url, headers=headers)
    response.raise_for_status()  # 检查请求是否成功
    data = response.json()
    products = data['products']
    for product in products:
        print(f"Product Name: {product['name']}, Price: {product['price']}")
except requests.exceptions.HTTPError as errh:
    print(f"HTTP Error: {errh}")
except requests.exceptions.ConnectionError as errc:
    print(f"Error Connecting: {errc}")
except requests.exceptions.Timeout as errt:
    print(f"Timeout Error: {errt}")
except requests.exceptions.RequestException as err:
    print(f"Error: {err}")

探险结束：收获满满

经过一番努力，爬虫侠终于从电商星球带回了所有的商品信息。他像一个真正的英雄一样，将这份宝藏展示给了代码王国的居民们。