Lua网络爬虫实战：使用http服务器获取虾皮商品信息的全过程

这段 Lua 代码是一个简单的爬虫示例，使用了 Lua 中的 http 模块进行网络请求，并设置了代理信息。以下是对代码的一些解释和注意事项：

1. 安装 http 模块：

luarocks install http

这个命令用于安装 Lua 的 http 模块，以便在程序中使用 HTTP 请求功能。

1. 代理设置：

local proxy_host = "www.duoip.cn"
local proxy_port = 8000
local proxy_url = "http://" .. proxy_host .. ":" .. proxy_port
http://www.jshk.com.cn/mb/reg.asp?kefu=xiaoding；//爬虫IP免费获取；

这里定义了代理服务器的主机和端口，并构建了完整的代理 URL。

1. 请求 URL 定义：

local request_url = "https://shopee.tw/search?q=虾皮商品&sort=新品上市"

这是要发送 GET 请求的目标 URL。在这个示例中，它是虾皮的商品搜索页面。

1. 发送 GET 请求：

local response = http.request(request_url, {
   host = "shopee.tw",
   port = 443,
   headers = {
      ["User-Agent"] = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3"
   },
   proxy = proxy_url
})

使用 http.request 函数发送 GET 请求。这里设置了请求的目标主机、端口、请求头（User-Agent 用于模拟浏览器请求），以及代理信息。

1. 打印响应内容：

print(response.body)

最后，打印出响应内容。在实际的爬虫应用中，你可能会对响应进行进一步的处理，例如解析 HTML 内容、提取信息等。

请注意，爬取网页数据时要遵守网站的使用规定，确保你的爬虫行为是合法和合规的。使用代理是为了防止被目标网站限制访问频率，但在实际应用中也需要注意代理服务器的可用性和合法性。