首页 > 其他分享 >电商平台数据批量获取自动抓取的实现方法分享(API)

电商平台数据批量获取自动抓取的实现方法分享(API)

时间:2024-10-08 14:22:53浏览次数:8  
标签:obj ecombdimg 抓取 aio API temai https 电商 com

电商竞争白热化的今天,一个电商卖家往往会在多个平台铺设店铺来获取更多的客户。有没有什么高效的电商数据采集工具可以整合多个店铺的数据呢。

在这里给大家推荐使用API,完成主流电商平台数据采集、ERP、OA等业务系统数据采集、行业数据采集。

API取数&账号授权取数

对于大多数电商平台来说,都有自己的官方API接口并开放部分数据,可以实现自动的API电商数据采集。

以亚马逊平台为例,官方开放了API接口,为卖家提供在店铺后台直接下载到的数据报告,如订单、退货、库存、流量、广告等数据。在九数云里账号授权成功后,即可在任意电脑及浏览器登录进行数据同步和管理,不再需要卖家人工去后台下载报表。

custom-自定义API操作(支持封装淘宝抖音拼多多开放平台的API)

公共参数(获取测试key

名称类型必须描述
keyString调用key(必须以GET方式拼接在URL中)
secretString调用密钥
api_nameStringAPI接口名称(包括在请求地址中)[item_search,item_get,item_search_shop等]
cacheString[yes,no]默认yes,将调用缓存的数据,速度比较快
result_typeString[json,jsonu,xml,serialize,var_export]返回数据格式,默认为json,jsonu输出的内容中文可以直接阅读
langString[cn,en,ru]翻译语言,默认cn简体中文
versionStringAPI版本

请求参数

请求参数:api=

参数说明:其它参数:参考淘宝开放平台接口文档,与淘宝的参数一致 https://open.taobao.com/api.htm?docId=140&docType=2

名称类型必须描述
apiString淘宝开放平台的接口名(如:taobao.picture.upload( 上传单张图片 ))
sessionString授权换取的session_id
[其他参数]String其它参数:参考淘宝开放平台接口文档,与淘宝的参数一致
https://open.taobao.com/api.htm?docId=140&docType=2

响应参数

Version: Date:

名称类型必须示例值描述

response

Mix0[]响应内容,不同的接口返回内容不一样,具体参考 https://open.taobao.com/api.htm

 

 

响应示例

"item": {
		"num_iid": "3514453298386183303",
		"title": "【古蒂歌品牌】精致磨毛纹理 叠穿衬衣女春装新款 高档磨毛衬衫 ",
		"desc_short": "",
		"price": 72,
		"total_price": "",
		"suggestive_price": "",
		"orginal_price": 72,
		"nick": "黄岛区古蒂歌服饰店",
		"num": "",
		"detail_url": "",
		"pic_url": "https://p9-aio.ecombdimg.com/obj/temai/e9ed9a7b06bbbf03b769075a4cf12045www876-876",
		"brand": "Gudige/古蒂歌",
		"brandId": null,
		"rootCatId": 20005,
		"cid": 20179,
		"desc": "<p><img src=\"https://p9-aio.ecombdimg.com/obj/temai/9a37b5d7b8c164e0dec78115f7239c48455376e7www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/50abfe5404fcc642266e97ccfba53d46afc51a0cwww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/c2390e8b150255cbe2311467091844c296eaf6bawww750-1095\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/d312afa85676443c7a807688d4aab85cwww800-800\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/1abe68729b067631cb5844bfcd88fa439c16a03cwww750-1070\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/330154d06bd7acfbc9fe46744a84f295www750-987\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/00ad2cafeffa2a85f3ef914fe1e17d35www1098-616\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/5910e6bf5d211c448fa269d67b7b22bccbc7e01bwww750-1038\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/ef7c2487660576bb1e35e0f675a7d5ee89566e7ewww750-971\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/f3ba562f0e4762641049268a558a243d68d0f4d9www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/9130ca6f53486030a306f48f44923e8796e59ca9www750-1105\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/a3bf398e3439fe5c42c6cec8c3b2d008523a6f99www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/25f773b7a62d0b789d015198261c3aac0224d676www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/216c81f4115d9866134976c4e55b79d1cdfcfbdbwww750-955\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/c819abbf998aa58443c6e383fe8da9a9d7a25afewww750-834\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/82c9518b7438a5d30fb58efa1d872e3b50fa4a2ewww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/78c6e8944f3d936654accf6059e6f5adwww800-800\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/40c2fc84c9e265b8a9897b8b77ce7764f347d00fwww750-952\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/79b4eecb3924bc01d2143270ebf015fdb2d0127fwww750-960\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/502e0ebbb534d4bcbdbca0ce158ee0ef917d9d1fwww750-1014\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/7c3272bbd8ae080d91636773df0c0bc8bc2c5b1cwww750-1038\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/2f9805ac9215f89da063aa3da473b06fa0591780www750-1080\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/2713d6e8adf3fe59c0fd3d2c15829e924f63a46ewww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/b7331dd00e686a261912a54af4ae3f2b61311082www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/682379cd908fc0ee170b6ab914e9df374651c44bwww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/c1bc79f0eec46b8d6dc0c363dadc2f013d32f4a7www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/3fc35a21ed6161836e78f18a0c506112dc6c19d2www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/3c5d22702e1cd2de45c9ec3671c4154fe33e5ebewww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/b4d1d18942ec15e5f64f6f5aadf9b467cd92e21bwww750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p9-aio.ecombdimg.com/obj/temai/87a96eccbacf3b3a20d99266f2d4b801f2352fa5www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p3-aio.ecombdimg.com/obj/temai/7db68c13bfd5ed2b1d27e85248ba85f60a9d24d2www750-1136\" style=\"max-width: 100%;\"/><img src=\"https://p6-aio.ecombdimg.com/obj/temai/75a8aa104430fc1227019d3b38f7a83e2f451e0bwww750-1136\" style=\"max-width: 100%;\"/></p><img src=\"https://www.o0b.cn/i.php?t.png&rid=gw-1.6256890da39ad&p=1778786962&k=i_key&t=1649838349\" style=\"display:none\" />",
		"item_imgs": [
			{
				"url": "https://p3-aio.ecombdimg.com/obj/temai/e9ed9a7b06bbbf03b769075a4cf12045www876-876"
			},
			{
				"url": "https://p3-aio.ecombdimg.com/obj/temai/f6543c94a2c3c724fd57a8c61d6e79ec7bb846f5www800-800"
			},
			{
				"url": "https://p6-aio.ecombdimg.com/obj/temai/d312afa85676443c7a807688d4aab85cwww800-800"
			},
			{
				"url": "https://p3-aio.ecombdimg.com/obj/temai/104f75934f295b6395ec792ad755eed8b10f543dwww800-800"
			},
			{
				"url": "https://p3-aio.ecombdimg.com/obj/temai/3d65927c478ab58d06ecc31e6f541d2099e2429cwww800-800"
			}
		],
		"item_weight": "",
		"post_fee": 0,
		"freight": 0,
		"express_fee": "",
		"ems_fee": "",
		"shipping_to": "",
		"video": [],
		"sample_id": "",
		"props_name": "0:1716041646595119:颜色分类:米杏色;1:1716041646595135:颜色分类:灰蓝色;2:1716041646596108:颜色分类:卡其色;3:1716041646596124:颜色分类:珍珠白;0:1716041646596156:尺码:S 建议100斤内穿;1:1716151478027315:尺码:M 建议100-113斤;2:1716151478028291:尺码:L 建议110-123斤;3:1716151478028307:尺码:XL 建议120-133斤;4:1716151478028323:尺码:2XL 建议130-158斤穿",
		"prop_imgs": {
			"prop_img": []
		},
		"props_imgs": {
			"prop_img": []
		},
		"property_alias": "",
		"props": [
			{
				"name": "上市年份季节",
				"value": "2022"
			},
			{
				"name": "品牌",
				"value": "Gudige/古蒂歌"
			},
			{
				"name": "图案",
				"value": "纯色"
			},
			{
				"name": "成分含量",
				"value": "95%以上"
			},
			{
				"name": "服装款式细节",
				"value": "口袋,纽扣"
			},
			{
				"name": "服装版型",
				"value": "宽松"
			},
			{
				"name": "衣长",
				"value": "常规款"
			},
			{
				"name": "衣门襟",
				"value": "单排多扣"
			},
			{
				"name": "袖型",
				"value": "常规"
			},
			{
				"name": "袖长",
				"value": "长袖"
			},
			{
				"name": "货号",
				"value": "251"
			},
			{
				"name": "面料材质",
				"value": "聚酯纤维"
			},
			{
				"name": "面料材质成分含量",
				"value": "95%以上"
			},
			{
				"name": "领型",
				"value": "POLO领"
			},
			{
				"name": "风格",
				"value": "通勤"
			}
		],
		"total_sold": "1.3万+",
		"skus": [],
		"seller_id": "",
		"sales": 13000,
		"shop_id": "sXahcZg",
		"props_list": {
			"0:1716041646595119": "颜色分类:米杏色",
			"1:1716041646595135": "颜色分类:灰蓝色",
			"2:1716041646596108": "颜色分类:卡其色",
			"3:1716041646596124": "颜色分类:珍珠白",
			"0:1716041646596156": "尺码:S 建议100斤内穿",
			"1:1716151478027315": "尺码:M 建议100-113斤",
			"2:1716151478028291": "尺码:L 建议110-123斤",
			"3:1716151478028307": "尺码:XL 建议120-133斤",
			"4:1716151478028323": "尺码:2XL 建议130-158斤穿"
		},
		"seller_info": {
			"nick": "黄岛区古蒂歌服饰店",
			"item_score": 4.86,
			"score_p": 4.95,
			"delivery_score": 4.99,
			"shop_type": null,
			"shop_logo": "https://p3-aio.ecombdimg.com/obj/temai/1611656872ab5f2645a9f6cf20810db68844e3e3f5cf248f0f",
			"sid": 1716041646595087,
			"title": "古蒂歌精品女装店",
			"shop_name": "古蒂歌精品女装店"
		},
		"tmall": "",
		"error": "",
		"location": "广东省",
		"desc_img": [
			"https://p9-aio.ecombdimg.com/obj/temai/9a37b5d7b8c164e0dec78115f7239c48455376e7www750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/50abfe5404fcc642266e97ccfba53d46afc51a0cwww750-1136",
			"https://p9-aio.ecombdimg.com/obj/temai/c2390e8b150255cbe2311467091844c296eaf6bawww750-1095",
			"https://p3-aio.ecombdimg.com/obj/temai/d312afa85676443c7a807688d4aab85cwww800-800",
			"https://p9-aio.ecombdimg.com/obj/temai/1abe68729b067631cb5844bfcd88fa439c16a03cwww750-1070",
			"https://p3-aio.ecombdimg.com/obj/temai/330154d06bd7acfbc9fe46744a84f295www750-987",
			"https://p3-aio.ecombdimg.com/obj/temai/00ad2cafeffa2a85f3ef914fe1e17d35www1098-616",
			"https://p3-aio.ecombdimg.com/obj/temai/5910e6bf5d211c448fa269d67b7b22bccbc7e01bwww750-1038",
			"https://p9-aio.ecombdimg.com/obj/temai/ef7c2487660576bb1e35e0f675a7d5ee89566e7ewww750-971",
			"https://p6-aio.ecombdimg.com/obj/temai/f3ba562f0e4762641049268a558a243d68d0f4d9www750-1136",
			"https://p3-aio.ecombdimg.com/obj/temai/9130ca6f53486030a306f48f44923e8796e59ca9www750-1105",
			"https://p9-aio.ecombdimg.com/obj/temai/a3bf398e3439fe5c42c6cec8c3b2d008523a6f99www750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/25f773b7a62d0b789d015198261c3aac0224d676www750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/216c81f4115d9866134976c4e55b79d1cdfcfbdbwww750-955",
			"https://p3-aio.ecombdimg.com/obj/temai/c819abbf998aa58443c6e383fe8da9a9d7a25afewww750-834",
			"https://p6-aio.ecombdimg.com/obj/temai/82c9518b7438a5d30fb58efa1d872e3b50fa4a2ewww750-1136",
			"https://p9-aio.ecombdimg.com/obj/temai/78c6e8944f3d936654accf6059e6f5adwww800-800",
			"https://p3-aio.ecombdimg.com/obj/temai/40c2fc84c9e265b8a9897b8b77ce7764f347d00fwww750-952",
			"https://p9-aio.ecombdimg.com/obj/temai/79b4eecb3924bc01d2143270ebf015fdb2d0127fwww750-960",
			"https://p9-aio.ecombdimg.com/obj/temai/502e0ebbb534d4bcbdbca0ce158ee0ef917d9d1fwww750-1014",
			"https://p3-aio.ecombdimg.com/obj/temai/7c3272bbd8ae080d91636773df0c0bc8bc2c5b1cwww750-1038",
			"https://p9-aio.ecombdimg.com/obj/temai/2f9805ac9215f89da063aa3da473b06fa0591780www750-1080",
			"https://p6-aio.ecombdimg.com/obj/temai/2713d6e8adf3fe59c0fd3d2c15829e924f63a46ewww750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/b7331dd00e686a261912a54af4ae3f2b61311082www750-1136",
			"https://p3-aio.ecombdimg.com/obj/temai/682379cd908fc0ee170b6ab914e9df374651c44bwww750-1136",
			"https://p3-aio.ecombdimg.com/obj/temai/c1bc79f0eec46b8d6dc0c363dadc2f013d32f4a7www750-1136",
			"https://p9-aio.ecombdimg.com/obj/temai/3fc35a21ed6161836e78f18a0c506112dc6c19d2www750-1136",
			"https://p3-aio.ecombdimg.com/obj/temai/3c5d22702e1cd2de45c9ec3671c4154fe33e5ebewww750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/b4d1d18942ec15e5f64f6f5aadf9b467cd92e21bwww750-1136",
			"https://p9-aio.ecombdimg.com/obj/temai/87a96eccbacf3b3a20d99266f2d4b801f2352fa5www750-1136",
			"https://p3-aio.ecombdimg.com/obj/temai/7db68c13bfd5ed2b1d27e85248ba85f60a9d24d2www750-1136",
			"https://p6-aio.ecombdimg.com/obj/temai/75a8aa104430fc1227019d3b38f7a83e2f451e0bwww750-1136"
		],
		"shop_item": [],
		"relate_items": []
	},

 

标签:obj,ecombdimg,抓取,aio,API,temai,https,电商,com
From: https://blog.csdn.net/YONG823_API/article/details/142736086

相关文章

  • 电商订单接口FAQ
    开发者在使用电商订单接口的时候,难免会遇到问题,赶紧看看这篇淘宝开放平台电商订单接口FAQ,看看你所遇到的问题在不在其中。Q:通过电商订单接口获取的订单数据带有*号?A:由于个人信息保护和数据安全相关的法律法规,对保障消费者个人信息权益、规范数据处理活动提出了更明确的责任要......
  • coze扣子API接入在线客服系统使用
    使用coze扣子API的时候,必须要先创建令牌,创建完成后点击发布的机器人才能使用该令牌,如果不按照顺序API将无法使用 coze可以免费创建机器人以及AI流程编排,并且可以发布为API,方便接入自己的系统必须一定要先创建新令牌,再点发布(这是扣子自己的问题),并且必须勾选,发布到API ......
  • 优化网页抓取:轻松提升抓取效率的小妙招
    今天来聊一个实用的话题——如何优化网页抓取。无论你是数据科学家、爬虫开发者,还是对网页数据感兴趣的普通网友,相信这篇文章都能帮到你。一、明确目标,规划先行在开始抓取网页之前,最重要的一步就是明确你的抓取目标。你想抓取哪些网站的数据?需要哪些字段?抓取频率是多少?这些问题都得......
  • Vue3 hooks----实现组合式API
    hooks实现将一个功能的所有数据、方法、生命周期函数放到一块去使用。我们在src底下定义个Hooks文件夹,将我们要进行模块化的功能设置为use功能名。例如:我要将点我加一这个功能进行hooks,则使用useSum.ts这个文件定义功能逻辑。在这个ts里面需要export default 函数这种写法,......
  • 如何解决 构建dotnet docker镜像时报错:error NU1301: Unable to load the service ind
    我用的是dockerdesktop,Builders设置:desktop-linux以下是我的dotnet项目的Dockerfile内容FROMmcr.microsoft.com/dotnet/aspnet:6.0ASbaseWORKDIR/appEXPOSE80EXPOSE443FROMmcr.microsoft.com/dotnet/sdk:6.0ASbuildWORKDIR/srcCOPY["NuGet.Config","......
  • springboot+vue基于的电商购物系统【开题+程序+论文】
    系统程序文件列表开题报告内容研究背景随着互联网技术的飞速发展,电子商务已成为现代社会不可或缺的一部分。电子商务不仅改变了人们的购物方式,还极大地推动了全球经济的发展。近年来,电商平台如雨后春笋般涌现,市场竞争日益激烈。为了在激烈的市场竞争中脱颖而出,电商平台需要......
  • 微软计算机视觉-API-精粹-全-
    微软计算机视觉API精粹(全)原文:MicrosoftComputerVisionAPIsDistilled协议:CCBY-NC-SA4.0一、微软认知服务简介毫无疑问,人工智能(AI)是当今信息技术的重要组成部分。它在未来肯定会变得越来越重要,但是它已经在许多方面得到了应用,所以作为开发人员,您应该了解有哪些工具......
  • 利用 PHP 爬虫爬取淘宝 API 数据时,如何处理去重问题?
    在利用PHP爬虫爬取淘宝API数据时,处理数据去重问题可以从以下几个方面着手:一、基于数据特征的去重商品唯一标识淘宝商品通常有一个唯一的标识符,如商品ID。在爬取数据时,将每次获取到的商品ID存储起来。可以使用PHP数组来临时存储已获取的商品ID。例如:数据指纹(哈希)对......
  • 利用 PHP 爬虫淘宝 API 数据
    一、PHP爬虫:强大的工具PHP,作为一种广泛应用于网络开发的脚本语言,具备许多优势。它的灵活性和易于上手的特点,使得开发人员能够迅速构建起爬虫程序。PHP可以轻松地处理网络请求、解析HTML页面或者处理API返回的数据格式。爬虫程序本质上就是模拟浏览器的行为,向目标服务器发送......
  • QOJ 8726 [APIO2024] 魔术表演 题解
    DescriptionAlice和Bob是著名的魔术师。Catherine是一位富豪,她非常喜欢观看Alice和Bob的魔术。某一天,Catherine决定向Alice和Bob发出挑战:只要他们能成功表演如下的魔术,Catherine就将向他们提供巨额奖金!这个魔术的表演过程如下:步骤\(1\):Bob进⼊⼀个密室中,在魔术......