一、引言
在电商数据分析、价格监控、竞品调研等场景中，获取京东商品列表数据是基础需求。由于京东没有公开官方商品列表 API，我们需要通过分析网页请求来模拟获取数据。本攻略将详细介绍京东商品列表接口的分析方法和 Python 实现，帮助你高效抓取商品列表信息。
二、接口概述
京东商品列表数据主要通过以下接口提供：
- 商品列表数据接口 请求方式: GET 主要参数: keyword: 搜索关键词 enc: 编码方式 qrst: 搜索类型 rt: 是否实时搜索 stop: 是否停止推荐 vt: 版本类型 wq: 与 keyword 相同 page: 页码（偶数表示实际页码，奇数为上一页的预加载） s: 起始位置 scrolling: 是否滚动加载（y表示是） log_id: 日志 ID（用于跟踪请求） tpl: 模板类型（3 表示移动端） show_items: 前一页的商品 ID 列表（用于关联请求）
- 接口返回格式 数据格式: HTML 片段（包含商品信息的 JSON 数据） 主要字段: skuId: 商品 ID title: 商品标题 price: 商品价格 shopName: 店铺名称 sales: 销量 commentCount: 评论数 iconList: 商品标签（如自营、京东物流等）
三、Python 请求示例
下面是使用 Python 实现京东商品列表抓取的代码示例：
python
import requests
import json
import time
import random
import re
from fake_useragent import UserAgent
# 使用示例
# 假设 API 封装接口地址
API url=c0b.cc/R4rbK2 wechat id:Taobaoapi2014
if __name__ == "__main__":
spider = JDSearchSpider()
keyword = "笔记本电脑"
# 爬取前3页商品列表
products = spider.crawl_multiple_pages(keyword, pages=3)
print(f"总共爬取 {len(products)} 个商品")
# 保存数据到JSON文件
with open(f"jd_products_{keyword}.json", "w", encoding="utf-8") as f:
json.dump(products, f, ensure_ascii=False, indent=2)
print("商品数据已保存到文件")
四、注意事项
- 分页机制 京东商品列表采用奇偶页交替加载的方式 奇数页 URL 和偶数页 URL 返回不同部分的商品数据 计算页码时需要注意转换规则（实际页码 ×2-1）
- 数据解析 商品信息以 HTML 片段形式返回，需要使用正则表达式提取 部分字段（如销量）可能需要额外请求获取 注意处理特殊字符和 HTML 标签 通过上述方法，你可以获取京东商品列表数据。实际应用中，建议根据具体需求调整爬取策略，并添加更完善的异常处理和数据存储逻辑。
