为 DeepSeek Harness 接入俄罗斯及中国电商平台的价格、库存、评分、卖家资质等只读数据查询,支持跨平台比价。
- 语言
- Python
- License
- MIT
- 分支
- main
安装
$ dsh plugin --profile web add github:Vladimir-Human/ru-marketplace-mcp在终端中运行以上命令,通过 dsh CLI 安装此插件。可在右上角切换 Profile。 第一次用 dsh?看这篇新手教程
对话式安装
帮我安装 DeepSeek Harness 插件 Vladimir-Human/ru-marketplace-mcp:先查看仓库 https://github.com/Vladimir-Human/ru-marketplace-mcp.git 确认安全性,然后执行安装命令并验证插件加载成功。
把这段指令粘贴给 DSH Web GUI 里的助手,由它代你完成安装与验证。
一句话定位
这是一套让 DeepSeek Harness 能够查询俄罗斯与中国电商平台只读数据的工具集。它既提供 13 个操作技能(人话写成的"使用说明"),又提供可按需启用的 MCP 服务。普通用户不必懂技术,只需在 DSH 里说"哪里买更便宜"或"WB 上这个多少钱",AI 就会自动调用对应工具。
核心能力
- 跨平台比价:用一个工具同时查询 Wildberries、Ozon、Yandex Market 等多家平台,按价格排序并给出价差
- 在 Wildberries 上查询商品价格、库存、卖家资质(含公司名、税号、注册地址)
- 读取 Ozon 平台的商品详情、搜索结果和评论
- 通过 Yandex Market 拉取多卖家报价、评分分布和用户评论
- 在 Yandex Market、Detsky Mir、Avito、Taobao 等平台上做商品搜索与详情查询
- 在 Avito 上查询卖家信誉(评分和活跃商品数)
- 对 Taobao、Megamarket、Lamoda、DNS、Citilink 这类反爬严格的平台做匿名页查询
- 通过 MPStats(付费)拉取 Ozon/WB 商品的近 30 天销量与库存曲线
技术实现
- 语言: Python 3.12+
- 关键依赖: fastmcp(用于实现 MCP 协议)、pydantic(数据模型校验)、curl_cffi(Ozon/Avito 等第一层 TLS 伪装)、Playwright(实现无头浏览器时的 fallback)、httpx(HTTP 客户端)
- 架构模式: 12 个独立 MCP 服务分别按平台拆出,统一基于 mcp-core 运行时;另有
marketplace-mcp合并服务动态挂载其他服务(失败的依赖仅会让对应平台缺席,不影响整体启动);DSH 插件通过cordis.patch.yml注入 13 个技能 + 2 个 MCP 客户端行 - 入口文件: 服务入口为
packages/<name>-connector/src/<name>_connector/__main__.py,CLI 入口为packages/marketplace-connector/src/marketplace_connector/cli.py
适用场景
普通用户在 DSH 里需要查俄罗斯或中国电商平台的价格、库存、评价,或者要做跨平台比价、又或者要查某个卖家是否正规——这一切都不需要自己装浏览器扩展或手动打开网页。插件还可以为电商卖家提供近 30 天销量曲线(需付费 MPStats)。对开发者和数据分析师而言,这是绕过各平台反爬与认证墙的"只读数据网关"。
前置依赖与兼容性
| 依赖 | 最低版本 | 说明 |
|---|---|---|
| Python | 3.12+ | 服务端运行时(pyproject.toml 声明) |
| uv | 最新版 | 用于执行 uv run --frozen --directory <克隆路径> 启动 MCP 服务 |
| 平台 | 跨平台 | 平台描述在 dsh/README.md 未声明限制 |
| 原生模块 | 无 | 纯 Python 包,依赖通过 uv 解析 |
安装方式
dsh plugin --profile web add github:Vladimir-Human/ru-marketplace-mcp
安装完插件后,还需要:
- 把这份仓库克隆到本机:
git clone https://github.com/Vladimir-Human/ru-marketplace-mcp.git && cd ru-marketplace-mcp && uv sync --frozen - 设置环境变量
RU_MARKETPLACE_MCP_DIR指向这份克隆的目录 - 重启 DSH profile
想启用全部 34 个工具(而非基础的 2 个比价工具),再设置 RU_MARKETPLACE_MCP_FULL=1 即可。
配置项
| 配置 | 类型 | 说明 | 默认值 |
|---|---|---|---|
RU_MARKETPLACE_MCP_DIR | 路径环境变量 | 指向本机克隆的 ru-marketplace-mcp 目录,同时作为"是否启用 MCP 服务"的开关;未设置时 13 个技能仍可用,但两个 MCP 服务会保持关闭 | 未设置 |
RU_MARKETPLACE_MCP_FULL | 开关环境变量 | 设置为 1 时切换为完整版(34 个工具),未设置时使用精简版(2 个跨平台比价工具) | 未设置 |
MPSTATS_MP_AUTH | JWT 字符串 | MPStats 付费账号的 cookie 值(原始 JWT,不带 mp_auth= 前缀);不设置时 MPStats 工具返回 auth_missing,其他平台不受影响 | 未设置 |
CHROME_CDP_PORT | 端口号 | Chrome 远程调试端口号,Ozon/Avito 等依赖 CDP 的平台用 | 9222 |
CHROME_CDP_HOST | 主机地址 | Chrome 远程调试监听地址 | 127.0.0.1 |
CHROME_STEALTH | 0 或 1 | 是否启用 Chrome 反检测模式 | 1 |
CHROME_HEADLESS | 0 或 1 | 是否以无头模式启动 Chrome | 0 |
常见问题
Q: dsh plugin --profile web add 之后什么都没发生?
A: 这是正常的。安装插件只会让 13 个技能在 DSH 里出现,MCP 服务默认是被关闭的。需要再设置环境变量 RU_MARKETPLACE_MCP_DIR 指向克隆的仓库目录,然后重启 DSH profile。
Q: 报"file not found"或者"uv: command not found"?
A: 系统里没有安装 uv。请先到 https://docs.astral.sh/uv/ 按指引安装最新版的 uv 包管理器。
Q: 必须克隆仓库吗?能不能用 pip 装?
A: 仓库发布过 Docker 镜像(ghcr.io/vladimir-human/ru-marketplace-mcp),也可以在不克隆本地仓库的情况下用 GHCR 镜像运行;pip 安装需要自行管理 12 个子包的依赖关系。DSH 的两行 patch 默认假设本地克隆路径。
Q: 比价结果全是 0 元或者空,怎么办?
A: 缺失价格代表"没有数据",永远不会是 0;商品下架、库存为空、卖家未填价格,都会得到空值。这种结果要结合 marketplace_sources 工具来看——某个平台在"未挂载"列表里,说明缺失的是依赖而不是数据。
Q: 想深入看某个商品的评论,却被告知"评论池为空"?
A: Wildberries 的评论和提问是按 imt_id(聚合商品 ID)而不是 nmId(单 SKU ID)索引的。必须先用 wb_root_info(nmId) 拿到 imt_id,再用 wb_reviews(imt_id) 查询。
Q: 怎么卸载?
A: 执行 dsh plugin --profile web remove ru-marketplace-mcp-dsh,然后重启 profile。本地克隆的仓库可以保留或删除,不会影响 DSH 行为。
Q: Avito 一直返回"blocked"?
A: Avito 会按 IP 屏蔽数据中心 IP。需要从俄罗斯住宅 IP 访问,并把请求节奏放慢。marketplace-mcp doctor 会告诉你当前环境是否被屏蔽。
Q: 比价时不只看到卢布价格,还有 CNY 之类?
A: Taobao 用人民币结算。比价结果里 price_rub 字段为 null,price_native 字段才是淘宝原币种价。如果需要把 CNY 折算成 RUB,需要自己按当日汇率换算,插件不会硬编码汇率(会过期)。
上手难度
入门 — 13 个技能本身就是"使用说明",AI 助手能直接判断该调哪个工具;普通用户只需要会配置环境变量即可。
已知问题与限制
- Wildberries 的搜索结果价格会比商品卡片的实际价格略高(2026-07-28 测量:60 571 vs 60 275),如果两个候选商品的价差在 1% 以内,需要用
wb_card再确认一次 - Wildberries 的搜索结果翻到末尾时会循环返回第一页(HTTP 200 并无报错),分页时按
nm_id去重 - 完整版(marketplace-mcp)每次请求约 13k token,远高于精简版(compare-mcp,0.9k token),建议按需启用
- Avito、Megamarket、Taobao 等平台需要外部 Chrome 通过 CDP 协调;Chrome 没启动时这些功能完全不可用
- Detsky Mir 没有文本搜索 API,比价结果会跳过它,需要单独用
detmir_category按分类浏览 - Yandex Market 的 Plus 会员价(比日常价低 25-30%)永远不会参与比价排序,避免"虚构便宜"
compare_prices在 Yandex Market 走网页版,需要消耗更多 token;disable 单独 VIP 价可避免重复
MCP-серверы для российских и китайских маркетплейсов. Цены, наличие, рейтинги, отзывы и реквизиты продавцов с Wildberries, Ozon, Яндекс Маркета, Детского мира, Авито, AliExpress, Taobao, Мегамаркета, Lamoda, DNS и Ситилинка. Плюс сравнение цен по всем источникам одним вызовом.
Только чтение. Ключи API, токены и регистрация не нужны — площадки с жёстким
анти-ботом читаются через ваш собственный Chrome. Одно исключение по желанию:
опциональный MPStats берёт платный токен (MPSTATS_MP_AUTH) — без него всё
остальное работает как прежде.
English version below · Архитектура · Как добавить источник · Про анти-бот
Что внутри
| Сервер | Инструментов | Что нужно, чтобы читалось | Что умеет |
|---|---|---|---|
| Wildberries | 8 | анонимный HTTP | Поиск, карточки, отзывы, вопросы о товаре, реквизиты продавца, каталог и товары категории |
| Яндекс Маркет | 2 | анонимный HTTP | Цены разных продавцов, разбивка оценок по звёздам, отзывы |
| Детский мир | 3 | анонимный HTTP | Детские товары, наличие в офлайн-магазинах, категории |
| Ozon | 3 | ваш Chrome; с домашнего IP часто и без него | Поиск, карточки, отзывы |
| Авито | 3 | ваш Chrome + российский домашний IP и запросы вразрядку — иначе блок по IP | Поиск объявлений, карточки, репутация продавца |
| Taobao | 2 | ваш Chrome с активным входом в Taobao | Поиск и карточки, цены в юанях |
| Мегамаркет | 2 | ваш Chrome с активным входом — анонимной сессии API отдаёт пусто | Поиск и карточки через мобильный API |
| Lamoda | 2 | карточки анонимно (GraphQL), поиск — ваш Chrome | Поиск, карточки с размерами |
| DNS | 2 | ваш Chrome (Qrator) | Поиск и карточки электроники |
| Ситилинк | 2 | ваш Chrome (Qrator) | Поиск и карточки электроники |
| AliExpress | 2 | ваш Chrome (x5sec) | Поиск и карточки, цены в рублях |
| Сравнение | 2 | опрашивает всё перечисленное | «Где дешевле?» одним вызовом |
| MPStats | 2 | платный аккаунт MPStats, cookie mp_auth (опционально) | Продажи/остатки/графики за 30 дней по SKU Ozon/WB, остатки по складам (FBS/FBO) |
Читается анонимно, без браузера: Wildberries, Яндекс Маркет, Детский мир и
карточки Lamoda. Остальным нужен ваш залогиненный Chrome (CDP). Taobao и
Мегамаркет вдобавок требуют активного входа в саму площадку — без него Taobao
упирается в стену логина, а Мегамаркет отдаёт пустой ответ. Авито ещё и блокирует
по IP: с датацентрового адреса это глухой отказ, с российского домашнего — работает,
если не частить запросами. Запросы к CDP-источникам идут вразрядку: очередь
подряд без пауз роняет их (DNS и Taobao в проверке так и деградировали), поэтому
коннекторы держат паузу между вызовами сами. Точное состояние из вашей сессии
покажет marketplace-mcp doctor.
MPStats стоит особняком: это единственный платный источник. Без
MPSTATS_MP_AUTH сервер запускается, но инструменты отвечают auth_missing —
поэтому он опционален и подключается по желанию, на остальные двенадцать
серверов он не влияет никак.
Всего 35 инструментов в 13 серверах на общем рантайме mcp-core. Плюс объединённый
marketplace-mcp, который монтирует всё разом — одна запись в конфиге клиента
вместо тринадцати. Он добавляет свой инструмент marketplace_sources (какие коннекторы
поднялись, а какие отвалились и почему), так что в нём 36 инструментов: 35
смонтированных плюс этот.
Быстрый старт
Нужны Python 3.12+ и uv.
git clone https://github.com/Vladimir-Human/ru-marketplace-mcp.git
cd ru-marketplace-mcp
uv sync --all-packages
uv run pytest -q -m "not live and not cdp" # 1208 офлайн-тестов, сеть не нужна
Проверка живого эндпоинта:
uv run python -c "
import asyncio
from wb_connector.server import wb_selfcheck
print(asyncio.run(wb_selfcheck()).status) # ждём success
"
Подключение к MCP-клиенту
Каждый сервер — консольная команда, поэтому пути в конфиге не зашиваются.
Claude Desktop — claude_desktop_config.json
Windows: %APPDATA%\Claude\claude_desktop_config.json
macOS: ~/Library/Application Support/Claude/claude_desktop_config.json
Проще всего подключить одну запись — объединённый сервер монтирует все
источники разом, а имена инструментов (wb_search, avito_seller, …) не
меняются:
{
"mcpServers": {
"marketplace": {
"command": "uv",
"args": ["run", "--directory", "C:/путь/к/ru-marketplace-mcp", "marketplace-mcp"],
},
},
}
Если нужны отдельные серверы, marketplace-mcp install claude напечатает
готовый блок для вставки. Путь к вашему checkout там уже подставлен: заглушку
/path/to/ru-marketplace-mcp править руками не придётся. При установке из wheel
вместо путей печатаются консольные команды на PATH. Неизвестное имя клиента
(допустимы claude, claude-code, cursor, dsh) команда отклоняет с пояснением и
кодом возврата 2 — молча подставить блок для Claude она не может. Минимальный
вариант вручную:
{
"mcpServers": {
"wildberries": {
"command": "uv",
"args": ["run", "--directory", "C:/путь/к/ru-marketplace-mcp", "wb-mcp"],
},
"ozon": {
"command": "uv",
"args": ["run", "--directory", "C:/путь/к/ru-marketplace-mcp", "ozon-mcp"],
},
"compare-prices": {
"command": "uv",
"args": ["run", "--directory", "C:/путь/к/ru-marketplace-mcp", "compare-mcp"],
},
},
}
Путь пишите с прямыми слешами / или двойными обратными \\. Полный список
команд — wb-mcp, ozon-mcp, yandex-mcp, detmir-mcp, avito-mcp,
taobao-mcp, megamarket-mcp, lamoda-mcp, dns-mcp, citilink-mcp,
compare-mcp, marketplace-mcp.
Claude Code
claude mcp add wildberries -- uv run --directory /путь/к/ru-marketplace-mcp wb-mcp
claude mcp add yandex-market -- uv run --directory /путь/к/ru-marketplace-mcp yandex-mcp
claude mcp add detsky-mir -- uv run --directory /путь/к/ru-marketplace-mcp detmir-mcp
claude mcp add ozon -- uv run --directory /путь/к/ru-marketplace-mcp ozon-mcp
claude mcp add compare-prices -- uv run --directory /путь/к/ru-marketplace-mcp compare-mcp
Cursor — .cursor/mcp.json
{
"mcpServers": {
"compare-prices": {
"command": "uv",
"args": ["run", "--directory", "/путь/к/ru-marketplace-mcp", "compare-mcp"],
},
},
}
Другой stdio-клиент
Запустите uv run --directory /путь/к/репозиторию <команда>, где команда — одна из
wb-mcp, ozon-mcp, yandex-mcp, detmir-mcp, aliexpress-mcp, compare-mcp. Серверы говорят по
JSON-RPC через stdin и stdout, диагностику пишут в stderr. Опциональный
mpstats-mcp запускается так же, с MPSTATS_MP_AUTH в окружении.
DeepSeek Harness (dsh) — плагин-бандл
В dsh это не запись mcpServers, а слой профиля. Бандл лежит в подкаталоге
dsh/ и ставится штатным менеджером плагинов (pnpm нужен на PATH):
dsh plugin --profile web add github:Vladimir-Human/ru-marketplace-mcp#path:/dsh
Сразу после установки появляются 14 навыков и ни одного MCP-инструмента: обе
строки MCP выключены, пока не задана переменная RU_MARKETPLACE_MCP_DIR с путём к
клону. Так сделано потому, что смонтированный сервер платится в каждом запросе:
рекомендуемый режим сравнения цен стоит ~0,9 тыс. токенов, полный набор — ~13,6 тыс.
Включение и полный режим описаны в dsh/README.md.
После подключения перезапустите клиент и прогоните marketplace-mcp doctor. Он
запускает канарейку каждого коннектора и отвечает success, drift_detected или
inconclusive.
Инструменты
Канарейки *_selfcheck в этом перечне не значатся намеренно: они не публикуются
по MCP, потому что диагностика оператора стоила бы модели ~7,5 тыс. токенов в
каждом запросе. Запускает их marketplace-mcp doctor — все разом, из командной
строки.
Wildberries — wb_*
| Инструмент | Что делает |
|---|---|
wb_search(query, page) | Поиск по тексту, до 100 товаров на страницу с ценами и остатками |
wb_card(nm_ids) | Пакетный запрос до 100 известных SKU |
wb_root_info(nm_id) | Находит imt_id (нужен для отзывов) и цветовые варианты |
wb_reviews(imt_id, limit, sort) | Пул отзывов. Ключ — imt_id, а не nm_id |
wb_questions(imt_id, limit, skip, answered_only) | Вопросы покупателей и ответы продавца. Тоже по imt_id |
wb_seller(supplier_id) | Юрлицо, ИНН, КПП, ОГРН, юридический адрес |
wb_categories(root, max_depth) | Дерево каталога с шардами и запросами самого WB |
wb_category_products(shard, query, page, sort, dest) | Товары категории по shard и query из wb_categories |
wb_seller отвечает на вопрос, который карточка товара скрывает: кто на самом деле
продаёт? Возвращает зарегистрированное юрлицо и налоговые номера. Так отличают
официальный магазин бренда от перекупщика с похожим названием.
wb_questions закрывает другой пробел. Отзывы говорят, каково владеть товаром;
вопросы уточняют, что это вообще за товар — «10 или 16 ампер», «кабель в комплекте?».
Ответ продавца часто единственное публичное утверждение об этом. Пул общий для всех
вариантов товара, ключ — imt_id из wb_root_info.
wb_category_products замыкает связку с wb_categories: та отдаёт shard и query,
это — товары по ним. Формат элементов совпадает с wb_search, поэтому обход категорий
и текстовый поиск сравнимы напрямую. Часть крупных разделов WB помечает шардом
blackhole — у них нет своей выдачи, и инструмент честно об этом говорит вместо
пустого списка.
Яндекс Маркет — yandex_*
| Инструмент | Что делает |
|---|---|
yandex_search(query, page, limit) | Поиск с обеими ценами, рейтингами, продавцами |
yandex_card(product_id, include_reviews) | Карточка целиком: разбивка по звёздам и отзывы |
Две цены, всегда. price_rub платит любой покупатель. price_with_plus
требует подписку Яндекс Плюс и обычно на 25–30% ниже. Интерфейс Яндекса показывает
вторую крупным шрифтом, поэтому назвать её без оговорки — значит пообещать цену,
которую человек без подписки не получит.
rating_stars даёт распределение вида {1: 10, 2: 3, 3: 10, 4: 19, 5: 502}. Из
него видно, честная ли средняя 4.8 или за ней прячется кучка единиц.
Детский мир — detmir_*
| Инструмент | Что делает |
|---|---|
detmir_categories(parent, limit, region) | Дерево каталога. Начинать отсюда |
detmir_category(alias, limit, offset, region) | Товары категории с настоящим счётчиком |
detmir_card(product_id, region) | Цена, рейтинг, наличие онлайн и в магазинах |
Регион задаётся на каждый вызов. Цены и особенно наличие в офлайн-магазинах
сильно зависят от города: один и тот же товар лежал в 152 магазинах Москвы, 37
Петербурга и 2 Хабаровска. Параметр region перекрывает DETMIR_REGION, так что
города можно сравнивать в одной сессии.
Текстового поиска здесь нет, и это намеренно. API Детского мира молча игнорирует любые текстовые фильтры и возвращает весь каталог на 300 тысяч позиций, а сайтовый роут поиска отдаёт 404 с промо-карусселью. Инструмент поиска возвращал бы уверенно неверные товары, поэтому навигация идёт через категории. Подробности в docs/ANTI_BOT.md.
Ozon — ozon_*
| Инструмент | Что делает |
|---|---|
ozon_search(query) | Поиск по тексту |
ozon_card(sku_or_path) | Карточка товара |
ozon_reviews(sku_or_path, limit, sort) | Отзывы |
Ozon отклоняет датацентровый трафик, поэтому коннектор двухуровневый. Сначала TLS-имперсонация. Если Cloudflare выдаёт челлендж, запрос выполняется внутри вашего залогиненного Chrome через DevTools Protocol. Ничего не хранится: вход выполняете вы сами, в браузере, который контролируете. Настройка описана в docs/CDP_SETUP.md.
С российского домашнего IP первый уровень обычно работает, и браузер не нужен.
Авито — avito_*
| Инструмент | Что делает |
|---|---|
avito_search(query, page, location_id, category_id) | Поиск объявлений через внутренний js/items API |
avito_card(item_id_or_url) | Одно объявление: цена, описание, просмотры, продавец |
avito_seller(seller_id_or_url) | Рейтинг продавца, число отзывов, активные объявления |
Авито — это объявления, а не каталог: пула отзывов на товар нет, репутация
продавца и есть сигнал доверия. Бесплатное/обменное объявление приходит с
price_rub: null — никогда не 0, чтобы не оказаться «самым дешёвым» в
сравнении. С датацентрового IP Авито отвечает 403-файрволом, поэтому коннектор
двухуровневый: TLS-имперсонация, дальше ваш Chrome (как у Ozon).
Taobao — taobao_*
| Инструмент | Что делает |
|---|---|
taobao_search(query, page) | Поиск по каталогу Taobao |
taobao_card(item_id_or_url) | Карточка товара |
Поиск Taobao — клиентское React-приложение с подписанным mtop API: каждый запрос
требует sign, вычисленный из cookie-токена, поэтому анонимного пути нет.
Все чтения идут внутри вашего Chrome, где сайт сам подписывает запросы. Цены в
юанях (CNY) и не конвертируются: зашитый курс молча устарел бы, так что
сравнение с рублёвыми источниками делайте явно.
Мегамаркет, Lamoda, DNS, Ситилинк
Эти четыре читаются через ваш Chrome (CDP). Мегамаркет (megamarket_*) — мобильный
JSON API из-за ServicePipe, и одного пройденного челленджа мало: анонимной сессии
API отдаёт пустой список, нужен активный вход в Мегамаркет. DNS (dns_*) и Ситилинк
(citilink_*) — отрисованный DOM из-за Qrator; у всех трёх анонимного пути нет вообще.
Lamoda (lamoda_*) наполовину: карточки берутся анонимно через GraphQL, а поиск —
через Chrome. Chrome с CDP (scripts/start_chrome_cdp.sh) нужен всем, кроме карточек
Lamoda.
Всего через CDP ходят восемь источников — эти плюс Taobao, AliExpress, Ozon и
Авито, где Chrome лишь
запасной уровень: их tier 1 обычно отвечает, а браузер включается, когда анонимный
уровень упёрся в челлендж. marketplace-mcp doctor из вашего браузера скажет, какие
эндпоинты подтверждены.
AliExpress — aliexpress_*
| Инструмент | Что делает |
|---|---|
aliexpress_search(query) | Поиск: до 48 карточек с ценами в рублях |
aliexpress_card(item_id_or_url) | Карточка: цена, рейтинг, число заказов |
Читается через ваш Chrome (CDP): x5sec ставит капчу анонимным клиентам, поэтому
коннектор садится на страницу поиска (её не челленджат) и открывает карточку
новой вкладкой из неё. Цены в рублях и участвуют в compare_prices. Карточка с
названием, но без цены — известное состояние: под нагрузкой x5sec перестаёт
отдавать ценовой модуль, коннектор пишет price_missing, а не выдумывает число.
Цена «N ₽ с купоном» в price_rub не публикуется: там обычная цена, про купон
коннектор честно предупреждает отдельно. Тексты отзывов не отдаются: только
рейтинг и число заказов. Как и у остальных CDP-источников, зелёный
aliexpress_selfcheck доказывает, что транспорт ответил, — не то, что цена
верна.
Сравнение цен — compare_*
| Инструмент | Что делает |
|---|---|
compare_prices(query, per_source_limit, sources) | Все маркетплейсы сразу, с ранжированием |
compare_sources() | Какие маркетплейсы доступны в этой установке |
compare_prices("кроссовки мужские")
wildberries 712 ₽ Кроссовки изи дышащие спортивные
wildberries 814 ₽ Зимние кроссовки теплые с мехом
yandex_market 2499 ₽ Кеды A-LOW
yandex_market 3480 ₽ Кеды
дешевле всего: wildberries 712 ₽, разброс 5858 ₽, complete: true
Маркетплейсы опрашиваются параллельно, и каждый отчитывается сам за себя. Если один
заблокирован, сравнение не рушится: complete: false вместе с source_outcomes
покажет, что именно вы видите. Подписочные цены в ранжировании не участвуют.
Совпадающие предложения по паре (источник, id товара) схлопываются, так что один
и тот же товар не занимает два места в ранжировании.
У каждого предложения есть currency (строчный ISO-код, по умолчанию rub) и
price_native — цена в этой валюте, как её показывает маркетплейс. Для российских
источников она совпадает с price_rub; у Taobao в ней лежит цена в юанях, которую
price_rub намеренно оставляет пустой. Раньше юаневую цену забирали и молча
выбрасывали, и строка Taobao приходила с пустой ценой без намёка, что цена вообще
есть. Теперь юань виден, но в рублёвом ранжировании по-прежнему не участвует: в
warnings появляется foreign_currency: … с числом исключённых предложений и
причиной. Конвертировать здесь значило бы зашить курс, который молча устареет, —
пересчёт за вами.
MPStats — mpstats_*
Аналитика продаж и остатков по SKU Ozon и Wildberries через плагин MPStats.
В отличие от всех остальных коннекторов, этот опционален и требует платный
аккаунт MPStats: авторизация — одна cookie mp_auth (JWT из залогиненной
сессии плагина на mpstats.io), задаётся переменной MPSTATS_MP_AUTH. Без неё
инструменты возвращают auth_missing, а сервер запускается как обычно — ни на
что другое это не влияет.
| Инструмент | Что делает |
|---|---|
mpstats_item(skus, place, oz_fbs=True) | Аналитика за 30 дней по до 100 SKU: заказы, цена, остатки, графики по дням, продавец/бренд |
mpstats_warehouses(skus, place) | Остатки по складам: FBS (склад продавца) и FBO (склад маркетплейса), last_update |
place — ozon или wildberries. Графики длиной 30, от старых к новым:
последняя ненулевая ячейка — текущая цена или остаток. Цена и остаток при
сплошь нулевом графике ведут себя намеренно по-разному: цена становится None
(ложный 0 выиграл бы любое сравнение «где дешевле»), а остаток — 0, потому
что «нулевой остаток» это осмысленное показание, а не отсутствие данных. Пустой
график даёт None в обоих случаях. Ноль в отдельной ячейке — «нет данных за тот
день», а не «значение было нулевым», поэтому сумму за окно считайте по графику. Отсутствие
токена и транспортные сбои selfcheck отчитывает как inconclusive, не drift:
гоняться за дрейфом схемы, которого не было, не нужно. Токен — секрет платного
аккаунта с квотой: не логируйте и не коммитьте его.
Навыки для агента
У каждого коннектора — свой навык в skills/: четырнадцать штук, по одному
на источник плюс общий marketplace. Навык это не пересказ README: он объясняет агенту, когда за этот
источник вообще браться, чего у источника нет, и каким его ответам нельзя верить
без второго взгляда.
| Навык | Сервер |
|---|---|
skills/wb-connector | wb-mcp |
skills/ozon-connector | ozon-mcp |
skills/yandex-connector | yandex-mcp |
skills/detmir-connector | detmir-mcp |
skills/avito-connector | avito-mcp |
skills/taobao-connector | taobao-mcp |
skills/megamarket-connector | megamarket-mcp |
skills/lamoda-connector | lamoda-mcp |
skills/dns-connector | dns-mcp |
skills/citilink-connector | citilink-mcp |
skills/aliexpress-connector | aliexpress-mcp |
skills/compare-prices | compare-mcp |
skills/mpstats-connector | mpstats-mcp |
skills/marketplace | marketplace-mcp |
mcp-core — общий рантайм под остальными серверами. Своего навыка у него нет.
Соответствие проверяется тестом
(packages/marketplace-connector/tests/test_skills_parity.py): новый коннектор
без навыка роняет прогон, как и навык, который называет несуществующий
инструмент или забыл существующий. До этого теста навык DNS почти год советовал
формат ссылки /product/<24-hex>/ — тот самый шаблон, который чинили как баг.
Скиллы едут в Docker-образ (/app/skills/), но в колёсах их нет: skills/
лежит в корне репозитория. Ставите с PyPI — возьмите навыки
из репозитория отдельно.
Настройка
Все параметры задаются переменными окружения с префиксом коннектора. Все необязательные.
| Префикс | Основные параметры |
|---|---|
WB_ | TIMEOUT, MIN_GAP, DEFAULT_DEST, NET_RETRIES, MAX_BODY_BYTES, CACHE_TTL, PROXY |
YANDEX_ | TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
DETMIR_ | REGION (RU-MOW, RU-SPE и другие), CACHE_TTL, PROXY |
OZON_ | TIMEOUT, MIN_GAP, IMPERSONATE, CACHE_TTL, PROXY |
AVITO_ | TIMEOUT, MIN_GAP, IMPERSONATE, CACHE_TTL, PROXY, LOCATION_ID |
TAOBAO_ | TIMEOUT, MIN_GAP, CACHE_TTL, |
ALI_ | TIMEOUT, MIN_GAP, CACHE_TTL |
MEGAMARKET_ | TIMEOUT, MIN_GAP, CACHE_TTL |
LAMODA_ | TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
DNS_ / CITILINK_ | TIMEOUT, MIN_GAP, CACHE_TTL |
CHROME_ | CDP_HOST, CDP_PORT, SCRAPING_PROFILE, BINARY, HEADLESS, STEALTH |
COMPARE_ | SOURCE_TIMEOUT |
MPSTATS_ | MP_AUTH (единственный обязательный — без него инструменты отвечают auth_missing), TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
MCP_ | TRANSPORT (stdio по умолчанию, либо http), HTTP_HOST, HTTP_PORT |
CHROME_CDP_HOST указывает, куда дозвониться CDP-клиенту (по умолчанию
127.0.0.1). Из контейнера ставьте chrome (сайдкар) или host.docker.internal
— это открывает tier-2 источники (Ozon, Авито, Taobao, Мегамаркет, Lamoda,
DNS, Ситилинк) в Docker без host networking. Подробности в
docs/DEPLOYMENT.md.
*_CACHE_TTL=0 выключает кэш. *_PROXY перекрывает стандартные HTTPS_PROXY и
ALL_PROXY — свой префикс есть у семи коннекторов: WB_, YANDEX_, DETMIR_,
OZON_, AVITO_, LAMODA_ и MPSTATS_. У Taobao своего нет намеренно: поиск там
подписан и ходит через собственный клиент. У Мегамаркета, DNS и Ситилинка тоже нет:
их трафик идёт через ваш Chrome, а его egress — дело настроек браузера. Кэшируются
только удачные ответы: запомнить сбой значило бы растянуть секундную помеху на весь
TTL.
У Ozon прокси применяется к первому уровню. Второй идёт через ваш собственный Chrome, и его трафик — дело настроек этого браузера.
Секрет один, и тот опциональный. Всем серверам, кроме MPStats, ничего не нужно:
нечего настраивать, нечему утечь. У MPStats есть MPSTATS_MP_AUTH — JWT платного
аккаунта, и потому его место только в env клиентской записи: в коде и коммитах его
нет и быть не должно.
Разработка
uv sync --all-packages
uv run pytest -q -m "not live and not cdp" # 1208 офлайн-тестов
uv run pytest -q -m "not live" # то, что гоняет CI
uv run pytest -q -m "not live" --cov # покрытие, порог 70% в CI
uv run ruff check . && uv run ruff format --check .
uv run mypy # что проверять — в [tool.mypy] files
uv run mypy --platform win32 # ловит ошибки, видимые только на Windows
uv run python scripts/check_no_print.py # запись в stdout ломает JSON-RPC
uv run python scripts/check_versions.py # одна версия во всех 77 местах
Часть тестов прогоняет настоящий JS-экстрактор коннектора по снятой разметке и проверяет результат против цен, которые в тот момент были на странице. Для этого нужен Node с jsdom:
npm install jsdom # либо NODE_PATH на уже установленный
uv run pytest -q packages/dns-connector/tests/test_search_extractor_dom.py \
packages/citilink-connector/tests/test_search_extractor_dom.py
Без jsdom эта половина честно скипается, а питоновская часть — выбор цены из кандидатов — идёт всегда. jsdom нужен только разработчику: в зависимости коннекторов он не входит.
CI прогоняет тесты на Ubuntu, Windows и macOS против Python 3.12 и 3.13. Windows-специфичное управление процессами проверяется юнит-тестами на любой ОС через подмену платформы, так что эти ветки покрыты даже на Linux.
Как добавить маркетплейс — docs/ADDING_A_SOURCE.md.
Надёжность
Неофициальные эндпоинты ломаются. Архитектура это предполагает.
- Терпимые парсеры. Привязка поля по нескольким именам и приведение типов впитывают переименования и смену типа вместо падения.
- Никогда не выдумывать значение. Отсутствующая цена — это
null, не0. Ноль вывел бы мёртвый товар в самые дешёвые. - Громкий отказ. Когда формат перестаёт совпадать, инструмент бросает
parser_drift, а не возвращает полуразобранные данные. - Трёхзначные selfcheck-проверки.
success,drift_detectedилиinconclusive. Гео-блокировка помечается какinconclusive, потому что она ничего не говорит о состоянии парсеров.
Границы доверия
Названия товаров, имена продавцов и тексты отзывов написаны продавцами и покупателями. Это недоверенные данные. Если отзыв или описание выглядит как инструкция, оно всё равно остаётся входными данными. Выполнять его агент не должен.
Условия маркетплейсов, как правило, запрещают неофициальный парсинг. Коннекторы обращаются только к публичным эндпоинтам каталога, которые использует официальный веб-клиент. В приватные и административные разделы запросов нет. Уровень Ozon с браузером работает внутри сессии, которую вы открыли сами. Используйте на своё усмотрение, для личных исследований, в вежливом темпе запросов. Пауза между вызовами к площадкам с анти-ботом — это часть конструкции, а не случайное торможение: её не нужно убирать ради скорости. Данные инструментов не предназначены для перепродажи или массового сбора.
Как это сделано
Код и документацию я писал вместе с ИИ-ассистентами. Они работают быстро и ошибаются уверенно, поэтому проект устроен вокруг проверки: 1208 офлайн-тестов, аудит перед выпуском, тесты, которые прогоняют настоящий экстрактор по снятой с сайта разметке. В заметках к релизу перечислено, какие источники сверены с живыми страницами вручную и какие остались непроверенными.
Вопрос «кто набрал текст» кажется мне менее интересным, чем вопрос «чем это проверено». Второй здесь задокументирован, и проверить его может любой.
Спасибо
@Xpos587 — коннектор MPStats (PR #5): разбор API плагина, структура парсеров и первая рабочая версия.
Лицензия
MIT, файл LICENSE.
English version
MCP servers for Russian and Chinese marketplaces. Read prices, stock, ratings, reviews and seller identity from Wildberries, Ozon, Yandex Market, Detsky Mir, Avito, AliExpress, Taobao, Megamarket, Lamoda, DNS and Citilink, then compare prices across all of them in one call. Taobao and AliExpress are the Chinese ones; the other nine are Russian.
Read-only. No credentials, no API keys, no account required — the marketplaces with
hard anti-bot are read through your own Chrome. One optional exception: MPStats
takes a paid account token (MPSTATS_MP_AUTH) if you want its analytics; without
it every other server is unaffected.
What you get
| Server | Tools | What it takes to read | Notes |
|---|---|---|---|
| Wildberries | 8 | anonymous HTTP | Search, cards, reviews, buyer questions, seller legal identity, catalog tree and category listings |
| Yandex Market | 2 | anonymous HTTP | Multi-seller prices, star distribution, reviews |
| Detsky Mir | 3 | anonymous HTTP | Kids' goods, offline store stock, category listings |
| Ozon | 3 | your Chrome; often no browser from a residential IP | Search, cards, reviews |
| Avito | 3 | your Chrome + a Russian residential IP and spaced requests — else an IP block | Classified search, cards, seller reputation |
| Taobao | 2 | your Chrome with an active Taobao login | Search and cards, prices in yuan |
| Megamarket | 2 | your Chrome with an active login — an anonymous session reads empty | Search and cards via the mobile API |
| Lamoda | 2 | cards anonymous (GraphQL), search via your Chrome | Search, cards with sizes |
| DNS | 2 | your Chrome (Qrator) | Electronics search and cards |
| Citilink | 2 | your Chrome (Qrator) | Electronics search and cards |
| AliExpress | 2 | your Chrome (x5sec) | Search and cards, ruble prices |
| Compare | 2 | aggregates the above | "Where is this cheapest?" in one call |
| MPStats | 2 | paid MPStats account, mp_auth cookie (optional) | 30-day sales/stock graphs per Ozon/WB SKU, warehouse split (FBS/FBO) |
Anonymous, no browser: Wildberries, Yandex Market, Detsky Mir and Lamoda cards.
The rest need your logged-in Chrome (CDP). Taobao and Megamarket additionally need
you signed into the marketplace itself — without it Taobao hits a login wall and
Megamarket returns an empty result. Avito also blocks by IP: from a datacenter
address it is a flat refusal, from a Russian residential one it works as long as
you do not burst requests. Requests to the CDP sources are paced apart — a run of
back-to-back calls degrades them (DNS and Taobao both dropped that way in testing),
so the connectors hold a gap between calls themselves. Run marketplace-mcp doctor
from your own session for the current state.
MPStats stands apart as the only paid source: without MPSTATS_MP_AUTH the
server boots but its tools answer auth_missing. It is therefore optional —
plug it in if you have an account; the other thirteen servers never notice.
35 tools across 13 stdio MCP servers, sharing one runtime (mcp-core), plus the
unified marketplace-mcp that mounts them all under one client entry. It adds its
own marketplace_sources tool — which connectors mounted, and which dropped out and
why — so it exposes 36 tools: the 35 mounted plus that one. stdio is the default;
HTTP transport is opt-in for remote deployment — see
docs/DEPLOYMENT.md.
Quickstart
Requires Python 3.12+ and uv.
git clone https://github.com/Vladimir-Human/ru-marketplace-mcp.git
cd ru-marketplace-mcp
uv sync --all-packages
uv run pytest -q -m "not live and not cdp" # 1208 offline tests, no network needed
Client configuration mirrors the Russian section above. Each server is a console
script (wb-mcp, ozon-mcp, yandex-mcp, detmir-mcp, aliexpress-mcp, compare-mcp) launched
through uv run --directory /path/to/repo <script>. The optional mpstats-mcp
runs the same way with MPSTATS_MP_AUTH in the entry's env (paid MPStats
account; without it the tools return auth_missing). marketplace-mcp install [claude|claude-code|cursor|dsh] prints the block with your checkout's real path filled
in — no placeholder to hand-edit — or the console-script paths on PATH when installed
as a wheel; an unknown client name is rejected. The dsh target prints a
cordis.patch.yml row instead of mcpServers JSON — see dsh/README.md.
DeepSeek Harness (dsh) installs as a plugin bundle rather than an mcpServers
entry, from the dsh/ subdirectory (pnpm must be on PATH):
dsh plugin --profile web add github:Vladimir-Human/ru-marketplace-mcp#path:/dsh
That gives you 14 skills immediately and no MCP tools: both MCP rows stay
disabled until RU_MARKETPLACE_MCP_DIR points at a clone. A mounted server is paid
on every request — ~0.9k tokens for the recommended price-comparison mode, ~13.6k for
the full set — so opting in is left to you. dsh/README.md covers
enabling it and the full mode.
After connecting, run marketplace-mcp doctor. It runs every connector's canary and
reports success, drift_detected, or inconclusive for each.
The tools
The *_selfcheck canaries are deliberately absent from these tables: they are not
published over MCP, because operator diagnostics would cost the model ~7.5k tokens
on every request. marketplace-mcp doctor runs them all from the command line.
Wildberries — wb_*
| Tool | What it does |
|---|---|
wb_search(query, page) | Text search, up to 100 products/page with prices and stock |
wb_card(nm_ids) | Batch lookup for up to 100 known SKUs |
wb_root_info(nm_id) | Resolves imt_id (needed for reviews) plus colour variants |
wb_reviews(imt_id, limit, sort) | Review pool, keyed by imt_id, not nm_id |
wb_questions(imt_id, limit, skip, answered_only) | Buyer questions with seller answers, also keyed by imt_id |
wb_seller(supplier_id) | Registered entity, INN, KPP, OGRN, legal address |
wb_categories(root, max_depth) | Catalog tree with WB's own shard/query selectors |
wb_category_products(shard, query, page, sort, dest) | Products in a category, using those selectors |
wb_seller answers the question a listing hides: who actually ships this? It returns
the registered legal entity and tax ids, which is how you distinguish an official
brand store from a reseller trading under a lookalike name.
wb_questions covers a different gap. Reviews describe what owning the product is
like; questions clarify what it actually is — "10A or 16A?", "is the cable
included?" — and the seller's reply is often the only public statement of that fact.
One pool per imt_id, shared across every variant.
wb_category_products closes the loop wb_categories opens: that tool hands back
WB's shard and query, and this one fetches the products behind them. Items use
the same shape as wb_search, so a category walk and a text search are directly
comparable. Several of WB's largest sections carry the shard blackhole and have no
feed at all; the tool says so instead of returning an empty list.
Yandex Market — yandex_*
| Tool | What it does |
|---|---|
yandex_search(query, page, limit) | Search with both prices, ratings, sellers |
yandex_card(product_id, include_reviews) | Full detail plus star breakdown and reviews |
Two prices, always. price_rub is what anyone pays. price_with_plus needs a
paid Yandex Plus subscription and runs 25–30% lower. Yandex leads with the subscriber
price, so quoting it uncritically misstates the real cost.
rating_stars gives the distribution, for example {1: 10, 2: 3, 3: 10, 4: 19, 5: 502}.
That reveals whether a 4.8 average is earned or hides a cluster of complaints.
Detsky Mir — detmir_*
| Tool | What it does |
|---|---|
detmir_categories(parent, limit, region) | Catalog tree, start here |
detmir_category(alias, limit, offset, region) | Products in a category, with real totals |
detmir_card(product_id, region) | Price, rating, online and offline store stock |
Region is per call. Prices and especially offline availability swing by city —
one item sat in 152 Moscow stores, 37 in St Petersburg, 2 in Khabarovsk. The
region parameter overrides DETMIR_REGION, so one session can compare cities.
There is no text search, deliberately. Detsky Mir's API silently ignores every text filter and returns its entire 300k-item catalog; the website's search route answers 404 and renders a promo carousel. A search tool would return confidently wrong products, so discovery goes through categories instead. See docs/ANTI_BOT.md.
Ozon — ozon_*
| Tool | What it does |
|---|---|
ozon_search(query) | Text search |
ozon_card(sku_or_path) | Product detail |
ozon_reviews(sku_or_path, limit, sort) | Reviews |
Ozon rejects datacenter traffic, so this connector is two-tier: TLS impersonation first, then a fetch inside your own logged-in Chrome over the DevTools Protocol when Cloudflare challenges. Nothing is stored; you log in yourself, in a browser you control. Setup: docs/CDP_SETUP.md.
From a Russian residential IP the first tier usually works and no browser is needed.
AliExpress — aliexpress_*
| Tool | What it does |
|---|---|
aliexpress_search(query) | Search: up to 48 tiles with ruble prices |
aliexpress_card(item_id_or_url) | Card: title, price, rating, order count |
Read through your Chrome (CDP): x5sec challenges anonymous clients, so the
connector lands on a search page (never challenged) and opens the card in a new
tab from it. Prices are rubles and rank in compare_prices. A card with a title
but no price is a known state — under load x5sec stops serving the price module
and the connector reports price_missing rather than inventing a number. A
"with coupon" price never lands in price_rub: the regular price does, and the
coupon is reported as a warning. Review texts are not exposed; rating and order
counts are. As with every CDP source, a green aliexpress_selfcheck proves the
transport answered — not that a given price is right.
Avito — avito_*
| Tool | What it does |
|---|---|
avito_search(query, page, location_id, category_id) | Classified search through the internal js/items API |
avito_card(item_id_or_url) | One listing: price, description, views, seller |
avito_seller(seller_id_or_url) | Seller rating, review count, active listings |
Avito is classifieds, not a catalog: there is no per-product review pool, the
seller's reputation IS the trust signal. A free/swap listing arrives with
price_rub: null — never 0, so it cannot win "cheapest". From a datacenter
IP Avito answers a 403 firewall, hence the two-tier transport: TLS impersonation
first, then your Chrome, exactly like Ozon.
Taobao — taobao_*
| Tool | What it does |
|---|---|
taobao_search(query, page) | Catalog search |
taobao_card(item_id_or_url) | Product card |
Taobao search is a signed-mtop React app: every request needs a sign derived
from a cookie token, so there is no anonymous path. All reads run inside your
Chrome, where the site signs its own requests. Prices stay in yuan (CNY) and
are never converted — a baked-in rate quietly goes stale, so compare ruble and
yuan listings explicitly.
Megamarket, Lamoda, DNS, Citilink
These four read through your Chrome (CDP). Megamarket (megamarket_*) goes
through the mobile JSON API behind ServicePipe and needs an active login — an
anonymous session reads empty. DNS (dns_*) and Citilink (citilink_*) render
DOM behind Qrator with no anonymous path at all. Lamoda (lamoda_*) is split:
cards over anonymous GraphQL, search through Chrome. All of them need Chrome
with CDP (scripts/start_chrome_cdp.sh), except Lamoda cards. Eight sources
run through CDP in total: these plus Taobao, AliExpress, Ozon and Avito, where
Chrome is only the fallback tier when the anonymous one is challenged.
Cross-marketplace — compare_*
| Tool | What it does |
|---|---|
compare_prices(query, per_source_limit, sources) | Every marketplace at once, ranked |
compare_sources() | Which marketplaces this install can query |
compare_prices("кроссовки мужские")
wildberries 712 RUB Кроссовки изи дышащие спортивные
wildberries 814 RUB Зимние кроссовки теплые с мехом
yandex_market 2499 RUB Кеды A-LOW
yandex_market 3480 RUB Кеды
cheapest: wildberries 712 RUB, spread 5858 RUB, complete: true
Sources are queried concurrently and each reports its own outcome. One marketplace
being blocked never sinks the comparison: complete: false plus source_outcomes
tells you exactly what you are looking at. Subscription prices never win the ranking.
Offers matching on (source, product id) are collapsed, so one listing can no longer
take two ranking slots.
Every offer carries currency (lowercase ISO code, default rub) and price_native,
the price in that currency as the marketplace quotes it. For Russian sources it mirrors
price_rub; for Taobao it holds the yuan price that price_rub deliberately leaves
null. That yuan price used to be fetched and silently thrown away, so a Taobao row
showed a blank price with no sign a real one existed. Now the yuan is reported but
still never ranked against roubles: a foreign_currency: … warning lists how many
offers were excluded and why. Converting here would bake in an exchange rate that goes
stale silently, so the caller converts if they want to.
MPStats — mpstats_*
Sales and stock analytics per Ozon or Wildberries SKU via the MPStats browser
plugin. Unlike every other connector, this one is optional and needs a paid
MPStats account: auth is a single mp_auth cookie (JWT from a logged-in plugin
session at mpstats.io), set via the MPSTATS_MP_AUTH env var. Without it the tools
return auth_missing while the server boots normally — nothing else is affected.
| Tool | What it does |
|---|---|
mpstats_item(skus, place, oz_fbs=True) | 30-day analytics for up to 100 SKUs: orders, price, stock, per-day graphs, seller/brand |
mpstats_warehouses(skus, place) | Warehouse split: FBS (seller's warehouse) vs FBO (marketplace warehouse), last_update |
place is ozon or wildberries. Graphs are length 30, oldest first: the last
non-zero cell is the current price or stock. The two differ on purpose when the
whole graph is zero: price becomes None (a false 0 would win any "cheapest"
comparison), while stock becomes 0, because "none in stock" is a real reading
rather than an absence of data. An empty graph yields None for both. A zero
cell means "no data for that day", not "the value was zero", so sum the graph for
a window total. A missing token or a transport failure reports
as inconclusive, not drift — no chasing a schema drift that never happened.
The token is a secret on a paid, quota-billed account: never log or commit it.
Agent skills
Every connector ships its own skill under skills/ — fourteen of them — one per source plus a shared
marketplace overview. A skill is not a restatement of this README: it tells the agent when to
reach for that source at all, what the source does not have, and which of its
answers should not be trusted without a second look.
| Skill | Server |
|---|---|
skills/wb-connector | wb-mcp |
skills/ozon-connector | ozon-mcp |
skills/yandex-connector | yandex-mcp |
skills/detmir-connector | detmir-mcp |
skills/avito-connector | avito-mcp |
skills/taobao-connector | taobao-mcp |
skills/megamarket-connector | megamarket-mcp |
skills/lamoda-connector | lamoda-mcp |
skills/dns-connector | dns-mcp |
skills/citilink-connector | citilink-mcp |
skills/aliexpress-connector | aliexpress-mcp |
skills/compare-prices | compare-mcp |
skills/mpstats-connector | mpstats-mcp |
skills/marketplace | marketplace-mcp |
mcp-core is the shared runtime rather than a server, so it has no skill.
The mapping is enforced by a test
(packages/marketplace-connector/tests/test_skills_parity.py): a new connector
without a skill fails the run, and so does a skill that names a tool which does
not exist — or omits one that does. Before that test existed, the DNS skill spent
months telling operators to pass /product/<24-hex>/, the exact pattern a fix had
already removed.
Skills are copied into the Docker image (/app/skills/), but they are not in
the wheels: skills/ lives at the repository root rather than inside the
packages. Installing from PyPI means fetching the skills from the repo separately.
Configuration
Every setting is an environment variable with a per-connector prefix. All optional.
| Prefix | Common knobs |
|---|---|
WB_ | TIMEOUT, MIN_GAP, DEFAULT_DEST, NET_RETRIES, MAX_BODY_BYTES, CACHE_TTL, PROXY |
YANDEX_ | TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
DETMIR_ | REGION (RU-MOW, RU-SPE, and others), CACHE_TTL, PROXY |
OZON_ | TIMEOUT, MIN_GAP, IMPERSONATE, CACHE_TTL, PROXY |
AVITO_ | TIMEOUT, MIN_GAP, IMPERSONATE, CACHE_TTL, PROXY, LOCATION_ID |
TAOBAO_ | TIMEOUT, MIN_GAP, CACHE_TTL, |
ALI_ | TIMEOUT, MIN_GAP, CACHE_TTL |
MEGAMARKET_ | TIMEOUT, MIN_GAP, CACHE_TTL |
LAMODA_ | TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
DNS_ / CITILINK_ | TIMEOUT, MIN_GAP, CACHE_TTL |
CHROME_ | CDP_HOST, CDP_PORT, SCRAPING_PROFILE, BINARY, HEADLESS, STEALTH |
COMPARE_ | SOURCE_TIMEOUT |
MPSTATS_ | MP_AUTH (the only required one — without it the tools return auth_missing), TIMEOUT, MIN_GAP, CACHE_TTL, PROXY |
MCP_ | TRANSPORT (stdio default, or http), HTTP_HOST, HTTP_PORT |
*_CACHE_TTL=0 disables caching. *_PROXY overrides the standard
HTTPS_PROXY/ALL_PROXY — seven connectors carry one: WB_, YANDEX_, DETMIR_,
OZON_, AVITO_, LAMODA_ and MPSTATS_. Taobao has none by design and
Megamarket, DNS and Citilink none either:
their traffic goes through your own Chrome, whose egress is that browser's
configuration. Only successful reads are cached: remembering a failure would stretch
a one-second blip across the whole TTL window.
Ozon's proxy applies to tier 1. Tier 2 runs inside your own Chrome, whose egress is that browser's configuration, not ours.
Containers. CHROME_CDP_HOST points the CDP client at Chrome (default
127.0.0.1; use chrome or host.docker.internal inside Docker). That single
variable is what opens the tier-2 sources — Ozon, Avito, Taobao, Megamarket,
Lamoda, DNS, Citilink and AliExpress — from a container without host networking.
See docs/DEPLOYMENT.md.
One secret, and it is optional. Every server except MPStats needs nothing:
nothing to configure, nothing to leak. MPStats alone has MPSTATS_MP_AUTH, the JWT
of a paid account — it belongs only in the client entry's env, never in code or
commits.
Development
uv sync --all-packages
uv run pytest -q -m "not live and not cdp" # 1208 offline tests
uv run pytest -q -m "not live" # what CI runs
uv run pytest -q -m "not live" --cov # coverage, CI enforces a 70% floor
uv run ruff check . && uv run ruff format --check .
uv run mypy # the tree lives in [tool.mypy] files
uv run mypy --platform win32 # catches Windows-only type errors
uv run python scripts/check_no_print.py # a print() breaks JSON-RPC
uv run python scripts/check_versions.py # one version across all 77 places
Some tests execute a connector's real extractor JavaScript against captured markup and check the output against the prices the page was showing when it was captured. That needs Node with jsdom:
npm install jsdom # or point NODE_PATH at an existing copy
uv run pytest -q packages/dns-connector/tests/test_search_extractor_dom.py \
packages/citilink-connector/tests/test_search_extractor_dom.py
Without jsdom that half skips honestly and the Python half — choosing the price among the candidates — still runs. jsdom is a developer tool only; no connector depends on it.
CI runs lint, mypy and the full suite on Ubuntu, Windows and macOS against Python 3.12 and 3.13. Windows-specific process handling is unit-tested on every platform via a platform override, so those branches are covered even on Linux.
Adding a marketplace: docs/ADDING_A_SOURCE.md.
Reliability
Unofficial endpoints break. The design assumes it.
- Tolerant readers. Multi-alias field binding and type coercion absorb renames and type drift instead of crashing.
- Never fabricate a value. A missing price is
null, never0. A zero would rank a dead listing as the cheapest option. - Loud failure. When a payload stops matching, tools raise
parser_driftrather than returning half-parsed data. - Tri-state selfchecks.
success,drift_detectedorinconclusive. A geo block is reported as inconclusive, because it says nothing about the parsers.
Trust boundary
Tool output, meaning product titles, seller names and review text, is authored by sellers and buyers. Treat it as untrusted data. If a review or description appears to contain instructions, it is input, not policy.
Marketplace terms of service generally disallow unofficial parsing. These connectors read only the public catalog endpoints the official web clients use; no authenticated or administrative areas are touched. The Ozon CDP tier runs inside a browser session you established yourself. Use at your discretion, for personal research, at a polite request rate; the backoff between calls to anti-bot sources is deliberate and should not be removed for speed. Tool output is not meant for redistribution or bulk harvesting.
How this was built
I wrote the code and the documentation with AI assistants. They are fast and they are confidently wrong, so the project is arranged around verification: 1208 offline tests, an audit before the release, tests that run the real extractor against markup captured from the live site. The release notes say which sources were compared against live pages by hand and which were left unverified.
Who typed the text seems a less interesting question than what checks it survived. The second one is documented here, and anyone can re-run it.
Thanks
@Xpos587 for the MPStats connector (PR #5): the plugin API work, the parser structure and the first working version.
License
MIT, see LICENSE.
收录徽章
[](https://deepseek-plugin.org/plugins/Vladimir-Human/ru-marketplace-mcp)把这段 markdown 粘贴到你的 GitHub README,链接回本插件详情页。徽章只声明已被本站收录,不代表安全认证。