Перейти к основному содержимому
Возникают проблемы с получением токена?
Свяжитесь с поддержкой

TSPD

Посмотреть полный прайс

TSPD — это WAF-защита (Web Application Firewall), предназначенная для предотвращения автоматизированных атак и подозрительной активности на сайте. Для обычного пользователя её работа почти незаметна, так как основная цель — блокировка скриптов и ботов. В браузере проявления TSPD встречаются редко, и чаще всего они становятся заметны только при нестандартных или массовых запросах к серверу.

Внимание!

  • Для выполнения данной задачи используйте ваши собственные прокси.

  • После решения вы получите специальные cookie, которые необходимо добавить в браузер.

Параметры запроса​


ВАЖНО: значения некоторых параметров являются динамическими — они меняются при каждом рендеринге страницы с TSPD.
Извлекайте их непосредственно перед созданием задачи, чтобы избежать ошибок при решении. Примеры автоматического извлечения параметров см. в разделах Как получить cookies, Как получить base64 и Примеры автоматического решения TSPD .
type<string>required

CustomTask

class<string>required

tspd

websiteURL<string>required

Адрес страницы, на которой находится TSPD.

tspdCookie (внутри metadata)<string>required

Куки, полученные на странице с TSPD-challenge: "tspdCookie": "TS386a400d029=082670627aab2800722d179e73a60b575d00c96728a9f8dedd8be27a40f6a1aa5df467cebf7da7315a4e16675f010245; ....; ....;"

htmlPageBase64 (внутри metadata)<string>required

Вся страница с TSPD в формате base64, например: "htmlPageBase64": "PCFET0NUWVBFIGh0bWw+DQo8aHRtbD48aGVhZD4NCjxtZXRhIGh0dHAtZXF1aXY9IlByYWdtYSIgY29udGVudD0ibm8tY2FjaGUiLz4NCjxtZXRhIGh0dHAtZXF1aXY9IkV4cGlyZXMiIGNvbnRlbnQ9Ii0xIi8+DQo8bWV0YSBodHRwLWVxdWl2PSJDYWNoZUNvbnRyb2.....L2JvZHk+PC9odG1sPg=="

userAgent<string>required

User-Agent браузера.
Передавайте только актуальный UA от ОС Windows. Сейчас таковым является: userAgentPlaceholder

proxyType<string>required

http - обычный http/https прокси;
https - попробуйте эту опцию только если "http" не работает (требуется для некоторых кастомных прокси);
socks4 - socks4 прокси;
socks5 - socks5 прокси.

proxyAddress<string>required

IP адрес прокси IPv4/IPv6. Не допускается:

  • использование прозрачных прокси (там где можно видеть IP клиента);
  • использование прокси на локальных машинах.

proxyPort<integer>required

Порт прокси.

proxyLogin<string>required

Логин прокси-сервера.

proxyPassword<string>required

Пароль прокси-сервера.

Метод создания задачи​

POST
https://api.capmonster.cloud/createTask

Запрос

{
  "type": "CustomTask",
  "class": "tspd",
  "websiteUrl": "https://example.com",        
  "metadata": {
      "tspdCookie": "TS386a400d029=08...010245; TS386a400d029=08...01a06e; TS386a400d078=08...dbb3b0c; TSd2153684027=08...1944",
      "htmlPageBase64": "PCFET0NU...k+PC9odG1sPg=="
  },
  "userAgent": "userAgentPlaceholder",
  "proxyType": "http",
  "proxyAddress": "8.8.8.8",
  "proxyPort": 8080,
  "proxyLogin": "proxyLoginHere",
  "proxyPassword": "proxyPasswordHere"
}

Ответ

{
  "errorId": 0,
  "taskId": 407533072
}

Метод получения результата задачи​

Используйте метод getTaskResult, чтобы получить решение TSPD.

POST
https://api.capmonster.cloud/getTaskResult

Запрос

{
  "clientKey":"API_KEY",
  "taskId": 407533072
}

Ответ

{
  "errorId":0,
  "status":"ready",
  "solution":  {
        "Domains": {
            "example.com": {
                "Cookies": {
                    "TS386a400d029": "08267...01a06e",
                    "TS386a400d078": "08267...bb3b0c",
                    "TSd2153684027": "08267...11944",
                    "TS00000000076": "08267...b70fc2",
                    "TSPD_101_DID": "08267...1d53f",
                    "TS386a400d075": "0402b...1000"
                }
            }
        }
    }
}

Работа со страницей с TSPD​

Пример HTML-страницы с TSPD-challenge​

При отправке GET-запроса на страницу с TSPD-challenge, вы получите HTML, который нужно закодировать в Base64 и передать в параметре htmlPageBase64. Также при первом запросе сервер выдаст специальные cookies (например, TS386a...400d029) — их необходимо передать в tspdCookie, так как они обязательны для корректного решения TSPD и получения ответа от API.

GET-запрос к странице с TSPD-challenge
GET https://example.com/login?client_id=example.client.id&authorization_id=example_auth_id

sec-ch-ua: "Not:A-Brand";v="99", "Google Chrome";v="145", "Chromium";v="145"
sec-ch-ua-mobile: ?0
sec-ch-ua-platform: "Windows"
upgrade-insecure-requests: 1
user-agent: userAgentPlaceholder
accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8
sec-fetch-site: none
sec-fetch-mode: navigate
sec-fetch-user: ?1
sec-fetch-dest: document
accept-encoding: gzip, deflate, br
accept-language: en-US
priority: u=0,i
Upgrade-Insecure-Requests: 1
Страница с TSPD-challenge (пример)
<!DOCTYPE html>
<html>
<head>
    <meta http-equiv="Pragma" content="no-cache"/>
    <meta http-equiv="Expires" content="-1"/>
    <meta http-equiv="CacheControl" content="no-cache"/>
    <meta http-equiv="Content-Type" content="text/html; charset=utf-8"/>
    <link rel="icon" href="data:;base64,iVBOw0KGgo="/>

    <!-- Скрипт TSPD / ThreatMetrix Fingerprinting -->
    <script type="text/javascript">
        (function() {
            // Признак TSPD: переменная bobcmn содержит зашифрованные данные fingerprinting / session
            window["bobcmn"] = "101110111110102000000042000000052000000062000000012386a400d200000096200000000200000002300000000300000000300000006/TSPD/300000008TSPD_10130000000cTSPD_101_DID300000005https3000000b0082670627aab200065e4de40b46b945b49688c1d7f2da4f189123687c7515bd58ed223d60435730b086f24771b0a2800da70f3141fd5255393c12c8c87a64a83b8168f256387790c28dd3abb533560e42a9a0970df08ebd7300000002TS200000000200000000";
            
            // Признак TSPD: failureConfig для определения "неправильной" попытки или ошибки на странице
            window["failureConfig"] = "524f6f70732e2e2e2e736f6d657468696e672077656e742077726f6e672e2e2e2e20796f757220737570706f72742069642069733a2025444f534c372e6368616c6c656e67652e737570706f72745f6964252e1338353931363039373735373932323232353437062f545350442f171801";

            window.AtT = !!window.AtT;

            // Основной JS TSPD
            try {
                (function(){
                    var z = {
                        decrypt: function(z){
                            try {
                                return JSON.parse(
                                    function(z){
                                        z = z.split("l");
                                        var s = "";
                                        for (var _=0; _<z.length; ++_) s += String.fromCharCode(z[_]);
                                        return s;
                                    }(z)
                                );
                            } catch(_) {}
                        }
                    };
                    return z = { configuration: z.decrypt("123l34l97l99l116l105l118l101l34l58l34l110l111l34l44l34l100l101l98l117l103l103l105l110l34l58l34l110l111l34l44l34l109l111l100l117l108l11149l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l50l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l51l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l52l34l58l34l101l110l97l98l108l101l100l34l125")};
                })();

                var sz = 15;
                // Проверка окружения браузера, признаки IE9/IE9RGB
                zs(window[Zs[J(1086839, sz)]] === Zs);
                zs(typeof ie9rgb4 !== J(1242178186184, sz));

            })();
        })();
    </script>

    <!-- TSPD / ThreatMetrix fingerprinting скрипт, тип 8 -->
    <script type="text/javascript" src="/TSPD/082670627aab2000b8cb2cd11a623629ab3f79c29c36f891be5a445796e6258af0d27cef4a5db1d4?type=8"></script>

    <script type="text/javascript">
        // Еще один признак TSPD: blobfp и slobfp - уникальные отпечатки устройства
        (function(){
            window["blobfp"] = "01010101b00400000100e803000000000d4200353665636365626565343132626436353030363938386138663833326530623934356538333435633861363438623036643666386238363263333064396466633465210068747470733a2f2f72652e73656375726974792e66356161732e636f6d2f72652f0700545350445f3734";
            window["slobfp"] = "0827420c940b100087cabc9b010dfd3b94ac7988b1dcbba0";
        })();
    </script>

    <!-- TSPD / ThreatMetrix fingerprinting скрипт, тип 12 -->
    <script type="text/javascript" src="/TSPD/082670627aab2000b8cb2cd11a623629ab3f79c29c36f891be5a445796e6258af0d27cef4a5db1d4?type=12"></script>

    <noscript>
        Please enable JavaScript to view the page content.<br/>
        Your support ID is: 8591609775792222547.
        <link rel="stylesheet" href="/TSPD/?type=25" />
    </noscript>
</head>
<body>
</body>
</html>

При повторном запросе к целевой странице с cookies от CapMonster Cloud сервер вернёт обычный HTML со статусом 200 и без признаков TSPD. Это означает, что cookies приняты и можно продолжать работу с вашим сайтом.

GET-запрос к странице
GET https://example.com/login?client_id=example.client.id&authorization_id=example_auth_id

sec-ch-ua: "Not:A-Brand";v="99", "Google Chrome";v="145", "Chromium";v="145"
sec-ch-ua-mobile: ?0
sec-ch-ua-platform: "Windows"
upgrade-insecure-requests: 1
user-agent: userAgentPlaceholder
accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8
sec-fetch-site: none
sec-fetch-mode: navigate
sec-fetch-user: ?1
sec-fetch-dest: document
accept-encoding: gzip, deflate, br
accept-language: en-US

# Используйте cookies, полученные в результате решения задачи через CapMonster Cloud
# Замените примерные значения ниже на реальные cookies из ответа API
# Формат: cookie: имя1=значение1; имя2=значение2; ...

cookie: TS386a400d029=08267...01a06e; TS386a400d078=0826...dbb3b0c; TSd2153684027=082670...811944; TS00000000076=082670...b70fc2; TSPD_101_DID=08267...1d53f; TS386a400d075=0402b1...701000

priority: u=0,i
Upgrade-Insecure-Requests: 1
HTML страницы (пример)
<!DOCTYPE html>
<html lang="demo">
  <head>
    <meta charset="utf-8" />
    <link rel="icon" type="image/png" href="/sandbox.png" />
    <meta name="viewport" content="width=device-width, initial-scale=1.0" />

    <title>Sample Portal</title>

    <!-- Demo Font -->
    <link rel="stylesheet" href="https://demo-cdn.com/fonts/demo-font.css" />

    <!-- Icons -->
    <link rel="stylesheet" href="https://assets-sandbox.com/icons/demo-icons.css"/>

    <link rel="stylesheet" href="/static/sandbox.css">
    <script type="module" crossorigin src="/scripts/demo-app.js"></script>
    <link rel="stylesheet" crossorigin href="/styles/sample-theme.css">
  </head>
  <body>
    <noscript>Please enable scripts to continue.</noscript> 
    <div id="sandbox-root"></div>
  </body>
</html>

Как получить cookies​

Представленный ниже пример кода отправляет GET-запрос на страницу авторизации example.com/login с браузерными заголовками, выводит статус ответа, полный HTML страницы и полученные cookies (включая те, что начинаются на TS).

Пример на Node.js
const url =
  "https://example.com/login?client_id=example.client&authorization_id=example123";

// === Заголовки ===
const headers = {
  "sec-ch-ua":
    '"Not(A:Brand";v="8", "Chromium";v="145", "Google Chrome";v="145"',
  "sec-ch-ua-mobile": "?0",
  "sec-ch-ua-platform": '"Windows"',
  "Upgrade-Insecure-Requests": "1",
  "user-agent":
    "userAgentPlaceholder",
  accept:
    "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
  "sec-fetch-site": "same-site",
  "sec-fetch-mode": "navigate",
  "sec-fetch-user": "?1",
  "sec-fetch-dest": "document",
  "accept-language": "en-US",
  priority: "u=0,i",
  referer: "https://example.com/",
};

async function main() {
  const response = await fetch(url, {
    method: "GET",
    headers,
    redirect: "follow",
  });

  console.log("Status:", response.status);
  console.log("Final URL:", response.url);

  // === Получаем HTML ===
  const html = await response.text();

  console.log("\n===== FULL HTML RESPONSE =====\n");
  console.log(html);

  // === Получаем cookies ===
  const rawHeaders = response.headers;

  let setCookies = [];

  if (typeof rawHeaders.getSetCookie === "function") {
    setCookies = rawHeaders.getSetCookie();
  }
  // fallback (если доступно)
  else if (rawHeaders.raw) {
    setCookies = rawHeaders.raw()["set-cookie"] || [];
  }

  console.log("\n===== COOKIES FROM RESPONSE =====\n");

  setCookies.forEach((c) => {
    const cookiePair = c.split(";")[0];
    console.log(cookiePair);
  });

  // === Только TS cookies ===
  const tspdCookies = setCookies
    .map((c) => c.split(";")[0])
    .filter((c) => c.startsWith("TS"));

  console.log("\n===== TSPD COOKIES =====\n");
  console.log(tspdCookies);
}

main().catch(console.error);

Важно:

Если сервер возвращает cookies в следующем формате (четыре строки):

TS386a400d029=082670...87599c;
TS386a400d029=082670...40a8ea3;
TS386a400d078=082670...b4cbe2c;
TSd2153684027=082670...4415a6

Это означает, что запрос был обработан защитным механизмом и выдана страница блокировки (TSPD challenge). В данном случае необходимо:

  • Передать полученный набор cookies в CapMonster Cloud.
  • Дождаться результата решения.
  • Использовать обновлённые cookies для последующих запросов.

Если cookies не возвращаются или возвращаются в одном из следующих форматов (обычно три строки):

TS386a400d029=08777...83ff9,
TS386a400d029=08777...fb459e,
TSd2153684027=08777...f0ad368

или:

TS014d0691=01fef...1244b,
TS01fe94e8=01fef...9ed38,
TSafd868f7027=082670...a7ea7c

Это означает, что доступ к ресурсу разрешён. В данном случае можно:

  • Продолжать выполнение запросов к сайту.
  • Использовать полученные cookies в рамках текущей сессии.

Как получить Base64 страницы​

После того, как вы получили HTML страницы с TSPD-challenge, его необходимо закодировать в Base64. Это можно сделать с помощью различных инструментов или программных библиотек. Ниже приведён пример на Node.js, который выполняет эту задачу:

Пример на Node.js
const url =
  "https://example.com/login";

// === Задайте нужные заголовки ===
const headers = {
  "sec-ch-ua":
    '"Not(A:Brand";v="8", "Chromium";v="145", "Google Chrome";v="145"',
  "sec-ch-ua-mobile": "?0",
  "sec-ch-ua-platform": '"Windows"',
  "Upgrade-Insecure-Requests": "1",
  "user-agent":
    "userAgentPlaceholder",
  accept:
    "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
  "sec-fetch-site": "same-site",
  "sec-fetch-mode": "navigate",
  "sec-fetch-user": "?1",
  "sec-fetch-dest": "document",
  "accept-language": "en-US",
  priority: "u=0,i"
};

async function main() {
  const response = await fetch(url, {
    method: "GET",
    headers,
    redirect: "follow",
  });

  if (!response.ok) {
    throw new Error(`HTTP error: ${response.status}`);
  }

  // Получаем полный HTML
  const html = await response.text();

  // Кодируем в Base64
  const base64 = Buffer.from(html, "utf-8").toString("base64");

  console.log("===== BASE64 RESULT =====\n");
  console.log(base64);
}

main().catch(console.error);

Примеры автоматического решения TSPD​

Важно

Примеры носят демонстрационный характер и показывают общую логику работы с сайтами, использующими защиту TSPD. В реальных проектах код может потребовать адаптации под конкретный сайт, его запросы и заголовки.

Важные данные (API‑ключи, настройки прокси и т.п.) рекомендуется хранить в .env или переменных окружения.

Как работает алгоритм:

  1. Первый запрос. Скрипт делает HTTP-запрос к странице через прокси с браузерными заголовками.

  2. Получение cookies. Из ответа извлекаются cookies защиты. Если возвращается cookie TSPD_101_DID (означающие, что защита уже пройдена) или формат неправильный — выполнение прекращается.

  3. Создание задачи. Скрипт отправляет в CapMonster Cloud задачу типа CustomTask (class: tspd) с данными:

    • URL страницы

    • cookies защиты

    • HTML страницы (Base64)

    • User-Agent

    • прокси

  4. Получение решения. Скрипт ждёт результат через API (getTaskResult) и получает корректные cookies.

  5. Финальный запрос. Запрос повторяется с полученными cookies, после чего возвращается нормальная HTML-страница.

Показать код (Node.js)
import { gotScraping } from "got-scraping";
import fs from "fs";

const API_KEY = "YOUR_API_KEY"; // Замените на ваш API-ключ CapMonster
const CAPMONSTER_URL = "https://api.capmonster.cloud";

// Замените на целевой URL
const url =
  "https://example.com";

//  Замените на ваш прокси
const proxy = {
  host: "proxyAddress",
  port: 8080,
  login: "proxyLogin",
  password: "proxyPassword",
  type: "http",
};

const proxyUrl = `${proxy.type}://${proxy.login}:${proxy.password}@${proxy.host}:${proxy.port}`;

// Используйте актуальный User-Agent
const userAgent =
  "userAgentPlaceholder";

function delay(ms) {
  return new Promise((resolve) => setTimeout(resolve, ms));
}

function extractValidTspdCookies(setCookies) {
  const cookies = setCookies.map((c) => c.split(";")[0].trim());

  console.log("\nRaw cookies:");
  console.log(cookies);

  // Проверяем, что TSPD_101_DID отсутствует
  const hasDid = cookies.some((c) => c.startsWith("TSPD_101_DID="));

  if (hasDid) {
    console.log("TSPD_101_DID detected. Request was blocked.");
    return null;
  }

  // Извлекаем только TS cookies
  const tsCookies = cookies.filter((c) => c.startsWith("TS"));

  // Должно быть только 4 TS cookies
  if (tsCookies.length !== 4) {
    console.log("Invalid TS cookie count:", tsCookies.length);
    return null;
  }

  const validFormat = tsCookies.every((c) => /^[^=]+=[^=]+$/.test(c));

  if (!validFormat) {
    console.log("Invalid TS cookie format.");
    return null;
  }

  console.log("Valid TSPD cookie set detected.");

  return tsCookies.join("; ");
}

function solutionToCookieHeader(solution) {
  const domain = Object.keys(solution.domains)[0];
  const cookies = solution.domains[domain].cookies || {};

  const result = [];

  for (const [name, value] of Object.entries(cookies)) {
    result.push(`${name}=${value}`);
  }

  return result.join("; ");
}

async function createTask(task) {
  const response = await gotScraping
    .post(`${CAPMONSTER_URL}/createTask`, {
      json: {
        clientKey: API_KEY,
        task,
      },
    })
    .json();

  if (response.errorId !== 0) {
    throw new Error(response.errorDescription);
  }

  return response.taskId;
}

async function getTaskResult(taskId) {
  while (true) {
    await delay(3000);

    const response = await gotScraping
      .post(`${CAPMONSTER_URL}/getTaskResult`, {
        json: {
          clientKey: API_KEY,
          taskId,
        },
      })
      .json();

    if (response.errorId !== 0) {
      throw new Error(response.errorDescription);
    }

    if (response.status === "ready") {
      return response.solution;
    }

    console.log("Waiting for solution...");
  }
}

async function main() {
  try {
    console.log("Sending initial request...");

    const response = await gotScraping(url, {
      proxyUrl,
      headers: {
        "sec-ch-ua":
          '"Not:A-Brand";v="99", "Google Chrome";v="145", "Chromium";v="145"',
        "sec-ch-ua-mobile": "?0",
        "sec-ch-ua-platform": '"Windows"',
        "upgrade-insecure-requests": "1",
        "user-agent": userAgent,

        accept:
          "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8",

        "sec-fetch-site": "same-site",
        "sec-fetch-mode": "navigate",
        "sec-fetch-user": "?1",
        "sec-fetch-dest": "document",

        "accept-language": "en-US,en;q=0.9",

        referer: "https://example.com/", // Замените на актуальный referer
      },
    });

    let html = response.body;

    const htmlBase64 = Buffer.from(html).toString("base64");

    const setCookies = response.headers["set-cookie"] || [];

    const tspdCookies = extractValidTspdCookies(setCookies);

    if (!tspdCookies) {
      console.log(
        "Stopping script. No valid TSPD cookies detected. Continuing normal site interaction.",
      );
      return;
    }

    const task = {
      type: "CustomTask",
      class: "tspd",
      websiteUrl: url,
      metadata: {
        tspdCookie: tspdCookies,
        htmlPageBase64: htmlBase64,
      },
      userAgent,
      proxyType: proxy.type,
      proxyAddress: proxy.host,
      proxyPort: proxy.port,
      proxyLogin: proxy.login,
      proxyPassword: proxy.password,
    };

    console.log("\nCreating CapMonster Cloud task...");

    const taskId = await createTask(task);

    console.log("Task ID:", taskId);

    const solution = await getTaskResult(taskId);

    console.log("\nSolution received:");
    console.log(JSON.stringify(solution, null, 2));

    const cookieHeader = solutionToCookieHeader(solution);

    console.log("\nFinal Cookie header:");
    console.log(cookieHeader);

    const finalHeaders = {
      "sec-ch-ua":
        '"Not:A-Brand";v="99", "Google Chrome";v="145", "Chromium";v="145"',
      "sec-ch-ua-mobile": "?0",
      "sec-ch-ua-platform": '"Windows"',
      "upgrade-insecure-requests": "1",
      "user-agent": userAgent,

      accept:
        "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",

      "sec-fetch-site": "same-site",
      "sec-fetch-mode": "navigate",
      "sec-fetch-user": "?1",
      "sec-fetch-dest": "document",

      "accept-encoding": "gzip, deflate, br, zstd",
      "accept-language": "en-US,en;q=0.9",

      cookie: cookieHeader,

      priority: "u=0,i",

      referer: "https://example.com/", // Замените на актуальный referer
    };

    console.log("\nFinal request headers:");
    console.log(JSON.stringify(finalHeaders, null, 2));

    const finalResponse = await gotScraping(url, {
      proxyUrl,
      headers: finalHeaders,
      followRedirect: true,
    });

    console.log("\nFinal page length:", finalResponse.body.length);

    fs.writeFileSync("final_page.html", finalResponse.body);

    console.log("Page saved to final_page.html");
  } catch (err) {
    console.error("Error:", err.message);
  }
}

main();
Статья была полезной?
Узнайте стоимость AI решения КАПЧ