Ончейн-данные в продакшене: о чем вам никто не расскажет

Блокчейн-данные не бывают чистыми, надежными или простыми. Rate-лимиты RPC, реорги цепи, баги с BigInt и компромиссы индексирования — выстраданные уроки из реальных DeFi-продуктов.

Существует фантазия, что ончейн-данные по своей природе заслуживают доверия. Неизменяемый реестр. Прозрачное состояние. Просто читай — и готово.

Я тоже в это верил. Потом я выпустил DeFi-дашборд в продакшен и провел три недели, разбираясь, почему наши балансы токенов были неверными, история событий имела пробелы, а наша база данных содержала транзакции из блоков, которых больше не существовало.

Ончейн-данные — сырые, враждебные и полные граничных случаев, которые сломают ваше приложение так, что вы не заметите, пока пользователь не пришлет баг-репорт. Этот пост охватывает всё, что я усвоил на собственном опыте.

Иллюзия надежных данных#

Вот первое, о чем никто не говорит: блокчейн не дает вам данные. Он дает вам переходы состояний. Нет никакого SELECT * FROM transfers WHERE user = '0x...'. Есть логи, квитанции, слоты хранилища и трейсы вызовов — все закодированные в форматах, для декодирования которых нужен контекст.

typescript

import { createPublicClient, fallback, http } from "viem";
import { mainnet } from "viem/chains";
 
const client = createPublicClient({
  chain: mainnet,
  transport: fallback(
    [
      http("https://eth-mainnet.g.alchemy.com/v2/YOUR_KEY", {
        retryCount: 3,
        retryDelay: 1500,
        timeout: 15_000,
      }),
      http("https://mainnet.infura.io/v3/YOUR_KEY", {
        retryCount: 3,
        retryDelay: 1500,
        timeout: 15_000,
      }),
      http("https://rpc.ankr.com/eth", {
        retryCount: 2,
        retryDelay: 2000,
        timeout: 20_000,
      }),
    ],
    { rank: true },
  ),
});

typescript

interface IndexedBlock {
  number: bigint;
  hash: `0x${string}`;
  parentHash: `0x${string}`;
}
 
async function detectReorg(
  client: PublicClient,
  lastIndexed: IndexedBlock,
): Promise<{ reorged: boolean; depth: number }> {
  const currentBlock = await client.getBlock({
    blockNumber: lastIndexed.number,
  });
 
  if (currentBlock.hash === lastIndexed.hash) {
    return { reorged: false, depth: 0 };
  }
 
  // Идем назад, чтобы найти, где цепь разошлась
  let depth = 1;
  let checkNumber = lastIndexed.number - 1n;
 
  while (checkNumber > 0n && depth < 128) {
    const onChain = await client.getBlock({ blockNumber: checkNumber });
    const inDb = await getIndexedBlock(checkNumber); // ваш запрос к БД
 
    if (onChain.hash === inDb?.hash) {
      return { reorged: true, depth };
    }
 
    depth++;
    checkNumber--;
  }
 
  return { reorged: true, depth };
}

typescript

import type { PublicClient, Log, AbiEvent } from "viem";
 
async function fetchLogsInChunks<T extends AbiEvent>(
  client: PublicClient,
  params: {
    address: `0x${string}`;
    event: T;
    fromBlock: bigint;
    toBlock: bigint;
    maxBlockRange?: bigint;
  },
): Promise<Log<bigint, number, false, T, true>[]> {
  const { address, event, fromBlock, toBlock, maxBlockRange = 2000n } = params;
  const allLogs: Log<bigint, number, false, T, true>[] = [];
 
  let currentFrom = fromBlock;
 
  while (currentFrom <= toBlock) {
    const currentTo = currentFrom + maxBlockRange - 1n > toBlock ? toBlock : currentFrom + maxBlockRange - 1n;
 
    try {
      const logs = await client.getLogs({
        address,
        event,
        fromBlock: currentFrom,
        toBlock: currentTo,
      });
 
      allLogs.push(...logs);
      currentFrom = currentTo + 1n;
    } catch (error) {
      // Если диапазон слишком большой (слишком много результатов), делим пополам
      if (isRangeTooLargeError(error) && currentTo > currentFrom) {
        const mid = currentFrom + (currentTo - currentFrom) / 2n;
        const firstHalf = await fetchLogsInChunks(client, {
          address,
          event,
          fromBlock: currentFrom,
          toBlock: mid,
          maxBlockRange,
        });
        const secondHalf = await fetchLogsInChunks(client, {
          address,
          event,
          fromBlock: mid + 1n,
          toBlock: currentTo,
          maxBlockRange,
        });
        allLogs.push(...firstHalf, ...secondHalf);
        currentFrom = currentTo + 1n;
      } else {
        throw error;
      }
    }
  }
 
  return allLogs;
}
 
function isRangeTooLargeError(error: unknown): boolean {
  const message = error instanceof Error ? error.message : String(error);
  return (
    message.includes("Log response size exceeded") ||
    message.includes("query returned more than") ||
    message.includes("exceed maximum block range")
  );
}

typescript

// БАГ: Выглядит безобидно, но таковым не является
function formatTokenAmount(amount: bigint, decimals: number): string {
  return (Number(amount) / Math.pow(10, decimals)).toFixed(4);
}
 
// Для маленьких сумм это работает нормально:
formatTokenAmount(1000000n, 6); // "1.0000" -- правильно
 
// Для больших сумм ломается тихо:
formatTokenAmount(123456789012345678n, 18);
// Возвращает "0.1235" -- НЕВЕРНО, точность потеряна
// Number(123456789012345678n) === 123456789012345680
// Последние две цифры округлены по IEEE 754

typescript

import { formatUnits, parseUnits } from "viem";
 
// Правильно: оперирует BigInt, возвращает строку
function formatTokenAmount(amount: bigint, decimals: number, displayDecimals: number = 4): string {
  const formatted = formatUnits(amount, decimals);
 
  // formatUnits возвращает строку с полной точностью, например "0.123456789012345678"
  // Обрезаем (не округляем) до нужной точности отображения
  const [whole, fraction = ""] = formatted.split(".");
  const truncated = fraction.slice(0, displayDecimals).padEnd(displayDecimals, "0");
 
  return `${whole}.${truncated}`;
}
 
// Также критично: используйте parseUnits для пользовательского ввода, никогда parseFloat
function parseTokenInput(input: string, decimals: number): bigint {
  // parseUnits корректно обрабатывает конвертацию строки в BigInt
  return parseUnits(input, decimals);
}

typescript

// Сериализатор для API-ответов
function serializeForApi(data: Record<string, unknown>): string {
  return JSON.stringify(data, (_, value) => (typeof value === "bigint" ? value.toString() : value));
}

typescript

import { LRUCache } from "lru-cache";
 
const memoryCache = new LRUCache<string, unknown>({
  max: 10_000,
  ttl: 1000 * 60, // 1 минута по умолчанию
});
 
type CacheTier = "immutable" | "short" | "volatile";
 
const TTL_MAP: Record<CacheTier, number> = {
  immutable: 1000 * 60 * 60 * 24, // 24 часа в памяти, постоянно в Redis
  short: 1000 * 60 * 5, // 5 минут
  volatile: 1000 * 15, // 15 секунд
};
 
async function cachedRpcCall<T>(key: string, tier: CacheTier, fetcher: () => Promise<T>): Promise<T> {
  // Сначала проверяем память
  const cached = memoryCache.get(key) as T | undefined;
  if (cached !== undefined) return cached;
 
  // Потом Redis (если есть)
  // const redisCached = await redis.get(key);
  // if (redisCached) { ... }
 
  const result = await fetcher();
  memoryCache.set(key, result, { ttl: TTL_MAP[tier] });
 
  return result;
}
 
// Использование:
const receipt = await cachedRpcCall(`receipt:${txHash}`, "immutable", () =>
  client.getTransactionReceipt({ hash: txHash }),
);

typescript

// Нет вывода типов — args это unknown[], return это unknown
const result = await client.readContract({
  address: "0x...",
  abi: JSON.parse(abiString), // парсинг в рантайме = нет информации о типах
  functionName: "balanceOf",
  args: ["0x..."],
});

typescript

// Определяем ABI как const для полного вывода типов
const erc20Abi = [
  {
    name: "balanceOf",
    type: "function",
    stateMutability: "view",
    inputs: [{ name: "account", type: "address" }],
    outputs: [{ name: "balance", type: "uint256" }],
  },
  {
    name: "transfer",
    type: "function",
    stateMutability: "nonpayable",
    inputs: [
      { name: "to", type: "address" },
      { name: "amount", type: "uint256" },
    ],
    outputs: [{ name: "success", type: "bool" }],
  },
] as const;
 
// Теперь TypeScript знает:
// - functionName автодополняется до "balanceOf" | "transfer"
// - args для balanceOf это [address: `0x${string}`]
// - возвращаемый тип для balanceOf это bigint
const balance = await client.readContract({
  address: "0xA0b86991c6218b36c1d19D4a2e9Eb0cE3606eB48",
  abi: erc20Abi,
  functionName: "balanceOf",
  args: ["0xd8dA6BF26964aF9D7eEd9e03E53415D37aA96045"],
});
// typeof balance = bigint -- полностью типизирован

Ончейн-данные в продакшене: о чем вам никто не расскажет

Иллюзия надежных данных#

Rate-лимиты RPC испортят вам выходные#

Реорги: баг, которого вы не увидите#

Проблема индексирования: выбирайте свою боль#

Прямые RPC-вызовы#

The Graph (субграфы)#

Кастомные индексеры (Ponder, Envio)#

getLogs опаснее, чем кажется#

BigInt вас смирит#

Стратегия кеширования: что, как долго и когда инвалидировать#

TypeScript и ABI контрактов: правильный подход#

Неудобная правда#

Похожие записи

TypeScript Compiler API: Building Custom Linters, Codemods, and Type Analyzers

JSON to TypeScript Guide: Create Safer API Types From Real Payloads