Сначала доказательства, затем цифры
Невоспроизводимый результат не является бенчмарком.
Полезное измерение исполнения указывает версию, сеть, провайдера, условия теста и исходные наблюдения. Прием запроса конечной точкой, успешная симуляция, включение в блок, финальность и экономический результат являются разными событиями. Эта страница описывает требования к доказательствам, а не измеренную задержку, частоту включения или торговый результат FRB в целом. Симуляция оценивает поведение при заданных входных данных и состоянии, но не будущий результат.
Какие доказательства нужны для публикации метрики
| Метрика | Минимальные доказательства | Статус данных FRB |
|---|---|---|
| Задержка RPC/WSS | Конечная точка, регион, транспорт, часы, размер выборки, процентили, исходные наблюдения и время теста | Общий бенчмарк FRB не опубликован |
| Включение пакетов в блок | Провайдер, сеть, правила целевого блока, окно наблюдения, определения приема и включения, исходные записи статусов | Общий бенчмарк FRB не опубликован |
| Соответствие симуляции исполнению | Источник форка, блок, предположения о состоянии, набор транзакций, исключения и итоговые квитанции | Общий бенчмарк FRB не опубликован |
| Результат стратегии | Воспроизводимое описание стратегии, все расходы, сбои, рыночный период, отбор выборки и исходные данные | Не представляется как заявление о производительности продукта |
Воспроизводимый протокол измерений
- Зафиксируйте версию FRB, конфигурацию, версии зависимостей и контрольную сумму.
- Укажите сеть, конечную точку, регион, транспорт, оборудование и источник времени.
- Опубликуйте структуру запроса или транзакции и все правила включения и исключения.
- Сохраните исходные наблюдения до агрегации; перед публикацией удалите идентификаторы кошельков и пользователей.
- Укажите размер выборки, окно наблюдения, сбои и метод расчета процентилей.
- Разделяйте прием запроса, успешную симуляцию, включение в блок, финальность и экономический результат.
- Опишите ограничения и предоставьте достаточно несекретных входных данных для независимого повторения.
Какие выводы эта страница не подтверждает
- Ожидаемая прибыль или месячный доход
- Общая доля прибыльных или успешных операций продукта
- Частота включения без данных о статусах провайдера
- Задержка без указания региона и транспорта
- Рейтинг конкурентов без единой методики тестирования
Документация провайдеров
API провайдеров определяют смысл приема и статусов. Их документация не является измерением производительности FRB в целом.
Измеряйте в условиях своей конечной точки
Инструмент WSS показывает наблюдения в выбранных условиях теста. Перед сравнением зафиксируйте конечную точку, регион, время, транспорт и определение выборки.
Открыть инструмент измерений WSS