Независимый исследовательский стенд · версия 1

Как сравнивать сведения из двух источников

Это нейтральный технический материал для проверки обработки веб-страниц. Здесь нет регистрации, покупок, платежей или игровых операций.

Объект сравнения

Перед сравнением двух отчётов полезно определить, о каком объекте говорит каждый из них. Один источник может описывать отдельный адрес, другой — весь сайт. Количество обращений к серверу отличается от количества документов, а количество документов — от числа посещений.

Одинаковое название показателя не гарантирует одинакового определения. Поэтому рядом с числом сохраняют единицу измерения, период и правила включения записей. Если эти условия различаются, расхождение не обязательно означает ошибку одного из источников.

Полнота данных

Ответ может содержать только часть доступных сведений. Ограничение числа строк, выборка и скрытые значения влияют на то, какие выводы можно сделать из списка. Наличие конкретной записи подтверждает её присутствие в полученном ответе. Отсутствие записи требует отдельной проверки полноты.

Для каждого набора фиксируют время получения и время самих событий. Отчёт, обновлённый сегодня, может описывать более раннее состояние. Два источника, прочитанные одновременно, могут относиться к разным моментам наблюдения.

Проверяемый результат

Хороший разбор позволяет повторить вычисление из сохранённых исходных данных. Для этого сохраняют версии файлов, параметры запроса и правило подсчёта. Неизвестные значения остаются неизвестными, пока не появится пригодное дополнительное наблюдение.

Если два отчёта расходятся, сначала описывают само различие. Затем формулируют проверяемые объяснения и выбирают контроль. Удобное объяснение не становится установленной причиной только потому, что согласуется с ожиданиями наблюдателя.