Экспериментальная методология и отчетность для SEO

1. Работают ли SEO Эксперименты? - TL; DR
2. Экспериментальная отчетность - научный метод
3. Экспериментальная методология
4. Устранение смешанных переменных
5. Резюме

SEO-эксперименты могут помочь нам лучше понять, как работают поисковые системы, а полученную информацию можно использовать для получения конкурентного преимущества. Однако, чтобы сделать достоверные и надежные выводы, которые можно применить к проектам «реального мира», следует использовать надлежащую методологию и отчетность.

В этом посте рассматриваются общие вопросы достоверности в SEO-экспериментах и ​​методы уменьшения смешанных переменных.

Работают ли SEO Эксперименты? - TL; DR

Есть некоторые споры о том, позволяют ли эксперименты SEO сделать правильные предположения. Это видео а также эта почта Майкл Мартинес предположил, что большинству экспериментов трудно эффективно изолировать переменные и получить достоверные результаты.

Конечно, верно, что удаление всех посторонних переменных является проблемой, однако при надлежащей методологии и отчетности должна быть возможность уменьшить их влияние и повысить прозрачность результатов. Наличие надлежащей отчетности особенно важно, поскольку она позволяет проводить репликацию и рецензировать эксперименты.

Трудность уменьшения смешанных переменных выделена в это сообщение Google Plus от Педро Диаса , Педро - бывший Гуглер, и он прекрасно разбирается в вопросах, о которых другие не знают. В своем посте он рассказывает о проблемах экспериментального смещения (тип используемого запроса) и внутренней достоверности (влияние местоположения GEO, персонализация результатов и попадание в центры обработки данных).

Эффективные SEO-эксперименты должны быть в состоянии распознать эти факторы и предпринять шаги, чтобы смягчить их влияние на результаты. Они также должны быть включены в отчетность.

Сентимент, который я забрал у обоих этих опытных оптимизаторов, заключается в том, что эксперименты могут быть полезны, однако все они часто бывают неудачными, а результаты часто бывают более обобщенными. Решение тогда состоит в том, чтобы улучшить методологию и процедуру отчетности, признавая ограничения любых результатов.

Итак, как мы можем улучшить отчетность и методологию?

Экспериментальная отчетность - научный метод

В науке существует долгая история структурированной отчетности. «Научный метод» позволяет значительно улучшить прозрачность и дает возможность другим исследователям провести тот же эксперимент, чтобы подтвердить результаты.

Отчетность должна соответствовать структуре:

• Формулировка вопроса
  Обсуждение установленных знаний, предыдущей работы в этой области и выявление пробелов в исследованиях.
• Изложение гипотезы
  Изложение нулевой и альтернативной гипотезы, которая впоследствии может быть принята или отклонена.

Пример нулевой гипотезы: изменение тегов заголовка не повлияет на рейтинг

Пример альтернативной гипотезы: изменение тегов заголовка приведет к положительному изменению рейтинга

• Прогнозирование результатов
  Прогнозирование логических последствий гипотезы и предложение измеримого результата, с которым ее можно проверить.

Это довольно просто в SEO-экспериментах, так как результаты, как правило, наблюдаемы, например: изменение рейтинга.

• тестирование
  Именно здесь манипулируют контрольными переменными и измеряют прогнозируемый результат гипотезы.
• Анализ результатов
  Изучение результатов и определение возможности отклонения нулевой гипотезы и принятия альтернативной гипотезы. В этом разделе также будет обсуждаться обоснованность эксперимента, признаваться любые ограничения и предлагаться дальнейшие шаги для исследования.

Примечание. Очевидно, что этот метод отчетности не всегда привлекателен для читателей блога, однако он предоставляет возможность для двух форм отчетности. Полный, сложный отчет и упрощенный пост в блоге. На мой взгляд, это большой бонус для любого SEO, желающего создать хороший контент.

Экспериментальная методология

Экспериментальный формат

Сравнение базовой линии: Сравнение базовой линии измеряет до, во время и после тестирования.

Мера принимается, затем изменяется контрольная переменная, затем выполняется вторая мера, затем контрольная переменная возвращается в исходное состояние, затем принимается третья мера.

Этот формат может быть проблематичным, так как долгосрочное влияние переменной не всегда известно. Этот экспериментальный формат также потребовал бы большого размера выборки, чтобы уменьшить влияние смешанных переменных.

Контролируемое A / B-тестирование: этот метод использует контрольный и экспериментальный образец. Контроль должен быть таким же, как и у тестового образца, во всех отношениях, кроме изменения переменных. Для простых SEO-экспериментов этот метод может быть полезен, так как он дает более быстрые результаты.

Как и другие формы, этот тип методологии может быть приемлемым для смешанных переменных. Они могут быть уменьшены до некоторой степени за счет увеличения размера выборки и агрегирования результатов.

Устранение смешанных переменных

Смежные переменные - это те, которые не предназначены для измерения, что снижает достоверность эксперимента.

Следующие методы могут помочь уменьшить или исключить влияние смешанных переменных:

• Увеличенный размер выборки
  Увеличение размера выборки позволяет снизить вероятность того, что измеренный результат произошел случайно.
• Чередующийся порядок
  Удаляет экспериментальный уклон от эффектов порядка. Например: порядок ссылок в исходном коде может влиять на поток значения ссылки. При использовании больших размеров выборки можно уменьшить этот эффект, чередуя порядок ссылок на тестовые страницы.
• Измерения из разных мест
  Местоположение может оказать влияние на результаты. Измерения из разных мест (по всему миру) сведут на нет это. Альтернатива состоит в том, чтобы исключить другие местоположения из любых выводов о результатах.
• Деперсонализация результатов
  Google предлагает персонализированные результаты на уровне браузера. Можно обезличить результаты, войдя в режим инкогнито в Chrome (используя новую установку другого браузера) и добавив в URL «& pws = 0». Например:

Резюме

Существует бесспорный спор об эффективности экспериментов SEO. В их защиту Недавняя статья SEO.com хорошо показывает, что, хотя они часто несовершенны, они все же могут дать нам понимание.

Я согласен с этим мнением. Хотя результаты не всегда могут быть действительными на 100%, это не означает, что мы должны полностью отказаться от них. Есть много примеров несовершенных исследований и экспериментов за пределами SEO, но никогда бы не было предложено прекратить их.

Наконец, я хотел бы сказать, что единственное, что может повысить достоверность экспериментов по SEO, - это проводить больше с улучшенной методологией и отчетностью.

SEO ЭКСПЕРИМЕНТ: http://plus.url.google.com/url*dan-petrovic-did-this (эта строка не имеет ничего общего со статьей и является частью эксперимента по SEO, спасибо, что поделились! Дэн)

Похожие

Комментарии