на расчет стоимости

Любая работа над сайтом по его SEO-оптимизации начинается с определения текущего состояния его трех составляющих: технической, контентной и внешней (ссылочное присутствие).
В отличие от внешнего анализа, провести технический и контентный, в теории, возможно и без использования стороннего программного обеспечения, достаточно лишь знать, куда смотреть в исходном коде страниц сайта. Тем не менее, как и во многих технических процессах, качественный софт позволяет ускорить выполнение анализа в десятки, а то и в сотни раз.
Именно поэтому при проведении технического анализа сайта, оптимизаторы используют так называемые «краулеры». И один из наиболее доступных и удобных, а потому и популярных, краулеров — это Screaming Frog SEO Spider. Именно его использует наша компания при проведении технического анализа сайта.
Суть работы краулера – это запуск на сайт своего робота (по своим свойствам похожего на поисковых роботов Яндекса и Google’а), который сканирует страницу, введенную в запросе, совершает переход по внутренним ссылкам на другие страницы этого сайта, сканирует их, переходит по их ссылкам и так пока не обойдет весь сайт. Данные, собранные своим роботом, программа Screaming Frog SEO Spider собирает в собственные таблицы.
В данном материале мы рассмотрим, какую именно полезную информацию для технического анализа сайта может нам дать Screaming Frog SEO Spider и как ее можно использовать при оптимизации.
Итак, открываем SF SEO Spider и вводим URL-адрес сайта под анализ. Обход запущен, статус обхода отображается в процентах в правом углу окна программы.
Важно понимать, что робот начинает обход сайта именно с той страницы, которая введена в запросе. Если введена главная, робот начнет с нее и перейдет на дочерние (при наличии ссылок на них), а если введена дочерняя, робот начнет с нее и перейдет на ее дочерние, родительские и так далее (при наличии ссылок на них). При этом очевидно, что если продвигаемой страницы нет в результатах обхода, то и ссылок на других страницах сайта на нее нет. Такое явление называется «страница-сирота» и является грубой ошибкой в SEO.
Скриншоты в данном материале взяты с технического анализа сайта нашего клиента, но для сохранения конфиденциальности мы скрыли его домен.
После окончания обхода рассмотрим данные в первой таблице — Internal. Исходя из названия, здесь собраны внутренние ссылки сайта. (Все скриншоты в материале увеличиваются при клике по ним).

В селекторе Filter мы можем отсортировать ссылки по типу, где html – это страницы сайта, а CSS, JavaScript, Images и остальное – соответствующие вложения и скачиваемые файлы.
В таблице Internal нас в первую очередь интересуют столбцы Status Code, Status, Indexability и Indexability Status.
Вот небольшая справка от наших SEO-специалистов по кодам ответа (Status Code):
Что с этим делать? Здесь все проще, чем может показаться. По 200 и 0 все очевидно – первые индексируются, вторые нет.
В ходе исследований и тестов, наши оптимизаторы определили, что ссылок 400 и 500 на сайте быть не должно, это ошибки в любом случае. Поэтому рекомендуется ручная чистка на страницах, где они заданы, вырезание из файлов шаблона, либо создание правила запрета на индекс в robots (менее желательное решение, лучше вычистить). 300 – приемлемый ответ, если конечная страница после перенаправления отдает 200, но все же если таких ссылок не много, лучше сразу им задать конечный URL.
Чтобы определить, на каких именно страницах на сайте находится та или иная ссылка (например, чтобы вычистить ссылку, отдающую код 400 или 500), необходимо кликнуть ЛКМ на ссылку в основной таблице, и внизу окна программы выбрать вкладку Inlinks. Все страницы, содержащие данную ссылку, выведены в столбце From.

Касательно столбцов Indexability и Indexability Status, они отражают, доступен ли URL для индексации. Несложно заметить, что индексируются только URL, отдающие код 200, однако и те не все. Некоторые из них помечены статусом Canonicalised, но об этом чуть позже.
Идем далее, переходим на страницу External. Здесь собраны уже ссылки с нашего сайта на страницы других сайтов, либо же файлы JS, CSS, изображений или других вложений, которые интегрированы на сайт с другого ресурса. Также смотрим на коды ответов, ссылаться или принимать файл с другого сайта с ошибками 400 или 500 крайне нежелательно для SEO. В случае с 300 так же проверяем доступность конечного URL.
Таблицы Response Codes и URL также выдают нам информацию о кодах ответа и статусе индексации ссылок, но в отличие от предыдущих таблиц, здесь нет разделения на внутренние и внешние URL.

Зато, здесь есть удобные фильтры в селекторе Filters – в таблице Response Codes можно четко отфильтровать URL по коду ответа, а в URL – вывести только URL, содержащие кириллицу (Non ASCII Characters), содержащие заглавные буквы (Uppercases), содержащие параметры (Parametrs), содержащие символ нижнего подчеркивания (Underscores), и содержащие более 115 символов. Все эти URL (кроме параметров и нижних подчеркиваний для не HTML-файлов) являются ошибками оптимизации, потому отлавливать их здесь весьма полезно.
И последнее из анализа ссылок, что нас интересует в SF SEO Spider – это таблица Canonicals.

Здесь собраны данные о работе механизма канонических ссылок на сайте. Основная их функция – это определять URL с параметрами (в самой ссылке параметры указаны после символа «?» и позволяют работать динамическим механизмам сайта, таким как фильтрация и сортировка товаров и т.д.) как ту же самую страницу, что и с URL без параметра, а не ее дубль. Таким образом, правильно настроенные канонические ссылки защищают страницы от образования дублей.
Таблица Canonicals отображает канонические ссылки HTML-страницы сайта. Каждая страница без параметров должна иметь каноническую ссылку сама в себя, страницы с параметрами – в себя без них. Страницы пагинации – тоже сами в себя. Несоответствие этим стандартам свидетельствует об ошибке оптимизации канонических ссылок, которые здесь легко определить.
Также, селектор Filters здесь может вывести каждый случай канонизации отдельно.
Теперь посмотрим, чем нам может помочь Screaming Frog SEO Spider при анализе мета-тегов и контента сайта. Для этого нас интересуют таблицы Page Titles, Meta Descriptions, Meta Keywords, H1 и H2. Все эти таблицы имеют одинаковую структуру – отображают кол-во выбранного тега на странице, содержимое, длину в символах и в пикселях. Удобно видеть сразу превышение кол-ва и длины тегов, а также проблемы в оптимизации их контента.

Также, внизу окна программы есть вкладка SERP Snippet. Кликнув в основной таблице на любой URL и перейдя в нее, вам отобразится — как выглядит сниппет этой страницы в поисковой выдаче Google. Полезно сразу увидеть, какая часть тегов title и description отобразится, а какая будет скрыта за многоточием.

В селекторе Filters данных таблиц также можно отобразить проблемные страницы – с дублирующимися тегами (Duplicate), с отсутствующими (Missing), более одного (Multiple), а также превышающие рекомендуемые пределы (Over *** charecters).
Несколько рекомендаций по данным мета-тегам от SEO-отдела нашей компании:
Таблица Images содержит список всех изображений на сайте. В основной таблице отображен тип и размер каждого, но нас больше интересует содержимое параметров alt. Его можно найти в уже знакомой нам вкладке Inlinks, так как одно изображение на каждой странице может иметь различный alt. Alt’ы рекомендовано содержат ключевой или побочный ключ.

Также, в последней версии программы Screaming Frog SEO Spider (13.0 на момент написания материала) добавили таблицу Content. Здесь в столбце Word Count указано количество слов на странице, что полезно при поиске малоинформативных (менее 30-50 слов в зависимости от наполнения шапки и подвала). Здесь же можно проверять грамматические ошибки и описки в текстах страниц, если включить эту функцию в настройках Configuration – Content – Spelling and Grammar и выбрать русский язык.

Безусловно, это лишь часть функционала программы Screaming Frog SEO Spider. Анализ страниц пагинации, ссылок hreflang, микроразметок, файлов Sitemap, скорости загрузки и других параметров используется при расширенном и более тщательном техническом анализе сайта. Однако, выявление и устранение ошибок, описанных в данном материале, уже поможет поднять позиции сайта топ в 80% случаев.
Конечно, для рядового владельца сайта или бизнеса подобная аналитика может показаться техническими дебрями. В таком случае у компании Business Boom Studio есть комплексное решение – SEO-аудит и SEO-продвижение сайта любой сложности с гарантией результата. Доверьте всю технику и работу с текстами профессионалам, и увеличьте поисковый трафик на ваш веб-ресурс от 50% до 500%.
Политика конфиденциальности сайта https://bbs-studio.ru/ BBS Agency
Общество с ограниченной ответственностью «ББ-СТУДИЯ» (ИНН: 3128134797,
КПП: 312801001) (далее – администрация сайта https://bbs-studio.ru/ BBS Agency, Оператор, мы, наш, наши, нас, нам), адрес: info@bbs-studio.ru, придает большое значение защите Вашей частной жизни и безопасности Ваших персональных данных.
Политика предназначена для информирования Вас о наших действиях по сбору, обработке и защите Ваших персональных данных для достижения нами заявленных целей обработки персональных данных на сайте https://bbs-studio.ru/ BBS Agency. Мы соблюдаем требования российского законодательства в области персональных данных. При обработке персональных данных мы придерживаемся принципов, изложенных в ст. 5 Федерального закона от 27.07.2006 г. №152-ФЗ «О персональных данных» (далее – 152-ФЗ).
Просим Вас внимательно изучить Политику конфиденциальности (далее — Политика), чтобы понимать, для достижения каких целей мы осуществляем обработку Ваших персональных данных, а также как Вы можете реализовать права в отношении своих персональных данных, обрабатываемых нами.
Если у Вас есть вопросы, связанные с Политикой, в т.ч. предложения по улучшению ее понимания и навигации, или есть вопросы по обработке нами Ваших персональных данных и их защите, вы можете направить нам обращение одним из способов, указанных в разделе «Контакты».
Термины
Политика предназначена для информирования Вас о наших действиях по сбору, обработке и защите Ваших персональных данных для достижения нами заявленных целей обработки персональных данных на сайте https://bbs-studio.ru/ BBS Agency.
Наш сайт не предназначен для обработки персональных данных несовершеннолетних. Если у Вас есть основания полагать, что несовершеннолетний предоставил нам свои персональные данные через сайт, то просим Вас сообщить нам об этом, написав на почту info@bbs-studio.ru.
3.1.1. Форма заявки на обратную связь
4.1. Общая информация о Ваших правах
В соответствии с 152-ФЗ, Вы имеете следующие права при обработке персональных данных:
4.2. Запрос дополнительной информации для идентификации субъекта персональных данных
В ходе реализации Ваших прав мы можем запрашивать дополнительную информацию, которая позволит нам достоверно идентифицировать Вас. Такая информация будет требоваться в редких случаях. Мы стараемся запрашивать минимально необходимый состав дополнительной информации для Вашей идентификации. Мы не сможем реализовать Ваши права, если в ответ на наш запрос вы не предоставите дополнительную информацию для Вашей идентификации.
4.3. Условия предоставления информации по Вашим правам
Информация, связанная с реализацией Ваших прав, предоставляется бесплатно. Если Ваш запрос является явно необоснованным или чрезмерным, в частности из-за его повторяющегося характера, мы можем отказаться от ответа, либо взимать плату за предоставление запрашиваемой информации.
4.4. Право на доступ к Вашим персональным данным
Вы имеете право получить от нас достоверную информацию об обработке Ваших персональных данных, и, если это возможно, доступ к персональным данным и к следующей информации:
4.5. Право на уточнение Ваших персональных данных
Мы принимаем усилия, направленные на то, чтобы выявлять неточные, неполные или устаревшие данные. Если данные являются неточными, неполными или устаревшими, вы имеете право потребовать от нас исправления данных, касающихся Вас, без лишнего промедления. После исправления Ваших персональных данных мы уведомим Вас об этом.
4.6. Право на обжалование наших действий или нашего бездействия
Вы имеете право возражать против обработки своих персональных данных в ответ на наши действия или наше бездействие. Для этого вы можете обратиться в территориальный орган Роскомнадзора в своем регионе.
4.7. Право на обжалование решений, принятых на основании исключительно автоматизированной обработки персональных данных
Вы имеете право не подвергаться решению, основанному исключительно на автоматизированной обработке, включая профилирование, которое влечет за собой юридические последствия в отношении Вас или аналогичным образом существенно влияет на Вас. Вы вправе обратиться к нам для обжалования наших действий при принятии нами решений на основании исключительно автоматизированной обработки их персональных данных, если такие имеются.
4.8. Право на отзыв согласия
Если Ваши данные обрабатываются на основании согласия, то вы имеете право отозвать его.
4.9. Как Вы можете реализовать свои права?
Для реализации Ваших прав нами представлены несколько способов:
4.10. Как и когда мы не можем реализовать Ваши права
Мы можем ограничить объем наших обязательств и Ваших прав (на доступ к данным, их уточнение, блокирование или удаление), в следующих случаях:
Для реализации некоторых прав существуют особые условия, без выполнения которых право не может быть реализовано. Если мы не можем реализовать Ваше право по Вашему запросу, то мы пишем Вам мотивированный отказ.
Файлы cookie являются одной из технологий, которые мы используем для автоматического сбора информации и улучшения качества контента. Файл cookie — это небольшой текстовый файл, который хранится на устройстве (компьютере, планшете, смартфоне и т.д.) и содержит информацию о Вашей активности в Интернете.
Собираемые cookie на нашем сайте:
| Имя cookie-файла | Тип | Описание | Продолжительность | Провайдер |
| tmr_detect | Ремаркетинговые | Используется для отслеживания взаимодействия пользователя с веб-сайтом | 1 год | bbs-studio.ru |
| _ym_isad | Аналитические | Используется для определения наличия у посетителя блокировщиков рекламы | 2 дня | bbs-studio.ru |
| tmr_lvid | Ремаркетинговые | Используется для отслеживания взаимодействия пользователя с веб-сайтом | 11 месяцев | bbs-studio.ru |
| tmr_lvidTS | Ремаркетинговые | Используется для отслеживания взаимодействия пользователя с веб-сайтом | 11 месяцев | bbs-studio.ru |
| _ym_d | Аналитические | Хранит дату первого визита посетителя на сайт | 1 год | bbs-studio.ru |
| _ym_visorc | Аналитические | Сохраняют информацию о действиях, которые были выполнены при посещении веб-сайта, включая поиск по ключевым словам | 30 минут | bbs-studio.ru |
| _ym_uid | Аналитические | Идентифицирует пользователей сайта | 1 год | bbs-studio.ru |
| yandexuid | Технические | Позволяет различать посетителей | 1 год | yandex.ru |
| i | Технические | Позволяет различать посетителей | 1 год | yandex.ru |
| yabs-sid | Аналитические | Регистрируют поведение пользователя на сайте для внутренней аналитики | Период сессии | yandex.ru |
| yuidss | Аналитические | Собирают информации о поведении на нескольких веб-сайтах | Период сессии | yandex.ru |
Данные, собираемые с помощью cookie-файлов не относятся к специальным категориям или биометрическим в соответствии со ст. 10–11 152-ФЗ и обрабатываются автоматизированным способом. Основанием для обработки ваших данных в этом случае будет согласие на обработку персональных данных, предоставляемого Пользователем сайта путем совершения конклюдентных действий — продолжение пользования сайтом.
По достижении указанных сроков обработки персональные данные уничтожаются путем удаления из информационных систем с помощью встроенных средств информационной системы.
Если вы не хотите, чтобы мы собирали ваши данные с помощью cookie-файлов вы можете отключить их сбор в настройках своего браузера.
Также, как и большинство других информационных ресурсов организаций, наши веб-серверы и системы безопасности время от времени хранят некоторые временные технические данные в своих лог-файлах.
В целях оказания услуг и повышения их качества мы передаем информацию о вас следующим третьим лицам:
ООО «Яндекс» (119021, г. Москва, ул. Льва Толстого, д. 16). Данные передаются для целей веб-аналитики (Яндекс.Метрика). Политика конфиденциальности ООО «Яндекс»: https://yandex.ru/legal/confidential/.
ООО «1С-Битрикс» (109544 Россия, г. Москва, б-р Энтузиастов, д.2, 13 эт., пом. 8-19). Данные передаются с целью хранения контактов, оставивших заявку на расчет стоимости услуг или на обратный звонок. Политика конфиденциальности ООО «1С-Битрикс»: https://www.bitrix24.ru/about/privacy.php
Персональные данные, которые мы собираем и храним, считаются конфиденциальной информацией. Они защищены от потери, изменения или несанкционированного доступа согласно законодательству Российской Федерации в области персональных данных. Для этого мы применяем технические средства и организационные меры. Мы постоянно совершенствуем наши системы защиты данных.
Мы оставляем за собой право вносить изменения в нашу Политику в любое время. Мы просим Вас регулярно просматривать все обновления нашей Политики. Мы будем направлять уведомления об изменениях Политики в случае, если такие изменения являются существенными, всеми доступными нам способами.
Обращаем Ваше внимание, что указанные в данном пункте контакты используются только для взаимодействия по вопросам обработки и защиты Ваших персональных данных. Обращения, направленные Вами по указанным в Политике контактам, не связанные с защитой данных, не будут рассмотрены. Для вопросов, связанных с обработкой и защитой персональных данных, вы можете обратиться к нам по электронной почте info@bbs-studio.ru.
Обновлен:
13.07.2022