Как собрать метатеги и заголовки с любого сайта
Метатеги и заголовки важны не только для SEO (поисковой оптимизации). В онлайн-рекламе они тоже играют заметную роль: заголовки повышают конверсию посадочных страниц, а корректно заполненный title помогает системам рекламы автоматически формировать заголовки в динамических объявлениях. Собрали основные способы и поделились полезными инструментами для пользователей click.ru.
Оглавление
Когда помогают парсеры
1. Когда нужно оптимизировать сайт под поиск. Одна из базовых задач поисковой оптимизации — проверить, корректно ли заполнены метатеги. С помощью парсера можно быстро собрать все title и заголовки на сайте, найти пустые или некорректные и исправить их. В результате страницы становятся более релевантными запросам, а их позиции в поиске могут вырасти.
2. При запуске динамических объявлений. Если на сайте большой ассортимент, в Директе часто запускают динамические объявления. Заголовки объявлений автоматически подтягиваются из title или H1. Если элементы заполнены некорректно или отсутствуют, это напрямую влияет на качество объявлений и их эффективность.
Парсер помогает заранее проверить метатеги и избежать ситуаций, когда в выдаче появляются неудачные или некорректные формулировки.
3. Для анализа конкурентов. Парсеры помогают собирать метатеги и заголовки не только со своего сайта, но и с сайтов конкурентов.
Это помогает:
- избежать дублирования title;
- сделать свои сниппеты более заметными в выдаче;
- понять, как конкуренты формируют заголовки и метатеги;
- выявить ключевые слова, которые они используют.
Особенно это полезно для нишевых проектов: заголовки часто содержат основные ключевые запросы, поэтому через них можно расширить собственное семантическое ядро.
5 способов спарсить метатеги
Разберем несколько ручных и автоматизированных вариантов, которые помогут получить необходимые данные.
Посмотреть исходный код страницы
Самый простой способ — проверить метатеги в исходном коде страницы.
- Откройте страницу сайта.
- Нажмите Ctrl + U (Windows) или ⌘ + Option + U (Mac).
- В открывшемся окне найдите строки:
<title>…</title>
<meta name="description" content="…">
Обычно они находятся внутри блока <head>.
Другой вариант — нажать правой кнопкой мыши на странице и выбрать «Просмотр кода страницы» или «Показать исходный код». Этот способ подходит, если нужно проверить одну или несколько страниц.
Собрать метатеги через Google Таблицы
Если нужно проверить сразу несколько страниц, можно использовать Google Sheets и встроенные функции импорта данных.
Создайте таблицу и добавьте в первый столбец список URL-адресов страниц. Затем используйте формулы:
Для title
=IMPORTXML(A2;"//title")
Для description
=IMPORTXML(A2;"//meta[@name=’description’]/@content")
Формула автоматически извлекает нужные данные со страницы.
Важно указывать полный URL-адрес с протоколом (https://), иначе Google Sheets может вернуть ошибку.
Стоит учитывать, что у функции IMPORTXML есть ограничения: она не подходит для массового парсинга сотен и тысяч страниц. Если работаете с большим объемом данных, можно периодически заменять формулы на значения через «Специальная вставка → Только значения», чтобы снизить нагрузку на таблицу.
Установить расширения для браузера
Один из самых простых способов быстро проверить SEO-параметры страницы. Таких инструментов много: достаточно зайти в магазин расширений и выбрать вариант с хорошими отзывами.
Для Google Chrome подойдут, например:
Для Firefox:
Помимо title и description, такие расширения позволяют проверить и другие важные элементы: атрибуты Alt у изображений, заголовки (H1–H6), внутреннюю перелинковку и другие параметры страницы.
Использовать специальные сервисы
Такие инструменты автоматически сканируют страницы и показывают основные SEO-параметры.
Алгоритм работы обычно одинаковый:
- Перейдите на сайт одного из сервисов для анализа страниц;
- Вставьте в поле проверки URL нужной страницы;
- Запустите анализ.
Через несколько секунд сервис сформирует отчет. В нем обычно отображаются:
- метатег title;
- метатег description;
- заголовки страницы (H1–H6);
- длина метатегов и возможные ошибки;
- иногда — дополнительные SEO-параметры страницы.
Инструменты могут анализировать страницы как по одной, так и использоваться для массовой проверки.
Парсер метатегов и заголовков click.ru
Инструмент для парсинга основных метатегов и заголовков Н1–Н6 с любого сайта. При работе с инструментом можно использовать XML-карты сайтов, XLSX-файлы или вводить адреса страниц вручную. Доступно 500 бесплатных пробных запросов. Парсер работает без ограничений на количество анализируемых страниц в сутки.
Есть облачное хранение с постоянным доступом к отчетам. Выгружать их можно в формате XLSX.
SiteAnalyzer
Бесплатный инструмент для полного сканирования сайта. Анализирует страницы, изображения, скрипты и документы, проверяет дубли, коды ответа сервера, а также метатеги и заголовки (<title>, <description>, <h>). Подходит для технического аудита без ограничений по объему.
Screaming Frog SEO Spider
Один из самых популярных инструментов для технического SEO-аудита. Позволяет детально проанализировать структуру сайта и быстро находить ошибки. С его помощью можно проверять статус страниц и коды ответа сервера, анализировать title, description и заголовки, находить битые ссылки и другое.
ComparseR
Инструмент для анализа технического состояния сайта. Показывает ошибки, а также помогает понять, какие страницы попали в индекс поисковых систем, а какие — нет. Это удобно для контроля индексации и выявления проблемных адресов.
SiteAnalyzer (Majento)
Десктопная программа для технического аудита сайта. Сканирует все элементы: страницы, ссылки, изображения и документы.
Позволяет получить коды ответа сервера, данные по метатегам и заголовкам, информацию о canonical, структуру внутренних и внешних ссылок. Отчеты можно выгружать в CSV, XLS и PDF.
A-Parser
Инструмент для парсинга данных. Объединяет более 70 парсеров для разных задач: сбора поисковой выдачи, ключевых слов, данных из соцсетей, карт, маркетплейсов и других источников. Дополнительно можно создавать собственные парсеры (через XPath, JavaScript и регулярные выражения), использовать API для интеграций.
| Инструмент | Тип (онлайн / десктоп) | Основное назначение | Уровень | Ограничения | Стоимость |
|---|---|---|---|---|---|
| Парсер метатегов и заголовков click.ru | Онлайн | Парсинг | Для специалистов любого уровня | Отсутствуют | Первые 500 запросов бесплатно. |
| SiteAnalyzer | Десктоп | Технический аудит сайта | Начальный / Средний | Меньше аналитики, чем у более дорогих сервисов. Невысокая скорость | 2900 руб. за компьютер (лицензия на 1-2 компьютера) |
| Screaming Frog SEO Spider | Десктоп | Глубокий технический аудит | Средний / Профи | Ограничение 500 URL в бесплатной версии, сжатый функционал в бесплатной версии | Бесплатно с ограничениями, платно 279 долл. в год |
| ComparseR | Десктоп | Анализ индексации и ошибок | Средний | Требует установки, ограниченный функционал | 2000 руб. за лицензию. Есть демо |
| SiteAnalyzer (Majento) | Десктоп | Технический аудит | Начальный / Средний | Поддерживает только Windows | Бесплатно |
| A-Parser | Десктоп | Парсинг данных | Профи | Сложный в освоении | 179 долл. за лицензию. Есть демо. |
Как парсить данные на примере click.ru
Все предельно просто.
Шаг 1. Регистрируемся в click.ru
Создаем аккаунт, чтобы получить доступ к инструментам и сохранять отчеты в личном кабинете.
Шаг 2. Добавляем URL сайта
Указываем страницы, с которых нужно собрать данные. Это можно сделать тремя способами:
- через XML-карту сайта — сервис автоматически подтянет все URL из sitemap (формат: https://site.ru/sitemap.xml). Подходит, если нужно собрать данные со всего сайта;
- загрузить XLSX-файл — один URL в одной ячейке на первом листе;
- вставить список вручную — каждый адрес с новой строки. Удобно, если нужны только отдельные страницы.
Шаг 3. Настраиваем параметры парсинга
Выбираем, какие данные хотим собрать:
- title;
- description;
- keywords;
- заголовки H1–H6.
Обычно имеет смысл выбирать все параметры сразу — это не влияет на стоимость. Исключение — большие сайты с тысячами страниц: в этом случае лучше ограничиться нужными полями, чтобы ускорить обработку.
После запуска система покажет стоимость. Первые 500 страниц обрабатываются бесплатно.
Шаг 4. Скачиваем отчет
После завершения парсинга отчет появится в списке задач. Его можно скачать, когда статус изменится на «Выполнен».
В файле два листа:
- результаты — таблица с адресами, метатегами и заголовками (если заголовков несколько, они указаны в одной ячейке через разделитель);
- настройки — информация о том, какие данные и для каких страниц собирались.
Все отчеты сохраняются в системе и доступны без ограничения по времени.
Как анализировать результаты парсинга
После того как отчет готов, следующий шаг — разобраться, что с ним делать. Подход зависит от задачи: анализируете ли вы свой сайт или изучаете конкурентов.
Парсинг собственного сайта
Парсинг помогает быстро выявить типичные ошибки в заголовках и метатегах.
Отсутствующие метатеги
Одна из самых частых проблем — пустые title и description. Элементы помогают поисковикам понять содержание страницы, а пользователям — решить, стоит ли переходить по ссылке. Если они не заполнены, сниппет формируется автоматически и может получиться неинформативным.
С помощью парсинга можно быстро найти страницы, где не хватает данных, и исправить их.
Дублирование информации
Иногда одинаковые title и description встречаются на разных страницах. Обычно это связано с ошибками в настройке сайта или CMS. Такие дубли можно легко найти в отчете, например, через условное форматирование в Excel. После этого важно переписать метатеги так, чтобы каждая страница имела уникальные формулировки.
Неподходящая длина
Слишком длинные или слишком короткие метатеги тоже создают проблемы.
- Title лучше держать в пределах 50–60 символов — иначе он обрезается в выдаче.
- Description — около 130–150 символов, в зависимости от поисковой системы.
Слишком короткий текст не даст достаточно информации. Слишком длинный потеряется в выдаче.
На примере ниже title и description очень короткие и водянистые. Еще одна проблема — title и description идентичны.
Неинформативные формулировки
Метатеги должны быть понятны не только поисковикам, но и людям. Если заголовки и описания слишком общие или не отражают содержание страницы, их стоит переписать. Хороший метатег заранее отвечает на вопрос пользователя, о чем страница и зачем на нее переходить.
Ошибки в структуре заголовков
Заголовки на странице должны быть выстроены по иерархии. В идеале:
- один H1 — основной заголовок страницы;
- далее идут H2 — ключевые разделы;
- внутри них — H3–H6 как уточняющие подзаголовки.
Важно не только наличие заголовков, но и их логика: каждый уровень должен дополнять предыдущий.
На практике часто встречаются ошибки:
- отсутствует H1;
- уровни заголовков перепутаны;
- подзаголовки не связаны с содержанием страницы.
Например, вместо структуры «товар → характеристики → описание» в заголовках могут оказаться названия рубрик или служебные элементы. Обычно это связано с тем, что при разработке не была продумана структура сайта и семантика.
Парсинг сайтов-конкурентов
Парсинг сайтов из топа помогает понять, как устроен контент у лидеров ниши и какие подходы они используют.
Ключевые запросы конкурентов
Даже если тег keywords не заполнен, ключевые слова можно извлечь из title, description и заголовков.
Как это сделать:
- собрать метатеги и заголовки страниц конкурента;
- объединить их в один массив;
- проанализировать через SEO-инструменты, чтобы получить список ключевых фраз.
Так можно расширить собственное семантическое ядро и понять, на какие запросы делают упор конкуренты. Также в расширении СЯ поможет инструмент парсинга фраз-ассоциаций click.ru.
Логика формирования метатегов
Если проанализировать несколько сайтов из топа по одному запросу, можно увидеть закономерности:
- какие слова чаще используются в начале Title;
- какая средняя длина заголовков и описаний;
- какие дополнительные слова усиливают сниппет (например, «цены», «доставка», «гарантия»);
- как распределяются ключевые фразы.
Это помогает не копировать конкурентов, а понять общий принцип и сделать свои метатеги более точными и заметными.
Структура заголовков
Аналогично можно разобрать и заголовки H1–H6.
Часто оказывается, что:
- H1 не содержит точного запроса, а просто повторяет название категории;
- подзаголовки используются хаотично и не выстраиваются в понятную структуру;
- важные элементы (например, бренды или характеристики) не вынесены в заголовки.
Поэтому, если выстроить на своем сайте качественную структуру заголовков, можно получить небольшое преимущество перед конкурентами.
