Выгрузка структуры с помощью Netpeak Spider

Выгрузка структуры с помощью Netpeak Spider

В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба.

Для работы со структурой в онлайн режиме удобно использовать сервис https://www.mindmeister.com/. Данный сервис позволяет не перекидываться файлами, и редактировать структуру онлайн в несколько рук. Но вариант платный! В бесплатном режиме на одну почту доступно 3 карты, далее только если удалить одну из предыдущих.

Рассмотрим особенности программы

1) Онлайн, т.е. видно все этапы работы и есть возможность возврата к любой точке, т.к. результат хранится на сервере;
2) Платная, для использования большим числом карт;
3) Удобно скинуть ссылку заказчику и он видит результат;
4) При движении большого числа блоков, возможны задержки.

Остается также вариант использовать программу XMind 8.

Рассмотрим особенности программы

1) Бесплатная;
2) Нет задержки при переносе больших кусков карты;
3) При работе приходится постоянно передавать файлы по сети, после внесения изменений.

Минивывод

Есть несколько вариантов для структурирования карты сайта - один оналйн другой оффлайн. Каждый определяется в соответствии с необходимостью!

1 Методика вынесения структуры - Ручная

1) Пишем название нашего проекта с приставкой черновая структура, рисунок 1



Рисунок 1 - Задание названия для карты структуры сайта
2) Выбираем настройку карты, нам необходимо “Выравнивание по правому краю”. Это делается для понимания вложенности и удобства.

Рисунок 2 - Задание направления веток для структуры сайта
3) Необходимо изначально сделать историю по цветам - чтобы любой кто будет пользоваться картой, понимал что обозначает тот или иной цвет. Это упрощает процесс коммуникации между специалистами.

- Нажимаем правой кнопкой мыши и выбираем “Добавить плавающий узел”

- Называем его “История”

- Добавляем 6 историй:

1) Вспомогательный элемент не для внедрения

2) Информационые запросы

3) Склейка

4) Расширение

5) С конкурентов

6) Текущая структура


Рисунок 3 - Цветовая легенда сайта
4) Заходим на сайт и начинаем выписывать структуру. В начале выписываем все функциональные страницы из меню

Рисунок 4 - Задание текущей структуры сайта

Внимание! Обязательно на карту выносим Н1 страницы и добавляем ссылку на страницу

Верхнее меню, пример

Рисунок 5 - Задание текущей структуры + ссылки на страницы

На данном примере верхнее меню дублируется в подвале сайта.

5) Выносим у интернет-магазина категории и теги (если есть), а у сайта услуг - услуги и теги. Товары выносить на карту не нужно!

Рисунок 6 - Задание вспомогательных блоков не для внедрения

Серым по истории - это у нас вспомогательный элемент, который объединяет какой-то блок страниц, в примере - это регионы, бренд.

На данном этапе чистовая структура вынесена вся, можно приступать к следующим этапам продвижения.

ИНТЕРНЕТ-МАРКЕТИНГ
РАЗРАБОТКА САЙТОВ
SEO продвижение

2 Методика вынесение структуры - Автоматизированная

Автоматизированный способ сбора структуры сайта задействует специальный инструмент Netpeak Spider. Но в рамках бесплатного тарифа нет возможности выгружать отчет - а именно отчет о сруктуре и необходим для дальнейших действий. Очевидным плюсом инструмента является отсутствие внесения каких либо настроек! Алгоритм работы с программой выглядит следующим образом:

1) Берем интересующий нас адрес и вставляем в окно после открытия программы

Рисунок 7 - Задание сайта для анализа
2) И нажимаем кнопку старт

Рисунок 8 - Запуск паука
3) Дожидаемся окончания сбора и нажимаем Экспорт-Структура сайта

Рисунок 9 - Выгрузка структуры сайта
4) Открываем файл и добавляем фильтр на первую строку

Рисунок 10 - Включение фильтра на первой строке
5) Убираем лишнее и оставляем:

- не пустые уровни

- URL

- Код Ответа сервера

- Content-Type

- Title

- Description

- Содержимое H1

Рисунок 11 - Удаление лишних столбцов
6) Сейчас нужно убрать технические страницы. Через фильтр на Content-Type отмечаем все кроме text/html.. и Пустые

Рисунок 12 - Задание значений для фильтра

Выделяем и удаляем строки

7) Далее определяем что есть ещё лишнего. Смотрим графу Код ответа сервера

Рисунок 13 - Задание фильтров

Удаляем эти строки

8) Анализируем пустые страницы по графе URL. Параллельно заполняем их URL, Title, Description, H1 - Копируя их значение из уровня.


Рисунок 14 - Отбор пустых строк

Рисунок 15 - Перенос значений в пустые URL

Рисунок 16 - Перенос значений в пустые URL
9) Далее пройтись по списку URL смотрим что может быть лишнего. Возможно что-то попало в индекс, что не должно было быть - например /reviews (в данном случае имеется в виду полная копия отдельной карточки с отзывами на товар.) . Таким образом можно выявить все необходимые страницы.
10) Проверяем h1 - не должно быть пустых ячеек. Если нет - добавляем Значение с Уровня
11) Удаляем столбик URL, Код ответа сервера, Content-Type, Description, Title и самый первый столбик. Плюс все пустые Уровни.
12) Удаляем шапку файла
13) Отделяем товары и категории. На структуру выносятся все кроме товаров
14) Опускаемся в самый низ и вводим любое слово.
15) Копируем Ctrl+C
16) Обводим все кроме столбика с H1

Рисунок 17 - замена на константу структуры
17) Нажимаем CTRL + G

Рисунок 18 - Работа с константами
18) Нажимаем выделить и далее константы (Ничего не меняем)

Рисунок 19 - Работа с константами
19) Нажимаем CTRL + V

Рисунок 20 - Заполнения константой переменных
20) Копируем структуру и переходим в Notepad ++
21) Выделяем нашу константу по уровням и заменяем на пустое

Рисунок 21 - Замена значений в Notepad++
22) Заменив все константы копируем все и создаем в XMIND новую карту и вставляем

Рисунок 22 - Готовая структура в блокноте

Рисунок 23 - Готовая структура

Далее выделяем дополнительные блоки отделяя услуги или категории товаров от пунктов меню.

Артём Опарин

Артём Опарин

Ведущий SEO специалист компании

Вывод по выгрузке структуры с помощью Netpeak Spider

Таким образом было рассмотрено 2 механизма сбора структуры сайта. Ручной метод обладает своим плюсом по скорости, если проект небольшой. С другой стороны можно упустить скрытые страницы, на которые руками не выйти. В тоже время автоматизированный метод требует приобретения специального инструмента, но в рамках него будет получен мощный механизм для анализа ошибок сайта. Еще одним важным моментом является то что необходимо выбрать среду для построения карты сайта. Здесь также нужно осуществить выбор в пользу того инструмента, который больше подходит.

Что дальше?

После составления структуры сайта можно приступать к её расширению и структурированию

Автор

Артём Опарин

Артём Опарин

ИНТЕРНЕТ-МАРКЕТОЛОГ С ОПЫТОМ БОЛЕЕ 10 ЛЕТ.

Подписывайтесь в соцсетях:

Комментарии

Вам также может понравиться

Маскоты в веб-дизайне: Как персонажи бренда усиливают маркетинг и улучшают пользовательский опыт
22 мая 2025
1262
Маскоты в веб-дизайне: Как персонажи бренда усиливают маркетинг и улучшают пользовательский опыт
Маскот на сайте или в мобильном приложении – это не просто визуальный элемент, но и мощный маркетинговый инструмент. В последние годы маскоты приобрели популярность среди брендов, стремящихся повы...
Читать
SKU: ключевой инструмент оптимизации торговли и управления ассортиментом
4 октября 2024
1289
SKU: ключевой инструмент оптимизации торговли и управления ассортиментом
SKU, или Stock Keeping Unit, стал неотъемлемой частью современного бизнеса, особенно в сфере розничной торговли и управления запасами. Этот уникальный идентификатор играет ключевую роль в оптимиза...
Читать
Грамотное ТЗ для копирайтера? 5 простых правил
11 октября 2021
1204
Грамотное ТЗ для копирайтера? 5 простых правил
Все мы любим экономить свое время, поэтому в этой статье я расскажу, как качественно и достаточно быстро подготовить техническое задание для копирайтера. В данной статье будет рассмотрено, как сос...
Читать
Мощь исходящих ссылок: стратегии линкбилдинга для роста в поисковой выдаче
7 февраля 2025
1034
Мощь исходящих ссылок: стратегии линкбилдинга для роста в поисковой выдаче
Внешние ссылки являются неотъемлемой частью успешной SEO-стратегии для любого веб-ресурса. Они представляют собой гиперссылки, ведущие со сторонних сайтов на страницы вашего веб-сайта. Наличие кач...
Читать
Как узнать и изменить User Agent в любом браузере — пошагово и понятно
31 июля 2025
446
Как узнать и изменить User Agent в любом браузере — пошагово и понятно
User Agent — это уникальная строка, которая передаётся сайту при каждом открытии веб-страницы. Её основная задача — сообщить серверу, какое именно устройство, операционная система и браузер исполь...
Читать
Индексация сайта в поисковых системах - что это такое, как работает
23 августа 2022
1926
Индексация сайта в поисковых системах - что это такое, как работает
Что такое индексация в поисковых системах Индексирование сайта — это процесс, в ходе которого поисковые системы получают и обрабатывают информацию о страницах ресурса. Эти данные хранятся в базе,...
Читать
10 эффективных способов увеличить средний чек и повысить продажи
1 декабря 2025
15
10 эффективных способов увеличить средний чек и повысить продажи
Рост среднего чека — одна из ключевых задач, которая напрямую влияет на прибыль, устойчивость и прогнозируемость бизнеса. Практика показывает: даже минимальное увеличение среднего чека на 5–10% сп...
Читать
Повышаем конверсию с SEO-текстами: советы для авторов и оптимизаторов
31 октября 2024
899
Повышаем конверсию с SEO-текстами: советы для авторов и оптимизаторов
В современном цифровом мире успех любого интернет-ресурса напрямую зависит от грамотного SEO-продвижения. Создание качественного, оптимизированного под поисковые системы контента является одним из...
Читать
Разоблачение реферального маркетинга: открой Истину и получай прибыль
17 декабря 2024
1520
Разоблачение реферального маркетинга: открой Истину и получай прибыль
Рефералы играют все более значимую роль в современных маркетинговых стратегиях и бизнес-моделях. Согласно исследованию Ambassadors+, 92% компаний считают, что реферальные программы стали важным ка...
Читать
Обновление старого контента: Как улучшить SEO и привлечь больше трафика
1 октября 2025
82
Обновление старого контента: Как улучшить SEO и привлечь больше трафика
Ведение актуального и качественного контента на сайте — один из важнейших факторов успешного SEO. В мире цифрового маркетинга, где конкуренция за внимание пользователей никогда не была столь высок...
Читать
Как удалить негативные отзывы о компании?
16 декабря 2022
2243
Как удалить негативные отзывы о компании?
Как удалить отзывы в интернете Удалением негативных отзывов занимаются агентства, которые специализируются на управлении репутацией. При появлении негативных откликов о компании важно быст...
Читать
Качественный бриф: обязательный инструмент для заказчиков и исполнителей
27 августа 2024
1392
Качественный бриф: обязательный инструмент для заказчиков и исполнителей
В современном деловом мире эффективная коммуникация между заказчиком и исполнителем является ключевым фактором успеха любого проекта. Именно поэтому бриф, или "брифинг", играет такую важную роль. ...
Читать
Сниппет сайта: что это, как настроить для привлечения клиентов и увеличения CTR
16 мая 2024
1026
Сниппет сайта: что это, как настроить для привлечения клиентов и увеличения CTR
Вступление Представьте, что вы ищете в Google или Яндексе информацию о ресторане, куда собираетесь пойти. Среди десятков результатов поиска один из них выделяется привлекательным описанием, рейти...
Читать
Мощь облачных технологий: Подробный обзор функционала Google Docs для продуктивной работы в 2024
28 мая 2024
1719
Мощь облачных технологий: Подробный обзор функционала Google Docs для продуктивной работы в 2024
Google Docs – это облачный офисный пакет, разработанный компанией Google для создания, редактирования и совместной работы с текстовыми документами, электронными таблицами и презентациями. Этот бес...
Читать
Баннерная реклама в интернете: виды, форматы, создание, размещение и анализ эффективности
26 ноября 2024
1127
Баннерная реклама в интернете: виды, форматы, создание, размещение и анализ эффективности
Баннерная реклама стала одним из ключевых инструментов интернет-маркетинга практически с самого зарождения всемирной паутины. Термин "баннер" происходит от английского "banner" - знамя, полотнище...
Читать
Ошибка 502 Bad Gateway: полное руководство по диагностике и исправлению
23 июля 2024
1057
Ошибка 502 Bad Gateway: полное руководство по диагностике и исправлению
Ошибка 502 Bad Gateway - довольно распространенная проблема, с которой рано или поздно сталкиваются многие веб-мастера и пользователи интернета. Суть ее заключается в том, что веб-сервер, выступая...
Читать
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
13 ноября 2025
36
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
SEO-продвижение — это не разовая акция, а долгосрочная инвестиция в бизнес. Белые методы, которые используют Яндекс и Google для ранжирования, требуют комплексного подхода: техническая оптимизация...
Читать
Как повысить конверсию лендинга: Практический чек-лист для максимальной эффективности
31 октября 2025
62
Как повысить конверсию лендинга: Практический чек-лист для максимальной эффективности
Конверсия лендинга — это ключевая метрика, которая определяет эффективность вашей посадочной страницы. Она отражает долю посетителей, совершивших целевое действие на сайте. Это может быть покупка ...
Читать
Инструкция по созданию плитки тегов на Битрикс  с помощью меток
16 октября 2020
1382
Инструкция по созданию плитки тегов на Битрикс с помощью меток
Часть 3 — Пошаговая инструкция по созданию плитки тегов на Битрикс - Реализация с помощью меток Для уточнения. Метки — это тоже самое, что теги или ссылки. На мой взгляд самый прос...
Читать
Как распознать и защититься от спама: пошаговое руководство
8 августа 2024
1335
Как распознать и защититься от спама: пошаговое руководство
Спам - это нежелательные сообщения рекламного или мошеннического характера, которые рассылаются миллионам пользователей без их согласия. Проблема спама актуальна как никогда - по данным "Лаборатор...
Читать
Разбираем маркетплейсы: просто о главном для продавцов и покупателей
25 июня 2024
1109
Разбираем маркетплейсы: просто о главном для продавцов и покупателей
Маркетплейс - это онлайн-платформа или торговая площадка, где продавцы размещают свои товары, а покупатели могут выбирать нужные предложения по ценам, характеристикам и другим параметрам. Простыми...
Читать
Важность заключения договора с разработчиком: подводные камни и нюансы
25 августа 2022
964
Важность заключения договора с разработчиком: подводные камни и нюансы
В разработке я уже более 10 лет — работал и самостоятельно, и в команде, и с привлечением фрилансеров. За это время я получил достаточно опыта взаимодействия с сотрудниками, и могу рассказать о ра...
Читать
Упрощение жизни с кластерами запросов
16 октября 2020
1473
Упрощение жизни с кластерами запросов
Настройка при работе первый раз с макросами При первом запуске макросов на ПК необходимо выполнить до настройки MS Excel Зайти в пункт меню файл Выбор Файл 2. Далее ...
Читать
О’кей, Google: Как оптимизировать сайт под голосовой поиск и привлечь новых клиентов
7 ноября 2025
43
О’кей, Google: Как оптимизировать сайт под голосовой поиск и привлечь новых клиентов
Голосовой поиск стремительно завоевывает популярность, и не только среди технически подкованных пользователей. По данным исследований, более 50% взрослых пользователей ежедневно используют голосов...
Читать
Вебмастер - профессия будущего: создавай, управляй, зарабатывай!
1 января 2025
836
Вебмастер - профессия будущего: создавай, управляй, зарабатывай!
Стремительное развитие цифровых технологий и всеобъемлющая цифровизация современного мира открыли новые горизонты и перспективы для профессионального роста. Люди в эпоху, когда интернет стал неотъ...
Читать
Создание плитки тегов через SEO — умного фильтра модуль «Сотбит»
16 октября 2020
4424
Создание плитки тегов через SEO — умного фильтра модуль «Сотбит»
Часть 2 — Создание плитки тегов через SEO — умного фильтра модуль «Сотбит» https://marketplace.1c-bitrix.ru/solutions/sotbit.seometa/ Стоимость 14990 рублей. Принцип работы модуля: ...
Читать
Что такое целевая аудитория, как ее определить и сегментировать
9 февраля 2023
3121
Что такое целевая аудитория, как ее определить и сегментировать
Что такое целевая аудитория Целевая аудитория — это группа людей, которые являются основными потенциальными клиентами компании и могут заказать продукт или услугу. Определять целевую аудиторию ва...
Читать
Почему Google не добавляет ваш сайт в поиск: топ-9 технических и SEO-ошибок
2 июня 2025
927
Почему Google не добавляет ваш сайт в поиск: топ-9 технических и SEO-ошибок
Google крайне чувствителен к скорости загрузки сайта. Это один из первых факторов, который влияет на индексацию ресурса. Если ваш сайт грузится слишком долго, поисковый робот может просто не дожда...
Читать
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
10 октября 2025
76
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
Структура сайта — это его фундаментальная основа, которая определяет, как пользователи и поисковые системы воспринимают ресурс. Визуализация этой структуры позволяет упростить проектирование, сдел...
Читать
Модель AIDA: Исчерпывающий обзор концепции, проверенной временем
17 февраля 2025
774
Модель AIDA: Исчерпывающий обзор концепции, проверенной временем
Техника AIDA является одной из самых известных и проверенных временем моделей в сфере маркетинга и продаж. Ее широкое распространение и популярность объясняются простотой, структурированностью про...
Читать
Поисковое продвижение в Яндекс: особенности SEO и способы раскрутки сайта
17 июня 2022
1273
Поисковое продвижение в Яндекс: особенности SEO и способы раскрутки сайта
Что такое продвижение сайта? Поисковое продвижение (SEO) — это работа с сайтом, которая направлена на его поднятие в ТОП поисковой выдачи. выдаче. Например, ваш сайт по какому-то поисковому запро...
Читать
Как составить идеальное КП: секреты экспертов в одной статье
20 июня 2024
1091
Как составить идеальное КП: секреты экспертов в одной статье
Коммерческое предложение (КП) является одним из ключевых инструментов маркетинга и продаж в современном бизнесе. Его основная цель - эффективно презентовать товары, услуги или решения потенциальны...
Читать
смотреть все