Выгрузка структуры с помощью Netpeak Spider

Выгрузка структуры с помощью Netpeak Spider

В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба.

Для работы со структурой в онлайн режиме удобно использовать сервис https://www.mindmeister.com/. Данный сервис позволяет не перекидываться файлами, и редактировать структуру онлайн в несколько рук. Но вариант платный! В бесплатном режиме на одну почту доступно 3 карты, далее только если удалить одну из предыдущих.

Рассмотрим особенности программы

1) Онлайн, т.е. видно все этапы работы и есть возможность возврата к любой точке, т.к. результат хранится на сервере;
2) Платная, для использования большим числом карт;
3) Удобно скинуть ссылку заказчику и он видит результат;
4) При движении большого числа блоков, возможны задержки.

Остается также вариант использовать программу XMind 8.

Рассмотрим особенности программы

1) Бесплатная;
2) Нет задержки при переносе больших кусков карты;
3) При работе приходится постоянно передавать файлы по сети, после внесения изменений.

Минивывод

Есть несколько вариантов для структурирования карты сайта - один оналйн другой оффлайн. Каждый определяется в соответствии с необходимостью!

1 Методика вынесения структуры - Ручная

1) Пишем название нашего проекта с приставкой черновая структура, рисунок 1



Рисунок 1 - Задание названия для карты структуры сайта
2) Выбираем настройку карты, нам необходимо “Выравнивание по правому краю”. Это делается для понимания вложенности и удобства.

Рисунок 2 - Задание направления веток для структуры сайта
3) Необходимо изначально сделать историю по цветам - чтобы любой кто будет пользоваться картой, понимал что обозначает тот или иной цвет. Это упрощает процесс коммуникации между специалистами.

- Нажимаем правой кнопкой мыши и выбираем “Добавить плавающий узел”

- Называем его “История”

- Добавляем 6 историй:

1) Вспомогательный элемент не для внедрения

2) Информационые запросы

3) Склейка

4) Расширение

5) С конкурентов

6) Текущая структура


Рисунок 3 - Цветовая легенда сайта
4) Заходим на сайт и начинаем выписывать структуру. В начале выписываем все функциональные страницы из меню

Рисунок 4 - Задание текущей структуры сайта

Внимание! Обязательно на карту выносим Н1 страницы и добавляем ссылку на страницу

Верхнее меню, пример

Рисунок 5 - Задание текущей структуры + ссылки на страницы

На данном примере верхнее меню дублируется в подвале сайта.

5) Выносим у интернет-магазина категории и теги (если есть), а у сайта услуг - услуги и теги. Товары выносить на карту не нужно!

Рисунок 6 - Задание вспомогательных блоков не для внедрения

Серым по истории - это у нас вспомогательный элемент, который объединяет какой-то блок страниц, в примере - это регионы, бренд.

На данном этапе чистовая структура вынесена вся, можно приступать к следующим этапам продвижения.

ИНТЕРНЕТ-МАРКЕТИНГ
РАЗРАБОТКА САЙТОВ
SEO продвижение

2 Методика вынесение структуры - Автоматизированная

Автоматизированный способ сбора структуры сайта задействует специальный инструмент Netpeak Spider. Но в рамках бесплатного тарифа нет возможности выгружать отчет - а именно отчет о сруктуре и необходим для дальнейших действий. Очевидным плюсом инструмента является отсутствие внесения каких либо настроек! Алгоритм работы с программой выглядит следующим образом:

1) Берем интересующий нас адрес и вставляем в окно после открытия программы

Рисунок 7 - Задание сайта для анализа
2) И нажимаем кнопку старт

Рисунок 8 - Запуск паука
3) Дожидаемся окончания сбора и нажимаем Экспорт-Структура сайта

Рисунок 9 - Выгрузка структуры сайта
4) Открываем файл и добавляем фильтр на первую строку

Рисунок 10 - Включение фильтра на первой строке
5) Убираем лишнее и оставляем:

- не пустые уровни

- URL

- Код Ответа сервера

- Content-Type

- Title

- Description

- Содержимое H1

Рисунок 11 - Удаление лишних столбцов
6) Сейчас нужно убрать технические страницы. Через фильтр на Content-Type отмечаем все кроме text/html.. и Пустые

Рисунок 12 - Задание значений для фильтра

Выделяем и удаляем строки

7) Далее определяем что есть ещё лишнего. Смотрим графу Код ответа сервера

Рисунок 13 - Задание фильтров

Удаляем эти строки

8) Анализируем пустые страницы по графе URL. Параллельно заполняем их URL, Title, Description, H1 - Копируя их значение из уровня.


Рисунок 14 - Отбор пустых строк

Рисунок 15 - Перенос значений в пустые URL

Рисунок 16 - Перенос значений в пустые URL
9) Далее пройтись по списку URL смотрим что может быть лишнего. Возможно что-то попало в индекс, что не должно было быть - например /reviews (в данном случае имеется в виду полная копия отдельной карточки с отзывами на товар.) . Таким образом можно выявить все необходимые страницы.
10) Проверяем h1 - не должно быть пустых ячеек. Если нет - добавляем Значение с Уровня
11) Удаляем столбик URL, Код ответа сервера, Content-Type, Description, Title и самый первый столбик. Плюс все пустые Уровни.
12) Удаляем шапку файла
13) Отделяем товары и категории. На структуру выносятся все кроме товаров
14) Опускаемся в самый низ и вводим любое слово.
15) Копируем Ctrl+C
16) Обводим все кроме столбика с H1

Рисунок 17 - замена на константу структуры
17) Нажимаем CTRL + G

Рисунок 18 - Работа с константами
18) Нажимаем выделить и далее константы (Ничего не меняем)

Рисунок 19 - Работа с константами
19) Нажимаем CTRL + V

Рисунок 20 - Заполнения константой переменных
20) Копируем структуру и переходим в Notepad ++
21) Выделяем нашу константу по уровням и заменяем на пустое

Рисунок 21 - Замена значений в Notepad++
22) Заменив все константы копируем все и создаем в XMIND новую карту и вставляем

Рисунок 22 - Готовая структура в блокноте

Рисунок 23 - Готовая структура

Далее выделяем дополнительные блоки отделяя услуги или категории товаров от пунктов меню.

Артём Опарин

Артём Опарин

Ведущий SEO специалист компании

Вывод по выгрузке структуры с помощью Netpeak Spider

Таким образом было рассмотрено 2 механизма сбора структуры сайта. Ручной метод обладает своим плюсом по скорости, если проект небольшой. С другой стороны можно упустить скрытые страницы, на которые руками не выйти. В тоже время автоматизированный метод требует приобретения специального инструмента, но в рамках него будет получен мощный механизм для анализа ошибок сайта. Еще одним важным моментом является то что необходимо выбрать среду для построения карты сайта. Здесь также нужно осуществить выбор в пользу того инструмента, который больше подходит.

Что дальше?

После составления структуры сайта можно приступать к её расширению и структурированию

Автор

Артём Опарин

Артём Опарин

ИНТЕРНЕТ-МАРКЕТОЛОГ С ОПЫТОМ БОЛЕЕ 10 ЛЕТ.

Подписывайтесь в соцсетях:

Комментарии

Вам также может понравиться

Маркетинговый план: пошаговая инструкция по достижению целей
27 января 2025
951
Маркетинговый план: пошаговая инструкция по достижению целей
Маркетинговый план – это детально проработанная дорожная карта, определяющая стратегию продвижения товаров или услуг компании на рынке. Он охватывает анализ текущей ситуации, постановку целей, опи...
Читать
Профессия SEO-специалист: всё, что нужно знать
20 августа 2024
1101
Профессия SEO-специалист: всё, что нужно знать
На сегодняшний день эффективное присутствие компании в интернете является критически важным для успеха бизнеса. По данным статистики, более 90% пользователей начинают поиск товаров и услуг именно ...
Читать
Маржа и маржинальность: путь к процветающему бизнесу
27 июня 2024
3779
Маржа и маржинальность: путь к процветающему бизнесу
В условиях современной рыночной экономики успех любого бизнеса напрямую зависит от его способности эффективно управлять доходами и расходами для обеспечения устойчивой прибыльности. Важнейшим инст...
Читать
10 эффективных способов увеличить средний чек и повысить продажи
1 декабря 2025
353
10 эффективных способов увеличить средний чек и повысить продажи
Рост среднего чека — одна из ключевых задач, которая напрямую влияет на прибыль, устойчивость и прогнозируемость бизнеса. Практика показывает: даже минимальное увеличение среднего чека на 5–10% сп...
Читать
Негативные отзывы - не приговор: стратегия защиты репутации бренда в действии
28 марта 2025
1069
Негативные отзывы - не приговор: стратегия защиты репутации бренда в действии
В современных реалиях, когда большая часть коммуникаций переместилась в онлайн, репутация бренда в интернете становится критически важным активом. Негативные отзывы, оставленные недовольными клиен...
Читать
HTML Тег Title: Как Правильно Заполнять Заголовки Страниц для Роста Видимости в Поиске и Конверсий
25 февраля 2025
1080
HTML Тег Title: Как Правильно Заполнять Заголовки Страниц для Роста Видимости в Поиске и Конверсий
Одним из ключевых факторов успешного продвижения сайта в поисковых системах является грамотная оптимизация HTML-элементов страниц. Среди них особое значение имеет тег <title>, определяющий з...
Читать
Как сократить ссылку: обзор ТОП-12 популярных сервисов
10 марта 2023
1637
Как сократить ссылку: обзор ТОП-12 популярных сервисов
Когда стоит использовать короткие ссылки Длинные ссылки не только выглядят некрасиво, но и могут быть просто неудобны в использовании. Короткие URL-адреса смотрятся более привлекательно, а...
Читать
Как составить идеальное КП: секреты экспертов в одной статье
20 июня 2024
1368
Как составить идеальное КП: секреты экспертов в одной статье
Коммерческое предложение (КП) является одним из ключевых инструментов маркетинга и продаж в современном бизнесе. Его основная цель - эффективно презентовать товары, услуги или решения потенциальны...
Читать
12 основных причин, по которым ваш сайт имеет высокий показатель отказов и как это исправить
13 октября 2025
212
12 основных причин, по которым ваш сайт имеет высокий показатель отказов и как это исправить
Высокий показатель отказов (bounce rate) — это один из наиболее важных метрик, который помогает понять, как пользователи взаимодействуют с вашим сайтом. Этот показатель указывает, сколько людей по...
Читать
10 Обидных Ошибок в SEO, Которые Даже Профессионалы Совершают: Избегай Их для Успеха!
29 октября 2025
181
10 Обидных Ошибок в SEO, Которые Даже Профессионалы Совершают: Избегай Их для Успеха!
SEO (поисковая оптимизация) — это неотъемлемая часть успешной стратегии цифрового маркетинга. Для компаний, стремящихся увеличить свою видимость в поисковых системах, эффективное SEO становится ре...
Читать
Как продвинуть сайт в поисковых системах своими руками: пошаговая инструкция
4 марта 2026
60
Как продвинуть сайт в поисковых системах своими руками: пошаговая инструкция
Продвижение сайта в поисковых системах — это не разовое действие, а системная работа, направленная на рост видимости, трафика и конверсий. Недостаточно просто создать сайт и наполнить его контенто...
Читать
Реферальные программы - источник стабильного дохода: виды, выбор, налогообложение
6 сентября 2024
1487
Реферальные программы - источник стабильного дохода: виды, выбор, налогообложение
Реферальные программы - это маркетинговый инструмент, основанный на рекомендациях существующих клиентов. Суть проста: компания мотивирует своих текущих клиентов (рефереров) приглашать новых пользо...
Читать
Мощь исходящих ссылок: стратегии линкбилдинга для роста в поисковой выдаче
7 февраля 2025
1331
Мощь исходящих ссылок: стратегии линкбилдинга для роста в поисковой выдаче
Внешние ссылки являются неотъемлемой частью успешной SEO-стратегии для любого веб-ресурса. Они представляют собой гиперссылки, ведущие со сторонних сайтов на страницы вашего веб-сайта. Наличие кач...
Читать
CTR – что это в рекламе, как посчитать и повысить кликабельность
2 декабря 2022
1859
CTR – что это в рекламе, как посчитать и повысить кликабельность
Что такое CTR и зачем его считать CTR или click-through rate — это процентное отношение числа кликов на объявление к числу его показов. Чем чаще кликают на рекламу, тем выше CTR. Значение эт...
Читать
Что такое бриф на разработку дизайна сайта: для чего нужен и как правильно составить с примерами и шаблонами
11 ноября 2025
212
Что такое бриф на разработку дизайна сайта: для чего нужен и как правильно составить с примерами и шаблонами
Представьте ситуацию: вы заказали дизайн сайта за 150 000 рублей. Через две недели получаете макет — яркий, современный, с анимациями. Но... это не то. Цвета кричащие, шрифты мелкие, структура зап...
Читать
Анализ рентабельности: путь к максимальной отдаче от ресурсов
4 октября 2024
1066
Анализ рентабельности: путь к максимальной отдаче от ресурсов
Рентабельность является одним из ключевых показателей эффективности бизнеса, отражающим степень доходности деятельности компании относительно затрат, понесенных на ее ведение. Этот важнейший финан...
Читать
7 стратегий повышения CTR в Яндекс Директ: опыт маркетолога
2 июня 2025
846
7 стратегий повышения CTR в Яндекс Директ: опыт маркетолога
CTR — показатель, который определяет не только кликабельность объявления, но и его эффективность в глазах рекламных систем. Чем выше CTR, тем больше вероятность, что именно ваше объявление будет п...
Читать
Применение пирамиды Маслоу в маркетинге: понимаем истинные мотиваторы потребителей
20 февраля 2025
1217
Применение пирамиды Маслоу в маркетинге: понимаем истинные мотиваторы потребителей
Пирамида потребностей Абрахама Маслоу - одна из самых известных и влиятельных теорий в области психологии мотивации. Разработанная в середине ХХ века, эта концепция нашла широкое применение не тол...
Читать
Что такое сбалансированная система показателей: цели, задачи и стратегии внедрения
3 октября 2025
217
Что такое сбалансированная система показателей: цели, задачи и стратегии внедрения
Сбалансированная система показателей (ССП) — это метод управления, который помогает компании улучшать свою эффективность через измерение ключевых аспектов бизнеса. Она включает в себя различные по...
Читать
Ошибка 429: выявляем источник проблемы и находим эффективные пути решения
24 марта 2025
1827
Ошибка 429: выявляем источник проблемы и находим эффективные пути решения
Ошибка 429 Too Many Requests является распространенной проблемой, с которой нередко сталкиваются веб-разработчики, администраторы сайтов и даже обычные пользователи интернета. Эта ошибка HTTP-стат...
Читать
Искусственный интеллект: принципы, виды и перспективы развития
26 февраля 2025
1844
Искусственный интеллект: принципы, виды и перспективы развития
Искусственный интеллект (ИИ) - это область компьютерных наук, нацеленная на создание систем и алгоритмов, способных мыслить рационально и выполнять творческие задачи, традиционно считавшиеся преро...
Читать
Сколько времени нужно, чтобы увидеть результаты от линкбилдинга? Все, что нужно знать о сроках и эффективных подходах
16 января 2026
132
Сколько времени нужно, чтобы увидеть результаты от линкбилдинга? Все, что нужно знать о сроках и эффективных подходах
Линкбилдинг — это одна из важнейших составляющих стратегии поисковой оптимизации, направленная на улучшение видимости сайта в поисковых системах. Однако многие владельцы сайтов и SEO-специалисты с...
Читать
H1 — главный заголовок сайта: как использовать его правильно?
25 июня 2025
597
H1 — главный заголовок сайта: как использовать его правильно?
В современном SEO-продвижении важную роль играют не только внешние ссылки и поведенческие факторы, но и внутренняя структура контента. Один из базовых, но часто недооцененных элементов — это тег H...
Читать
Ошибка 403 Forbidden: диагностика проблемы и способы ее устранения
8 июля 2024
3042
Ошибка 403 Forbidden: диагностика проблемы и способы ее устранения
Ошибка 403 Forbidden - это код ответа HTTP-сервера, указывающий на то, что сервер понял запрос клиента, но отказался его выполнять из-за ограничений системы безопасности. Проще говоря, данная ошиб...
Читать
Капча: ключ к безопасности веб-ресурсов в эру ботов
17 июля 2024
1037
Капча: ключ к безопасности веб-ресурсов в эру ботов
Капча - это специальный тест безопасности, с которым многие из нас сталкиваются в интернете. Представьте, вы заходите на сайт, чтобы оставить комментарий или совершить покупку, и вас просят ввести...
Читать
Секреты работы с сайтами-реципиентами для роста позиций и трафика из поисковых систем
25 декабря 2024
1368
Секреты работы с сайтами-реципиентами для роста позиций и трафика из поисковых систем
В современном интернет-маркетинге ссылочное продвижение остается одним из ключевых факторов успешного SEO. Благодаря грамотному наращиванию ссылочной массы можно значительно повысить позиции сайта...
Читать
Гайд по сокращению скорости загрузки страниц сайта: Практические советы и техники оптимизации
10 сентября 2025
259
Гайд по сокращению скорости загрузки страниц сайта: Практические советы и техники оптимизации
Веб-сайты — это не только источники информации, но и инструменты, которые должны обеспечивать отличный пользовательский опыт. Одним из важнейших факторов, определяющих качество этого опыта, является с...
Читать
URL-адрес: путеводитель по созданию оптимальных веб-адресов
3 июля 2024
1146
URL-адрес: путеводитель по созданию оптимальных веб-адресов
URL (Uniform Resource Locator) представляет собой уникальный унифицированный указатель ресурса, используемый для идентификации местоположения документа, изображения, веб-страницы или другого цифро...
Читать
Создание плитки тегов через SEO — умного фильтра модуль «Сотбит»
16 октября 2020
4934
Создание плитки тегов через SEO — умного фильтра модуль «Сотбит»
Часть 2 — Создание плитки тегов через SEO — умного фильтра модуль «Сотбит» https://marketplace.1c-bitrix.ru/solutions/sotbit.seometa/ Стоимость 14990 рублей. Принцип работы модуля: ...
Читать
Mobile First от Google: Что это и как подготовить сайт в 2025 году
29 августа 2025
403
Mobile First от Google: Что это и как подготовить сайт в 2025 году
В последние годы цифровая среда стремительно трансформируется: привычные настольные компьютеры постепенно уступают место мобильным устройствам. Если еще 10 лет назад интернет-активность пользовате...
Читать
Вебмастер - профессия будущего: создавай, управляй, зарабатывай!
1 января 2025
1006
Вебмастер - профессия будущего: создавай, управляй, зарабатывай!
Стремительное развитие цифровых технологий и всеобъемлющая цифровизация современного мира открыли новые горизонты и перспективы для профессионального роста. Люди в эпоху, когда интернет стал неотъ...
Читать
Созданию плитки тегов на Битрикс
16 октября 2020
5639
Созданию плитки тегов на Битрикс
Часть 1 — Пошаговая инструкция по созданию плитки тегов на Битрикс Данная инструкция включает себя 3 варианта реализации. На основании статьи вы сможете написать ТЗ для своего разработчика. ...
Читать
смотреть все