Выгрузка структуры с помощью Netpeak Spider

Выгрузка структуры с помощью Netpeak Spider

В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба.

Для работы со структурой в онлайн режиме удобно использовать сервис https://www.mindmeister.com/. Данный сервис позволяет не перекидываться файлами, и редактировать структуру онлайн в несколько рук. Но вариант платный! В бесплатном режиме на одну почту доступно 3 карты, далее только если удалить одну из предыдущих.

Рассмотрим особенности программы

1) Онлайн, т.е. видно все этапы работы и есть возможность возврата к любой точке, т.к. результат хранится на сервере;
2) Платная, для использования большим числом карт;
3) Удобно скинуть ссылку заказчику и он видит результат;
4) При движении большого числа блоков, возможны задержки.

Остается также вариант использовать программу XMind 8.

Рассмотрим особенности программы

1) Бесплатная;
2) Нет задержки при переносе больших кусков карты;
3) При работе приходится постоянно передавать файлы по сети, после внесения изменений.

Минивывод

Есть несколько вариантов для структурирования карты сайта - один оналйн другой оффлайн. Каждый определяется в соответствии с необходимостью!

1 Методика вынесения структуры - Ручная

1) Пишем название нашего проекта с приставкой черновая структура, рисунок 1



Рисунок 1 - Задание названия для карты структуры сайта
2) Выбираем настройку карты, нам необходимо “Выравнивание по правому краю”. Это делается для понимания вложенности и удобства.

Рисунок 2 - Задание направления веток для структуры сайта
3) Необходимо изначально сделать историю по цветам - чтобы любой кто будет пользоваться картой, понимал что обозначает тот или иной цвет. Это упрощает процесс коммуникации между специалистами.

- Нажимаем правой кнопкой мыши и выбираем “Добавить плавающий узел”

- Называем его “История”

- Добавляем 6 историй:

1) Вспомогательный элемент не для внедрения

2) Информационые запросы

3) Склейка

4) Расширение

5) С конкурентов

6) Текущая структура


Рисунок 3 - Цветовая легенда сайта
4) Заходим на сайт и начинаем выписывать структуру. В начале выписываем все функциональные страницы из меню

Рисунок 4 - Задание текущей структуры сайта

Внимание! Обязательно на карту выносим Н1 страницы и добавляем ссылку на страницу

Верхнее меню, пример

Рисунок 5 - Задание текущей структуры + ссылки на страницы

На данном примере верхнее меню дублируется в подвале сайта.

5) Выносим у интернет-магазина категории и теги (если есть), а у сайта услуг - услуги и теги. Товары выносить на карту не нужно!

Рисунок 6 - Задание вспомогательных блоков не для внедрения

Серым по истории - это у нас вспомогательный элемент, который объединяет какой-то блок страниц, в примере - это регионы, бренд.

На данном этапе чистовая структура вынесена вся, можно приступать к следующим этапам продвижения.

ИНТЕРНЕТ-МАРКЕТИНГ
РАЗРАБОТКА САЙТОВ
SEO продвижение

2 Методика вынесение структуры - Автоматизированная

Автоматизированный способ сбора структуры сайта задействует специальный инструмент Netpeak Spider. Но в рамках бесплатного тарифа нет возможности выгружать отчет - а именно отчет о сруктуре и необходим для дальнейших действий. Очевидным плюсом инструмента является отсутствие внесения каких либо настроек! Алгоритм работы с программой выглядит следующим образом:

1) Берем интересующий нас адрес и вставляем в окно после открытия программы

Рисунок 7 - Задание сайта для анализа
2) И нажимаем кнопку старт

Рисунок 8 - Запуск паука
3) Дожидаемся окончания сбора и нажимаем Экспорт-Структура сайта

Рисунок 9 - Выгрузка структуры сайта
4) Открываем файл и добавляем фильтр на первую строку

Рисунок 10 - Включение фильтра на первой строке
5) Убираем лишнее и оставляем:

- не пустые уровни

- URL

- Код Ответа сервера

- Content-Type

- Title

- Description

- Содержимое H1

Рисунок 11 - Удаление лишних столбцов
6) Сейчас нужно убрать технические страницы. Через фильтр на Content-Type отмечаем все кроме text/html.. и Пустые

Рисунок 12 - Задание значений для фильтра

Выделяем и удаляем строки

7) Далее определяем что есть ещё лишнего. Смотрим графу Код ответа сервера

Рисунок 13 - Задание фильтров

Удаляем эти строки

8) Анализируем пустые страницы по графе URL. Параллельно заполняем их URL, Title, Description, H1 - Копируя их значение из уровня.


Рисунок 14 - Отбор пустых строк

Рисунок 15 - Перенос значений в пустые URL

Рисунок 16 - Перенос значений в пустые URL
9) Далее пройтись по списку URL смотрим что может быть лишнего. Возможно что-то попало в индекс, что не должно было быть - например /reviews (в данном случае имеется в виду полная копия отдельной карточки с отзывами на товар.) . Таким образом можно выявить все необходимые страницы.
10) Проверяем h1 - не должно быть пустых ячеек. Если нет - добавляем Значение с Уровня
11) Удаляем столбик URL, Код ответа сервера, Content-Type, Description, Title и самый первый столбик. Плюс все пустые Уровни.
12) Удаляем шапку файла
13) Отделяем товары и категории. На структуру выносятся все кроме товаров
14) Опускаемся в самый низ и вводим любое слово.
15) Копируем Ctrl+C
16) Обводим все кроме столбика с H1

Рисунок 17 - замена на константу структуры
17) Нажимаем CTRL + G

Рисунок 18 - Работа с константами
18) Нажимаем выделить и далее константы (Ничего не меняем)

Рисунок 19 - Работа с константами
19) Нажимаем CTRL + V

Рисунок 20 - Заполнения константой переменных
20) Копируем структуру и переходим в Notepad ++
21) Выделяем нашу константу по уровням и заменяем на пустое

Рисунок 21 - Замена значений в Notepad++
22) Заменив все константы копируем все и создаем в XMIND новую карту и вставляем

Рисунок 22 - Готовая структура в блокноте

Рисунок 23 - Готовая структура

Далее выделяем дополнительные блоки отделяя услуги или категории товаров от пунктов меню.

Артём Опарин

Артём Опарин

Ведущий SEO специалист компании

Вывод по выгрузке структуры с помощью Netpeak Spider

Таким образом было рассмотрено 2 механизма сбора структуры сайта. Ручной метод обладает своим плюсом по скорости, если проект небольшой. С другой стороны можно упустить скрытые страницы, на которые руками не выйти. В тоже время автоматизированный метод требует приобретения специального инструмента, но в рамках него будет получен мощный механизм для анализа ошибок сайта. Еще одним важным моментом является то что необходимо выбрать среду для построения карты сайта. Здесь также нужно осуществить выбор в пользу того инструмента, который больше подходит.

Что дальше?

После составления структуры сайта можно приступать к её расширению и структурированию

Автор

Артём Опарин

Артём Опарин

ИНТЕРНЕТ-МАРКЕТОЛОГ С ОПЫТОМ БОЛЕЕ 10 ЛЕТ.

Подписывайтесь в соцсетях:

Комментарии

Вам также может понравиться

Новый алгоритм Яндекса против малополезного контента: как защитить сайт и вернуть позиции
4 февраля 2026
226
Новый алгоритм Яндекса против малополезного контента: как защитить сайт и вернуть позиции
Алгоритмы поисковых систем становятся умнее каждый год, и 2025-й — один из самых заметных этапов их развития. Яндекс усилил контроль за качеством контента и обновил фильтры, направленные на борьбу...
Читать
Продвижение мобильных приложений: полный гайд по ASO, рекламе и аналитике
25 февраля 2026
143
Продвижение мобильных приложений: полный гайд по ASO, рекламе и аналитике
В условиях стремительно развивающегося рынка мобильных приложений, продвижение играет ключевую роль в успешном выходе продукта на рынок и его дальнейшем росте. Сотни новых приложений каждый день п...
Читать
Негативные отзывы - не приговор: стратегия защиты репутации бренда в действии
28 марта 2025
1211
Негативные отзывы - не приговор: стратегия защиты репутации бренда в действии
В современных реалиях, когда большая часть коммуникаций переместилась в онлайн, репутация бренда в интернете становится критически важным активом. Негативные отзывы, оставленные недовольными клиен...
Читать
Что такое дипфейк: как создать и зачем использовать в рекламе
8 ноября 2024
1546
Что такое дипфейк: как создать и зачем использовать в рекламе
Дипфейк (англ. deepfake, сокращение от deep learning и fake - "глубокое обучение" и "подделка") - это метод синтеза аудиовизуального контента с применением технологий искусственного интеллекта и м...
Читать
Как перевести сайт на HTTPS протокол без потери трафика и позиций?
11 июня 2022
1922
Как перевести сайт на HTTPS протокол без потери трафика и позиций?
Что такое HTTPS Все сайты по умолчанию начинают свой путь с HTTP-протокола передачи данных в интернете. Он предполагает использование технологии «клиент-сервер», которая работает следующим...
Читать
Как повысить конверсию лендинга: Практический чек-лист для максимальной эффективности
31 октября 2025
303
Как повысить конверсию лендинга: Практический чек-лист для максимальной эффективности
Конверсия лендинга — это ключевая метрика, которая определяет эффективность вашей посадочной страницы. Она отражает долю посетителей, совершивших целевое действие на сайте. Это может быть покупка ...
Читать
Список факторов ранжирования Google в 2025 году: что важно и как это работает
29 декабря 2025
296
Список факторов ранжирования Google в 2025 году: что важно и как это работает
Алгоритмы Google меняются ежегодно, и 2025 год стал одним из наиболее динамичных периодов в развитии поисковой системы. Обновления затронули качество контента, пользовательский опыт, технические п...
Читать
Лиды как путь к миллиону: гид по лидогенерации для бизнеса
4 октября 2024
1003
Лиды как путь к миллиону: гид по лидогенерации для бизнеса
Лиды - это потенциальные клиенты, которые уже проявили заинтересованность в продукте или услугах вашей компании. Работа с лидами, называемая лидогенерацией, крайне важна для любого бизнеса, так ка...
Читать
Архитектура вместо хаоса: как графовые алгоритмы автоматизируют внутреннюю перелинковку и выводят коммерческие страницы в ТОП
17 июня 2026
106
Архитектура вместо хаоса: как графовые алгоритмы автоматизируют внутреннюю перелинковку и выводят коммерческие страницы в ТОП
Современное поисковое продвижение в Яндексе и Google требует кардинальной смены парадигмы в проектировании внутренней структуры веб-ресурсов. Традиционное восприятие перелинковки как хаотичного или по...
Читать
Эволюция доверия: Как прокачать E-E-A-T сайта, чтобы попасть в рекомендации Google и AI Overviews
17 апреля 2026
174
Эволюция доверия: Как прокачать E-E-A-T сайта, чтобы попасть в рекомендации Google и AI Overviews
В современной экосистеме поискового продвижения концепция E-E-A-T трансформировалась из набора рекомендаций в фундаментальный фильтр качества, определяющий видимость ресурса. Поисковая система Goo...
Читать
Разбираем маркетплейсы: просто о главном для продавцов и покупателей
25 июня 2024
1657
Разбираем маркетплейсы: просто о главном для продавцов и покупателей
Маркетплейс - это онлайн-платформа или торговая площадка, где продавцы размещают свои товары, а покупатели могут выбирать нужные предложения по ценам, характеристикам и другим параметрам. Простыми...
Читать
Руководство по продвижению интернет-магазина: от SEO до рекламы и увеличения конверсии
30 мая 2025
1089
Руководство по продвижению интернет-магазина: от SEO до рекламы и увеличения конверсии
Интернет-магазины стали неотъемлемой частью современной коммерции. В условиях высокой конкуренции и насыщенности рынка важно не только создать привлекательный сайт с удобной навигацией и ассортиме...
Читать
Сколько времени нужно, чтобы увидеть результаты от линкбилдинга? Все, что нужно знать о сроках и эффективных подходах
16 января 2026
228
Сколько времени нужно, чтобы увидеть результаты от линкбилдинга? Все, что нужно знать о сроках и эффективных подходах
Линкбилдинг — это одна из важнейших составляющих стратегии поисковой оптимизации, направленная на улучшение видимости сайта в поисковых системах. Однако многие владельцы сайтов и SEO-специалисты с...
Читать
Грамотное ТЗ для копирайтера? 5 простых правил
11 октября 2021
1469
Грамотное ТЗ для копирайтера? 5 простых правил
Все мы любим экономить свое время, поэтому в этой статье я расскажу, как качественно и достаточно быстро подготовить техническое задание для копирайтера. В данной статье будет рассмотрено, как сос...
Читать
Надёжный бэкап — лучший план Б в жизни цифровых файлов
25 июня 2025
548
Надёжный бэкап — лучший план Б в жизни цифровых файлов
В эпоху цифровизации информация стала важнейшим активом — неважно, идёт ли речь о корпоративной базе данных, личных фотографиях или содержимом интернет-магазина. Вся наша работа, переписка, докуме...
Читать
Применение пирамиды Маслоу в маркетинге: понимаем истинные мотиваторы потребителей
20 февраля 2025
1403
Применение пирамиды Маслоу в маркетинге: понимаем истинные мотиваторы потребителей
Пирамида потребностей Абрахама Маслоу - одна из самых известных и влиятельных теорий в области психологии мотивации. Разработанная в середине ХХ века, эта концепция нашла широкое применение не тол...
Читать
SPA SEO: Как подружить современные фреймворки с поисковыми роботами
15 мая 2026
143
SPA SEO: Как подружить современные фреймворки с поисковыми роботами
Современная веб-разработка практически полностью перешла на использование JavaScript-фреймворков, таких как React, Vue и Angular. Технология Single Page Application (SPA) обеспечила пользователям ...
Читать
Трудности перевода: почему идеальный hreflang не работает без глубокой локализации контента
1 июня 2026
113
Трудности перевода: почему идеальный hreflang не работает без глубокой локализации контента
В условиях глобализации электронной коммерции и масштабирования контентных проектов выход на зарубежные рынки становится логичным шагом развития бизнеса. Однако просто перевести интерфейс и текстовую ...
Читать
Как увеличить конверсию сайта в 2026 году: 30 рабочих методов и пошаговое руководство
27 апреля 2026
155
Как увеличить конверсию сайта в 2026 году: 30 рабочих методов и пошаговое руководство
В современной практике интернет-маркетинга показатель конверсии (Conversion Rate, CR) выступает фундаментальной метрикой эффективности бизнес-модели. Часто владельцы ресурсов совершают стратегичес...
Читать
Главная страница сайта: от проектирования структуры до технической оптимизации
4 мая 2026
217
Главная страница сайта: от проектирования структуры до технической оптимизации
В эпоху цифровой трансформации и перенасыщения рынков информация становится ключевым ресурсом, а визуальный облик бизнеса в сети — его главной витриной. Когда потенциальный клиент вводит запрос в ...
Читать
Ошибка 429: выявляем источник проблемы и находим эффективные пути решения
24 марта 2025
2054
Ошибка 429: выявляем источник проблемы и находим эффективные пути решения
Ошибка 429 Too Many Requests является распространенной проблемой, с которой нередко сталкиваются веб-разработчики, администраторы сайтов и даже обычные пользователи интернета. Эта ошибка HTTP-стат...
Читать
Покупки по картинке: гид по использованию ТОП-3 сервисов визуального поиска
25 февраля 2025
4958
Покупки по картинке: гид по использованию ТОП-3 сервисов визуального поиска
В эпоху стремительного развития электронной коммерции и повсеместного перехода потребителей к онлайн-шопингу возможность поиска товаров по фотографиям стала невероятно востребованной. Нередко мы с...
Читать
Максимизируйте отдачу от тизеров: анализ трендов, оптимизация и перспективы 2025
26 декабря 2024
1668
Максимизируйте отдачу от тизеров: анализ трендов, оптимизация и перспективы 2025
Тизерная реклама представляет собой один из наиболее эффективных и широко используемых видов интернет-маркетинга в современном мире. Ее основная цель заключается в создании интриги и вовлечении по...
Читать
Как узнать и изменить User Agent в любом браузере — пошагово и понятно
31 июля 2025
1024
Как узнать и изменить User Agent в любом браузере — пошагово и понятно
User Agent — это уникальная строка, которая передаётся сайту при каждом открытии веб-страницы. Её основная задача — сообщить серверу, какое именно устройство, операционная система и браузер исполь...
Читать
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
13 ноября 2025
240
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
SEO-продвижение — это не разовая акция, а долгосрочная инвестиция в бизнес. Белые методы, которые используют Яндекс и Google для ранжирования, требуют комплексного подхода: техническая оптимизация...
Читать
Копирайтинг - ваш проводник в мир цепляющего контента и успешных продаж
17 июня 2024
1647
Копирайтинг - ваш проводник в мир цепляющего контента и успешных продаж
Копирайтинг - это искусство создания текстов, ориентированных на решение конкретных задач в области маркетинга и продвижения товаров или услуг. Копирайтер - специалист, который профессионально зан...
Читать
SEO-Аудит крупного сайта: 24 критических пункта + Чек-Лист для роста трафика в 2025
17 ноября 2025
300
SEO-Аудит крупного сайта: 24 критических пункта + Чек-Лист для роста трафика в 2025
SEO-аудит крупного сайта — это системная проверка ресурса с тысячами страниц, которая выявляет барьеры для высоких позиций в Google и Яндексе. На таких проектах ошибки масштабируются: одна неточно...
Читать
Маркетинг: Путь к Успешным Продажам
30 мая 2024
1575
Маркетинг: Путь к Успешным Продажам
Маркетинг - это комплексный процесс, направленный на выявление и удовлетворение потребностей клиентов с целью получения прибыли. Термин происходит от английского "marketing", что можно перевести к...
Читать
Как отличить кликбейт от цепляющих заголовков и составлять правильные анонсы
4 октября 2024
1444
Как отличить кликбейт от цепляющих заголовков и составлять правильные анонсы
Кликбейт - это провокационный метод привлечения внимания пользователей к контенту посредством ярких, интригующих, а зачастую и вводящих в заблуждение заголовков и описаний. Термин происходит от ан...
Читать
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
10 октября 2025
342
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
Структура сайта — это его фундаментальная основа, которая определяет, как пользователи и поисковые системы воспринимают ресурс. Визуализация этой структуры позволяет упростить проектирование, сдел...
Читать
Как создать эффективный баннер для сайта: пошаговая инструкция
27 августа 2025
567
Как создать эффективный баннер для сайта: пошаговая инструкция
В условиях постоянного информационного шума и стремительной конкуренции в digital-пространстве эффективная визуальная коммуникация становится ключом к успеху любого онлайн-проекта. Один из самых д...
Читать
Важность заключения договора с разработчиком: подводные камни и нюансы
25 августа 2022
1208
Важность заключения договора с разработчиком: подводные камни и нюансы
В разработке я уже более 10 лет — работал и самостоятельно, и в команде, и с привлечением фрилансеров. За это время я получил достаточно опыта взаимодействия с сотрудниками, и могу рассказать о ра...
Читать
смотреть все