Выгрузка структуры с помощью Netpeak Spider

Выгрузка структуры с помощью Netpeak Spider

В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба.

Для работы со структурой в онлайн режиме удобно использовать сервис https://www.mindmeister.com/. Данный сервис позволяет не перекидываться файлами, и редактировать структуру онлайн в несколько рук. Но вариант платный! В бесплатном режиме на одну почту доступно 3 карты, далее только если удалить одну из предыдущих.

Рассмотрим особенности программы

1) Онлайн, т.е. видно все этапы работы и есть возможность возврата к любой точке, т.к. результат хранится на сервере;
2) Платная, для использования большим числом карт;
3) Удобно скинуть ссылку заказчику и он видит результат;
4) При движении большого числа блоков, возможны задержки.

Остается также вариант использовать программу XMind 8.

Рассмотрим особенности программы

1) Бесплатная;
2) Нет задержки при переносе больших кусков карты;
3) При работе приходится постоянно передавать файлы по сети, после внесения изменений.

Минивывод

Есть несколько вариантов для структурирования карты сайта - один оналйн другой оффлайн. Каждый определяется в соответствии с необходимостью!

1 Методика вынесения структуры - Ручная

1) Пишем название нашего проекта с приставкой черновая структура, рисунок 1



Рисунок 1 - Задание названия для карты структуры сайта
2) Выбираем настройку карты, нам необходимо “Выравнивание по правому краю”. Это делается для понимания вложенности и удобства.

Рисунок 2 - Задание направления веток для структуры сайта
3) Необходимо изначально сделать историю по цветам - чтобы любой кто будет пользоваться картой, понимал что обозначает тот или иной цвет. Это упрощает процесс коммуникации между специалистами.

- Нажимаем правой кнопкой мыши и выбираем “Добавить плавающий узел”

- Называем его “История”

- Добавляем 6 историй:

1) Вспомогательный элемент не для внедрения

2) Информационые запросы

3) Склейка

4) Расширение

5) С конкурентов

6) Текущая структура


Рисунок 3 - Цветовая легенда сайта
4) Заходим на сайт и начинаем выписывать структуру. В начале выписываем все функциональные страницы из меню

Рисунок 4 - Задание текущей структуры сайта

Внимание! Обязательно на карту выносим Н1 страницы и добавляем ссылку на страницу

Верхнее меню, пример

Рисунок 5 - Задание текущей структуры + ссылки на страницы

На данном примере верхнее меню дублируется в подвале сайта.

5) Выносим у интернет-магазина категории и теги (если есть), а у сайта услуг - услуги и теги. Товары выносить на карту не нужно!

Рисунок 6 - Задание вспомогательных блоков не для внедрения

Серым по истории - это у нас вспомогательный элемент, который объединяет какой-то блок страниц, в примере - это регионы, бренд.

На данном этапе чистовая структура вынесена вся, можно приступать к следующим этапам продвижения.

ИНТЕРНЕТ-МАРКЕТИНГ
РАЗРАБОТКА САЙТОВ
SEO продвижение

2 Методика вынесение структуры - Автоматизированная

Автоматизированный способ сбора структуры сайта задействует специальный инструмент Netpeak Spider. Но в рамках бесплатного тарифа нет возможности выгружать отчет - а именно отчет о сруктуре и необходим для дальнейших действий. Очевидным плюсом инструмента является отсутствие внесения каких либо настроек! Алгоритм работы с программой выглядит следующим образом:

1) Берем интересующий нас адрес и вставляем в окно после открытия программы

Рисунок 7 - Задание сайта для анализа
2) И нажимаем кнопку старт

Рисунок 8 - Запуск паука
3) Дожидаемся окончания сбора и нажимаем Экспорт-Структура сайта

Рисунок 9 - Выгрузка структуры сайта
4) Открываем файл и добавляем фильтр на первую строку

Рисунок 10 - Включение фильтра на первой строке
5) Убираем лишнее и оставляем:

- не пустые уровни

- URL

- Код Ответа сервера

- Content-Type

- Title

- Description

- Содержимое H1

Рисунок 11 - Удаление лишних столбцов
6) Сейчас нужно убрать технические страницы. Через фильтр на Content-Type отмечаем все кроме text/html.. и Пустые

Рисунок 12 - Задание значений для фильтра

Выделяем и удаляем строки

7) Далее определяем что есть ещё лишнего. Смотрим графу Код ответа сервера

Рисунок 13 - Задание фильтров

Удаляем эти строки

8) Анализируем пустые страницы по графе URL. Параллельно заполняем их URL, Title, Description, H1 - Копируя их значение из уровня.


Рисунок 14 - Отбор пустых строк

Рисунок 15 - Перенос значений в пустые URL

Рисунок 16 - Перенос значений в пустые URL
9) Далее пройтись по списку URL смотрим что может быть лишнего. Возможно что-то попало в индекс, что не должно было быть - например /reviews (в данном случае имеется в виду полная копия отдельной карточки с отзывами на товар.) . Таким образом можно выявить все необходимые страницы.
10) Проверяем h1 - не должно быть пустых ячеек. Если нет - добавляем Значение с Уровня
11) Удаляем столбик URL, Код ответа сервера, Content-Type, Description, Title и самый первый столбик. Плюс все пустые Уровни.
12) Удаляем шапку файла
13) Отделяем товары и категории. На структуру выносятся все кроме товаров
14) Опускаемся в самый низ и вводим любое слово.
15) Копируем Ctrl+C
16) Обводим все кроме столбика с H1

Рисунок 17 - замена на константу структуры
17) Нажимаем CTRL + G

Рисунок 18 - Работа с константами
18) Нажимаем выделить и далее константы (Ничего не меняем)

Рисунок 19 - Работа с константами
19) Нажимаем CTRL + V

Рисунок 20 - Заполнения константой переменных
20) Копируем структуру и переходим в Notepad ++
21) Выделяем нашу константу по уровням и заменяем на пустое

Рисунок 21 - Замена значений в Notepad++
22) Заменив все константы копируем все и создаем в XMIND новую карту и вставляем

Рисунок 22 - Готовая структура в блокноте

Рисунок 23 - Готовая структура

Далее выделяем дополнительные блоки отделяя услуги или категории товаров от пунктов меню.

Артём Опарин

Артём Опарин

Ведущий SEO специалист компании

Вывод по выгрузке структуры с помощью Netpeak Spider

Таким образом было рассмотрено 2 механизма сбора структуры сайта. Ручной метод обладает своим плюсом по скорости, если проект небольшой. С другой стороны можно упустить скрытые страницы, на которые руками не выйти. В тоже время автоматизированный метод требует приобретения специального инструмента, но в рамках него будет получен мощный механизм для анализа ошибок сайта. Еще одним важным моментом является то что необходимо выбрать среду для построения карты сайта. Здесь также нужно осуществить выбор в пользу того инструмента, который больше подходит.

Что дальше?

После составления структуры сайта можно приступать к её расширению и структурированию

Автор

Артём Опарин

Артём Опарин

ИНТЕРНЕТ-МАРКЕТОЛОГ С ОПЫТОМ БОЛЕЕ 10 ЛЕТ.

Подписывайтесь в соцсетях:

Комментарии

Вам также может понравиться

Исчерпывающее руководство по "Яндекс.Вебмастеру" для эффективного SEO
22 января 2025
1578
Исчерпывающее руководство по "Яндекс.Вебмастеру" для эффективного SEO
"Яндекс.Вебмастер" - это ценный инструмент для владельцев сайтов, SEO-специалистов и интернет-маркетологов, позволяющий комплексно анализировать работу веб-ресурса и оптимизировать его продвижение...
Читать
Ступени успеха: Отчетность как базис, Аналитика как вершина
26 декабря 2024
1388
Ступени успеха: Отчетность как базис, Аналитика как вершина
В динамичном мире цифрового маркетинга и анализа данных крайне важно четко понимать и правильно использовать профессиональную терминологию. Зачастую даже опытные специалисты путают схожие по звуча...
Читать
Как оценить удобство использования сайта: полное руководство по эвристическому анализу юзабилити
10 декабря 2025
401
Как оценить удобство использования сайта: полное руководство по эвристическому анализу юзабилити
Удобство использования сайта напрямую влияет на то, как быстро посетитель достигает цели — находит информацию, оформляет заказ, оставляет заявку или просто продолжает взаимодействие с брендом. Даж...
Читать
HTML Тег Title: Как Правильно Заполнять Заголовки Страниц для Роста Видимости в Поиске и Конверсий
25 февраля 2025
1301
HTML Тег Title: Как Правильно Заполнять Заголовки Страниц для Роста Видимости в Поиске и Конверсий
Одним из ключевых факторов успешного продвижения сайта в поисковых системах является грамотная оптимизация HTML-элементов страниц. Среди них особое значение имеет тег <title>, определяющий з...
Читать
Поисковые роботы: что это такое и как ими управлять
16 декабря 2024
1308
Поисковые роботы: что это такое и как ими управлять
Поисковые роботы, также известные как краулеры, пауки или боты, играют ключевую роль в функционировании поисковых систем. Они выступают связующим звеном между опубликованным в интернете контентом ...
Читать
Как удалить негативные отзывы о компании?
16 декабря 2022
2783
Как удалить негативные отзывы о компании?
Как удалить отзывы в интернете Удалением негативных отзывов занимаются агентства, которые специализируются на управлении репутацией. При появлении негативных откликов о компании важно быст...
Читать
SEO-стратегия для нового сайта: как выйти в ТОП и сохранить бюджет
15 июля 2025
619
SEO-стратегия для нового сайта: как выйти в ТОП и сохранить бюджет
Продвижение молодого сайта — это не просто настройка метатегов или покупка ссылок. Это системная работа на месяцы вперёд, где цена ошибки — слитый бюджет и потерянное время. В этой статье вы узнаете, ...
Читать
Скрытый органический трафик: как работать с запросами «zero search volume» в эпоху ИИ и Zero-Click
15 июня 2026
239
Скрытый органический трафик: как работать с запросами «zero search volume» в эпоху ИИ и Zero-Click
Современная индустрия поисковой оптимизации переживает фундаментальный тектонический сдвиг. Классические подходы к продвижению сайтов, основанные исключительно на сборе высокочастотных (ВЧ) и сред...
Читать
Руководство по оптимизации INP: от поиска Long Tasks до зеленой зоны Core Web Vitals
25 мая 2026
351
Руководство по оптимизации INP: от поиска Long Tasks до зеленой зоны Core Web Vitals
Современное поисковое продвижение сайтов в Яндекс и Google вышло далеко за рамки классической оптимизации метатегов и закупки ссылочной массы. Сегодня ключевым фактором ранжирования и удержания по...
Читать
Главное о cookie просто и понятно: инструкция для новичков
10 июля 2024
1329
Главное о cookie просто и понятно: инструкция для новичков
Файлы cookie - небольшие текстовые данные, которые веб-сайты сохраняют на устройствах пользователей для идентификации и запоминания определенной информации. Эта технология является неотъемлемой ча...
Читать
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
13 ноября 2025
317
Агентство или фрилансер: кого выбрать для SEO, чтобы выйти в топ Яндекса и Google без фильтров
SEO-продвижение — это не разовая акция, а долгосрочная инвестиция в бизнес. Белые методы, которые используют Яндекс и Google для ранжирования, требуют комплексного подхода: техническая оптимизация...
Читать
Компетенции и компетентность: в чем разница и почему это важно?
4 октября 2024
1846
Компетенции и компетентность: в чем разница и почему это важно?
Понятия компетенции и компетентности играют ключевую роль как для личностного и профессионального развития специалистов, так и для успешного управления человеческими ресурсами в организациях. Четк...
Читать
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
10 октября 2025
422
7 шагов к эффективной визуализации структуры сайта: Гайд для оптимизации и SEO
Структура сайта — это его фундаментальная основа, которая определяет, как пользователи и поисковые системы воспринимают ресурс. Визуализация этой структуры позволяет упростить проектирование, сдел...
Читать
Что такое переспам ключевых слов: причины, последствия, примеры и сервисы для проверки текста
6 февраля 2026
445
Что такое переспам ключевых слов: причины, последствия, примеры и сервисы для проверки текста
Переспам ключевых слов остаётся одной из самых частых и опасных ошибок при создании SEO-контента. Несмотря на развитие поисковых алгоритмов и отказ от примитивных методов ранжирования, многие сайт...
Читать
Как удалить сайт из поиска Google и Яндекс: пошаговое руководство и последствия для бизнеса
7 января 2026
363
Как удалить сайт из поиска Google и Яндекс: пошаговое руководство и последствия для бизнеса
Удаление сайта из индекса поисковых систем, таких как Google и Яндекс, может быть вызвано различными причинами, от нарушений правил до необходимости защиты конфиденциальности. В некоторых случаях ...
Читать
Что делать, если конкуренты покупают ключевые слова с названием вашего бренда: эффективные стратегии защиты и рекомендации SEO-специалиста
22 января 2026
318
Что делать, если конкуренты покупают ключевые слова с названием вашего бренда: эффективные стратегии защиты и рекомендации SEO-специалиста
Когда компания продвигает свой бренд в поиске, она рассчитывает на предсказуемый поток целевых клиентов. Но в конкурентных нишах всё чаще возникает ситуация, когда соперники начинают покупать ключ...
Читать
SEO-Аудит крупного сайта: 24 критических пункта + Чек-Лист для роста трафика в 2025
17 ноября 2025
373
SEO-Аудит крупного сайта: 24 критических пункта + Чек-Лист для роста трафика в 2025
SEO-аудит крупного сайта — это системная проверка ресурса с тысячами страниц, которая выявляет барьеры для высоких позиций в Google и Яндексе. На таких проектах ошибки масштабируются: одна неточно...
Читать
Адаптивная верстка - путь к совершенному пользовательскому опыту на любых экранах
13 декабря 2024
2053
Адаптивная верстка - путь к совершенному пользовательскому опыту на любых экранах
В эпоху мобильных устройств и растущей популярности смартфонов, планшетов адаптивная верстка веб-страниц перестала быть опциональным требованием, а стала неотъемлемой составляющей современного веб...
Читать
Профессия директолога: подробный обзор обязанностей, зарплат и путей развития
16 апреля 2025
1664
Профессия директолога: подробный обзор обязанностей, зарплат и путей развития
В современном мире интернет-маркетинга профессия директолога играет ключевую роль в успешном продвижении бизнеса и привлечении целевой аудитории. Директолог - это специалист, который отвечает за с...
Читать
Целевая аудитория: что это, зачем нужна сегментация и как составить портрет
16 мая 2024
1370
Целевая аудитория: что это, зачем нужна сегментация и как составить портрет
Представьте, что вы открываете новый ресторан и хотите привлечь как можно больше посетителей. Вы можете просто повесить вывеску и надеяться, что люди придут. Но есть гораздо более эффективный спос...
Читать
Как привлечь поток клиентов с карт: стратегия продвижения в Яндекс, Google и 2ГИС для малого бизнеса
26 июня 2026
259
Как привлечь поток клиентов с карт: стратегия продвижения в Яндекс, Google и 2ГИС для малого бизнеса
В современном цифровом пространстве модель поведения потребителя претерпела значительные изменения. Сегодня, прежде чем совершить покупку или обратиться за услугой, пользователь обращается к карта...
Читать
Раскрой Потенциал Фриланса: Инструкция Для Новичков
2 июля 2024
2180
Раскрой Потенциал Фриланса: Инструкция Для Новичков
Фриланс (от английского "freelance" - свободный копье) - это форма занятости, при которой специалист не состоит в штате какой-либо компании, а самостоятельно выбирает заказчиков и проекты для сотр...
Читать
Как составить идеальное КП: секреты экспертов в одной статье
20 июня 2024
1618
Как составить идеальное КП: секреты экспертов в одной статье
Коммерческое предложение (КП) является одним из ключевых инструментов маркетинга и продаж в современном бизнесе. Его основная цель - эффективно презентовать товары, услуги или решения потенциальны...
Читать
SEO в эпоху LLM: Как подготовить архитектуру сайта к генеративному поиску и AI-выдаче
3 июня 2026
275
SEO в эпоху LLM: Как подготовить архитектуру сайта к генеративному поиску и AI-выдаче
Архитектура глобальной сети Интернет переживает фундаментальную трансформацию. На протяжении десятилетий поисковая оптимизация (SEO) базировалась на взаимодействии с традиционными роботами-индекса...
Читать
Словарь для карьерного роста: разбираем C-level от А до Я
6 августа 2024
1296
Словарь для карьерного роста: разбираем C-level от А до Я
На современном этапе развития бизнеса наблюдается стремительный рост популярности использования англоязычных аббревиатур для обозначения высших руководящих должностей в компаниях. Термины вроде CE...
Читать
Путь к успеху с push-уведомлениями: стратегии, метрики, юридические нюансы
9 декабря 2024
2182
Путь к успеху с push-уведомлениями: стратегии, метрики, юридические нюансы
Пуш-уведомления (от англ. push - "проталкивать") - это технология мгновенной доставки актуального контента и информационных сообщений на пользовательские устройства. В отличие от email-рассылок, S...
Читать
Что такое валовая маржа простыми словами: как рассчитать по формуле с примерами
13 апреля 2026
333
Что такое валовая маржа простыми словами: как рассчитать по формуле с примерами
Валовая маржа — это финансовый показатель, представляющий собой разницу между суммарной выручкой компании и переменными (прямыми) расходами на производство товара или оказание услуг. Простыми слов...
Читать
SEO для WordPress в 2026 году: полный гид по выводу сайта в лидеры поиска
9 апреля 2026
323
SEO для WordPress в 2026 году: полный гид по выводу сайта в лидеры поиска
WordPress — самая популярная CMS в мире, но она не гарантирует автоматического попадания в топ выдачи. «Из коробки» движок не обеспечивает оптимальную скорость, не устраняет дубли страниц и не име...
Читать
Стратегия использования атрибута nofollow: влияние на ранжирование и безопасность ссылочного профиля
21 апреля 2026
329
Стратегия использования атрибута nofollow: влияние на ранжирование и безопасность ссылочного профиля
Атрибут rel="nofollow" — это техническая инструкция в HTML-коде ссылки, которая сообщает поисковым роботам, что им не следует передавать ссылочный вес (PageRank) целевой странице. Визуально такая ...
Читать
Траст сайта: как заслужить доверие Google и Яндекса
2 июня 2025
1031
Траст сайта: как заслужить доверие Google и Яндекса
В эпоху цифровой конкуренции и информационного шума завоевание высоких позиций в поисковой выдаче стало задачей стратегического уровня для любого онлайн-проекта. SEO уже давно перестало быть прост...
Читать
Маркетинг: Путь к Успешным Продажам
30 мая 2024
1674
Маркетинг: Путь к Успешным Продажам
Маркетинг - это комплексный процесс, направленный на выявление и удовлетворение потребностей клиентов с целью получения прибыли. Термин происходит от английского "marketing", что можно перевести к...
Читать
Симбиоз SEO-специалиста и ИИ: пошаговое руководство по генерации и кластеризации семантики без галлюцинаций
8 июня 2026
249
Симбиоз SEO-специалиста и ИИ: пошаговое руководство по генерации и кластеризации семантики без галлюцинаций
Современный рынок поисковой оптимизации (SEO) находится в состоянии перманентной трансформации. Алгоритмы поисковых систем Яндекс и Google регулярно обновляются, выдвигая все более жесткие требова...
Читать
смотреть все