Выгрузка структуры с помощью Netpeak Spider

Выгрузка структуры с помощью Netpeak Spider

В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба.

Для работы со структурой в онлайн режиме удобно использовать сервис https://www.mindmeister.com/. Данный сервис позволяет не перекидываться файлами, и редактировать структуру онлайн в несколько рук. Но вариант платный! В бесплатном режиме на одну почту доступно 3 карты, далее только если удалить одну из предыдущих.

Рассмотрим особенности программы

1) Онлайн, т.е. видно все этапы работы и есть возможность возврата к любой точке, т.к. результат хранится на сервере;
2) Платная, для использования большим числом карт;
3) Удобно скинуть ссылку заказчику и он видит результат;
4) При движении большого числа блоков, возможны задержки.

Остается также вариант использовать программу XMind 8.

Рассмотрим особенности программы

1) Бесплатная;
2) Нет задержки при переносе больших кусков карты;
3) При работе приходится постоянно передавать файлы по сети, после внесения изменений.

Минивывод

Есть несколько вариантов для структурирования карты сайта - один оналйн другой оффлайн. Каждый определяется в соответствии с необходимостью!

1 Методика вынесения структуры - Ручная

1) Пишем название нашего проекта с приставкой черновая структура, рисунок 1



Рисунок 1 - Задание названия для карты структуры сайта
2) Выбираем настройку карты, нам необходимо “Выравнивание по правому краю”. Это делается для понимания вложенности и удобства.

Рисунок 2 - Задание направления веток для структуры сайта
3) Необходимо изначально сделать историю по цветам - чтобы любой кто будет пользоваться картой, понимал что обозначает тот или иной цвет. Это упрощает процесс коммуникации между специалистами.

- Нажимаем правой кнопкой мыши и выбираем “Добавить плавающий узел”

- Называем его “История”

- Добавляем 6 историй:

1) Вспомогательный элемент не для внедрения

2) Информационые запросы

3) Склейка

4) Расширение

5) С конкурентов

6) Текущая структура


Рисунок 3 - Цветовая легенда сайта
4) Заходим на сайт и начинаем выписывать структуру. В начале выписываем все функциональные страницы из меню

Рисунок 4 - Задание текущей структуры сайта

Внимание! Обязательно на карту выносим Н1 страницы и добавляем ссылку на страницу

Верхнее меню, пример

Рисунок 5 - Задание текущей структуры + ссылки на страницы

На данном примере верхнее меню дублируется в подвале сайта.

5) Выносим у интернет-магазина категории и теги (если есть), а у сайта услуг - услуги и теги. Товары выносить на карту не нужно!

Рисунок 6 - Задание вспомогательных блоков не для внедрения

Серым по истории - это у нас вспомогательный элемент, который объединяет какой-то блок страниц, в примере - это регионы, бренд.

На данном этапе чистовая структура вынесена вся, можно приступать к следующим этапам продвижения.

ИНТЕРНЕТ-МАРКЕТИНГ
РАЗРАБОТКА САЙТОВ
SEO продвижение

2 Методика вынесение структуры - Автоматизированная

Автоматизированный способ сбора структуры сайта задействует специальный инструмент Netpeak Spider. Но в рамках бесплатного тарифа нет возможности выгружать отчет - а именно отчет о сруктуре и необходим для дальнейших действий. Очевидным плюсом инструмента является отсутствие внесения каких либо настроек! Алгоритм работы с программой выглядит следующим образом:

1) Берем интересующий нас адрес и вставляем в окно после открытия программы

Рисунок 7 - Задание сайта для анализа
2) И нажимаем кнопку старт

Рисунок 8 - Запуск паука
3) Дожидаемся окончания сбора и нажимаем Экспорт-Структура сайта

Рисунок 9 - Выгрузка структуры сайта
4) Открываем файл и добавляем фильтр на первую строку

Рисунок 10 - Включение фильтра на первой строке
5) Убираем лишнее и оставляем:

- не пустые уровни

- URL

- Код Ответа сервера

- Content-Type

- Title

- Description

- Содержимое H1

Рисунок 11 - Удаление лишних столбцов
6) Сейчас нужно убрать технические страницы. Через фильтр на Content-Type отмечаем все кроме text/html.. и Пустые

Рисунок 12 - Задание значений для фильтра

Выделяем и удаляем строки

7) Далее определяем что есть ещё лишнего. Смотрим графу Код ответа сервера

Рисунок 13 - Задание фильтров

Удаляем эти строки

8) Анализируем пустые страницы по графе URL. Параллельно заполняем их URL, Title, Description, H1 - Копируя их значение из уровня.


Рисунок 14 - Отбор пустых строк

Рисунок 15 - Перенос значений в пустые URL

Рисунок 16 - Перенос значений в пустые URL
9) Далее пройтись по списку URL смотрим что может быть лишнего. Возможно что-то попало в индекс, что не должно было быть - например /reviews (в данном случае имеется в виду полная копия отдельной карточки с отзывами на товар.) . Таким образом можно выявить все необходимые страницы.
10) Проверяем h1 - не должно быть пустых ячеек. Если нет - добавляем Значение с Уровня
11) Удаляем столбик URL, Код ответа сервера, Content-Type, Description, Title и самый первый столбик. Плюс все пустые Уровни.
12) Удаляем шапку файла
13) Отделяем товары и категории. На структуру выносятся все кроме товаров
14) Опускаемся в самый низ и вводим любое слово.
15) Копируем Ctrl+C
16) Обводим все кроме столбика с H1

Рисунок 17 - замена на константу структуры
17) Нажимаем CTRL + G

Рисунок 18 - Работа с константами
18) Нажимаем выделить и далее константы (Ничего не меняем)

Рисунок 19 - Работа с константами
19) Нажимаем CTRL + V

Рисунок 20 - Заполнения константой переменных
20) Копируем структуру и переходим в Notepad ++
21) Выделяем нашу константу по уровням и заменяем на пустое

Рисунок 21 - Замена значений в Notepad++
22) Заменив все константы копируем все и создаем в XMIND новую карту и вставляем

Рисунок 22 - Готовая структура в блокноте

Рисунок 23 - Готовая структура

Далее выделяем дополнительные блоки отделяя услуги или категории товаров от пунктов меню.

Артём Опарин

Артём Опарин

Ведущий SEO специалист компании

Вывод по выгрузке структуры с помощью Netpeak Spider

Таким образом было рассмотрено 2 механизма сбора структуры сайта. Ручной метод обладает своим плюсом по скорости, если проект небольшой. С другой стороны можно упустить скрытые страницы, на которые руками не выйти. В тоже время автоматизированный метод требует приобретения специального инструмента, но в рамках него будет получен мощный механизм для анализа ошибок сайта. Еще одним важным моментом является то что необходимо выбрать среду для построения карты сайта. Здесь также нужно осуществить выбор в пользу того инструмента, который больше подходит.

Что дальше?

После составления структуры сайта можно приступать к её расширению и структурированию

Автор

Артём Опарин

Артём Опарин

ИНТЕРНЕТ-МАРКЕТОЛОГ С ОПЫТОМ БОЛЕЕ 10 ЛЕТ.

Подписывайтесь в соцсетях:

Комментарии

Вам также может понравиться

Глубина просмотра: что это, зачем отслеживать и как улучшить
5 мая 2025
442
Глубина просмотра: что это, зачем отслеживать и как улучшить
Успех любого сайта в интернете во многом зависит от того, насколько хорошо он удовлетворяет потребности и ожидания своей целевой аудитории. Создание качественного, релевантного и полезного контент...
Читать
Капча: ключ к безопасности веб-ресурсов в эру ботов
17 июля 2024
400
Капча: ключ к безопасности веб-ресурсов в эру ботов
Капча - это специальный тест безопасности, с которым многие из нас сталкиваются в интернете. Представьте, вы заходите на сайт, чтобы оставить комментарий или совершить покупку, и вас просят ввести...
Читать
Рекомендованная розничная цена: что это, зачем нужна и как ее рассчитать
9 января 2025
550
Рекомендованная розничная цена: что это, зачем нужна и как ее рассчитать
Рекомендованная розничная цена (РРЦ) - это цена на товар или услугу, которую производитель или правообладатель торговой марки рекомендует установить для розничной продажи конечному потребителю. Др...
Читать
Максимизируйте отдачу от тизеров: анализ трендов, оптимизация и перспективы 2025
26 декабря 2024
418
Максимизируйте отдачу от тизеров: анализ трендов, оптимизация и перспективы 2025
Тизерная реклама представляет собой один из наиболее эффективных и широко используемых видов интернет-маркетинга в современном мире. Ее основная цель заключается в создании интриги и вовлечении по...
Читать
Доменное имя как маркетинговый инструмент: секреты создания продающих названий для веб-ресурсов
15 июля 2024
396
Доменное имя как маркетинговый инструмент: секреты создания продающих названий для веб-ресурсов
В современном мире практически каждая компания, большая или маленькая, имеет свой веб-сайт. Однако создание сайта - это лишь первый шаг на пути к онлайн-присутствию. Для того, чтобы ресурс стал до...
Читать
Сниппет сайта: что это такое, настройка и использование микроразметки
26 июля 2022
3365
Сниппет сайта: что это такое, настройка и использование микроразметки
Что такое сниппет Сниппет — это «анонс» страницы, который пользователи видят в поисковой выдаче. В него входят title, URL-адрес и описание (meta description). На одной странице выдачи ...
Читать
Диверсификация от А до Я: полное руководство для предпринимателей
13 августа 2024
1085
Диверсификация от А до Я: полное руководство для предпринимателей
Диверсификация - это распределение усилий и ресурсов между несколькими разными направлениями или видами деятельности. Главная цель диверсификации - снизить риски и минимизировать потери в случае н...
Читать
Модель AIDA: Исчерпывающий обзор концепции, проверенной временем
17 февраля 2025
352
Модель AIDA: Исчерпывающий обзор концепции, проверенной временем
Техника AIDA является одной из самых известных и проверенных временем моделей в сфере маркетинга и продаж. Ее широкое распространение и популярность объясняются простотой, структурированностью про...
Читать
Повышаем конверсию с SEO-текстами: советы для авторов и оптимизаторов
31 октября 2024
426
Повышаем конверсию с SEO-текстами: советы для авторов и оптимизаторов
В современном цифровом мире успех любого интернет-ресурса напрямую зависит от грамотного SEO-продвижения. Создание качественного, оптимизированного под поисковые системы контента является одним из...
Читать
Инструкция по созданию плитки тегов на Битрикс  с помощью меток
16 октября 2020
1072
Инструкция по созданию плитки тегов на Битрикс с помощью меток
Часть 3 — Пошаговая инструкция по созданию плитки тегов на Битрикс - Реализация с помощью меток Для уточнения. Метки — это тоже самое, что теги или ссылки. На мой взгляд самый прос...
Читать
Почему Google не добавляет ваш сайт в поиск: топ-9 технических и SEO-ошибок
2 июня 2025
189
Почему Google не добавляет ваш сайт в поиск: топ-9 технических и SEO-ошибок
Google крайне чувствителен к скорости загрузки сайта. Это один из первых факторов, который влияет на индексацию ресурса. Если ваш сайт грузится слишком долго, поисковый робот может просто не дожда...
Читать
Секреты работы с сайтами-реципиентами для роста позиций и трафика из поисковых систем
25 декабря 2024
504
Секреты работы с сайтами-реципиентами для роста позиций и трафика из поисковых систем
В современном интернет-маркетинге ссылочное продвижение остается одним из ключевых факторов успешного SEO. Благодаря грамотному наращиванию ссылочной массы можно значительно повысить позиции сайта...
Читать
AJAX: Принцип работы, влияние на SEO и способы оптимизации для поисковых систем
2 июня 2025
144
AJAX: Принцип работы, влияние на SEO и способы оптимизации для поисковых систем
AJAX (Asynchronous JavaScript and XML) – это веб-технология, позволяющая веб-страницам обмениваться данными с сервером асинхронно, без необходимости перезагрузки всей страницы. Используя AJAX, сай...
Читать
Реферальные программы - источник стабильного дохода: виды, выбор, налогообложение
6 сентября 2024
503
Реферальные программы - источник стабильного дохода: виды, выбор, налогообложение
Реферальные программы - это маркетинговый инструмент, основанный на рекомендациях существующих клиентов. Суть проста: компания мотивирует своих текущих клиентов (рефереров) приглашать новых пользо...
Читать
Эффективные продажи через ЛПР: стратегии поиска, подхода и убеждения
4 октября 2024
295
Эффективные продажи через ЛПР: стратегии поиска, подхода и убеждения
В деловой среде существует специальный термин для обозначения лица, от решения которого зависит успех сделки или продажи - ЛПР (лицо, принимающее решение). Это может быть владелец компании, руково...
Читать
Руководство по продвижению интернет-магазина: от SEO до рекламы и увеличения конверсии
30 мая 2025
175
Руководство по продвижению интернет-магазина: от SEO до рекламы и увеличения конверсии
Интернет-магазины стали неотъемлемой частью современной коммерции. В условиях высокой конкуренции и насыщенности рынка важно не только создать привлекательный сайт с удобной навигацией и ассортиме...
Читать
Интент запросов: постигаем намерения вашей целевой аудитории для максимальной эффективности SEO
1 января 2025
325
Интент запросов: постигаем намерения вашей целевой аудитории для максимальной эффективности SEO
Интент (от англ. intent - намерение, цель) поискового запроса – это потребность или намерение пользователя, которое он вкладывает, вводя определенную фразу в поисковую строку. Иными словами, это к...
Читать
Упрощение жизни с кластерами запросов
16 октября 2020
1140
Упрощение жизни с кластерами запросов
Настройка при работе первый раз с макросами При первом запуске макросов на ПК необходимо выполнить до настройки MS Excel Зайти в пункт меню файл Выбор Файл 2. Далее ...
Читать
Учетные записи: гид по безопасности в цифровой вселенной
13 июня 2024
783
Учетные записи: гид по безопасности в цифровой вселенной
Что такое аккаунт Аккаунт (или учетная запись) - это персональная страница пользователя, создаваемая после прохождения процедуры регистрации на том или ином сайте, в социальной сети, онлайн-с...
Читать
Сервисы проверки скорости загрузки сайта и способы ускорить производительность страниц
7 октября 2022
1327
Сервисы проверки скорости загрузки сайта и способы ускорить производительность страниц
Что такое скорость загрузки сайта Скорость загрузки — это время с момента клика по ссылке (или нажатия пользователем Enter в адресной строке браузера) до момента, когда страница загрузится ...
Читать
Куда приведут прокси: безопасность, маркетинг, SEO
5 июня 2024
427
Куда приведут прокси: безопасность, маркетинг, SEO
Прокси-сервер - это промежуточное звено между пользователем интернета и веб-ресурсами, на которые он заходит. Его основная задача - выступать в роли посредника, перенаправляя запросы и скрывая реа...
Читать
Масштабный разбор конверсии: теория, практика, кейсы для интернет-маркетологов
1 января 2025
512
Масштабный разбор конверсии: теория, практика, кейсы для интернет-маркетологов
Отслеживание конверсии является критически важным аспектом для любого бизнеса, осуществляющего деятельность в интернете. Конверсия представляет собой ключевой показатель эффективности (KPI), котор...
Читать
Sitemap.xml: как создать и для чего нужна карта сайта
8 апреля 2022
2539
Sitemap.xml: как создать и для чего нужна карта сайта
Что такое карта сайта sitemap.xml XML-карта сайта — файл с информацией для поисковых систем о тех страницах, которые требуется проиндексировать. Другими словами, карта сайта — полный перечень все...
Читать
Разоблачение реферального маркетинга: открой Истину и получай прибыль
17 декабря 2024
532
Разоблачение реферального маркетинга: открой Истину и получай прибыль
Рефералы играют все более значимую роль в современных маркетинговых стратегиях и бизнес-моделях. Согласно исследованию Ambassadors+, 92% компаний считают, что реферальные программы стали важным ка...
Читать
Микроразметка schema.org: реализация с примерами и способы проверки
25 марта 2022
6598
Микроразметка schema.org: реализация с примерами и способы проверки
Что такое микроразметка Разметка schema.org — это код (семантический словарь), который можно разместить на своем сайте с той целью, чтобы с помощью некоторых атрибутов помочь поисковикам по...
Читать
Ошибка 403 Forbidden: диагностика проблемы и способы ее устранения
8 июля 2024
902
Ошибка 403 Forbidden: диагностика проблемы и способы ее устранения
Ошибка 403 Forbidden - это код ответа HTTP-сервера, указывающий на то, что сервер понял запрос клиента, но отказался его выполнять из-за ограничений системы безопасности. Проще говоря, данная ошиб...
Читать
Адаптивная верстка - путь к совершенному пользовательскому опыту на любых экранах
13 декабря 2024
963
Адаптивная верстка - путь к совершенному пользовательскому опыту на любых экранах
В эпоху мобильных устройств и растущей популярности смартфонов, планшетов адаптивная верстка веб-страниц перестала быть опциональным требованием, а стала неотъемлемой составляющей современного веб...
Читать
Целевая аудитория: что это, зачем нужна сегментация и как составить портрет
16 мая 2024
478
Целевая аудитория: что это, зачем нужна сегментация и как составить портрет
Представьте, что вы открываете новый ресторан и хотите привлечь как можно больше посетителей. Вы можете просто повесить вывеску и надеяться, что люди придут. Но есть гораздо более эффективный спос...
Читать
Выгрузка структуры с помощью Netpeak Spider
29 ноября 2020
2627
Выгрузка структуры с помощью Netpeak Spider
В данной статье рассмотрим варианты составления текущей структуры сайта. Возможны два пути составления карты сайта - ручной и с помощью сервисов. Рассмотрим оба. Для работы со структурой в ...
Читать
Что такое фишинг простыми словами: виды, угрозы и защита
24 января 2025
618
Что такое фишинг простыми словами: виды, угрозы и защита
В современном цифровом мире, где личные данные имеют колоссальную ценность, существует серьезная угроза под названием "фишинг". Этот вид кибермошенничества нацелен на незаконное получение конфиден...
Читать
Оптимальная длина Title: как написать заголовок, который даст максимум трафика
2 июня 2025
91
Оптимальная длина Title: как написать заголовок, который даст максимум трафика
В условиях современного SEO-продвижения каждая деталь, каждая мелочь может стать либо точкой роста для сайта, либо барьером на пути к топам поисковой выдачи. Одним из таких недооцененных, но крити...
Читать
Графический дизайнер: путь к творческой самореализации и финансовому успеху
31 марта 2025
288
Графический дизайнер: путь к творческой самореализации и финансовому успеху
Графический дизайн является неотъемлемой частью современного мира визуальных коммуникаций. Повсюду, куда бы мы ни посмотрели, нас окружают различные элементы графического дизайна – логотипы брендо...
Читать
смотреть все