Создаем карту сайта с большим количеством страниц в один клик

Создаем карту сайта большим количеством страниц в один клик

Бывают случаи, когда необходимо добавить сайт с большим количеством страниц в известную биржу ссылок sape. Одно дело, когда страниц не много и сайт статичный, тогда особых проблем с нахождением всех страниц роботом биржи не возникает. А вот если сайт на CMS, плюс ко всему на нем множество страниц, возникает небольшая проблемка.

Такую проблему решить не составляет особого труда, правда, если знать как. Лично я склоняюсь к тому, что оптимальнее всего использовать бесплатные способы создания карты сайта, причем в сети вариантов создания карты сайта более чем предостаточно.

Я рассмотрю в данном посте несколько вариантов создания карты сайта. Ну а вы решите сами, какой наиболее оптимален для вас.

Итак, начнем, пожалуй, с бесплатных сервисов онлайн. Стоит отметить, что некоторые сервисы вводят ограничение на количество просматриваемых страниц. Как правило, это порядка 500-1000 страниц. Снятие ограничений решается с помощью оплаты досканирования страниц.

Создание карты сайта от htmlweb.ru

О первом сервисе, о котором пойдет речь - htmlweb.ru. Преимущества сервиса в том, что он создает уже готовую карту сайта в форматах .xml, .html, .txt. Вам лишь остается ввести url сайта и получить ожидаемый результат.

Ограничение на количество сканированных страниц – 1000. Однако вы всегда можете доплатить требуемую сумму и увеличить этот показатель до 3000.

Сервис отлично справляется со сканированием страниц до 1000, потом начинаются проблемы. По крайней мере, у меня так было и не раз. Я заплатил 3 раза по 11 рублей, чтобы досканировать оставшиеся страницы на сайте, однако сервис просто выдавал следующее «Сканируется, пожалуйста, ждите». И на этом все.

Для маленьких сателлитов и сайтов данный сервис подойдет как-никак кстати. Пробуйте, по результатам можете отписаться в комментариях к посту.

Создание карты сайта с помощью xml-sitemaps.com

Идем дальше. Весьма неплохой забугорный сервис xml-sitemaps.com, который формирует несколько вариантов карты вашего сайта: XML, HTML, Text Format. Как говорится, выбирайте тот вариант, который вам по душе.

В отличие от первого сервиса, здесь меньший лимит индексации страниц – 500. За индексирование большего количества страниц вам придется заплатить. Сколько? Всего ничего - $19.99.

Естественно, наш бедный вебмастер просто не в состоянии заплатить такую сумму, поэтому я советую прочитать о третьем варианте создания карты сайта.

Создание карты сайта с помощью gsitecrawler

Ну а теперь о самой продвинутой программе, с помощью которой все остальные сервисы просто стоят и курят в сторонке. Программа эта называется – gsitecrawler. Главное отличие от конкурентов заключается в ее бесплатности и бесперебойной работе. Теперь не нужно тратить деньги за воздух! Если программа, представленной мною и не справится с заданием (заглючит, например), то помимо времени вы ничего не теряете.
Дабы не томить вас, переходит непосредственно к делу. Скачиваем программу с официального сайта.

Несмотря на то, что программа на английском языке, я более чем уверен, что вам будет все понятно. А если нет, то я подробно расскажу, куда жать и что делать.

Устанавливаем gsitecrawler на свой компьютер. После установки запускаем программу.

Gsitecrawler

После открытия программы жмем на клавишу «Add new project», так сказать добавляем новый проект. На следующей странице вводим url сайта, для которого будет создаваться карта сайта. В качестве примера я ввел урл своего блога.

gsitecrawler

После того, как программа проверить, доступен ли ваш сайт.  Лично я не снимаю галочки, оставляю как есть и перехожу к третьему шагу.

Создание карты сайт с gsitecrawler

На третьем шаге подготовки проекта вам предлагают загрузить файл с картой сайта на хостинг посредством ftp. Я пропускаю данную опцию, но если вы желаете, можете воспользоваться ей.

Создание карты сайт с gsitecrawler

И, последний, самый интересный момент. Здесь вам предложат пройтись по robots.txt, проверить информацию о страницах, которые не существуют, импортировать известные страницы поисковой системе Google, ну и, запустить выполнение задания прямо сейчас. Лично я пропускаю вариант с галочкой robots.txt только в том случае, если у меня в нем не стоят ограничения на индексацию ссылок, тегов и пр.

Создание карты сайт с gsitecrawler

Запускаем выполнение задания простой кнопкой Finish и идем на кухню выпить чашечку кофе.

После того, как программа закончит с созданием карты, нам остается экспортировать ее на компьютер. Для этого переходим во вкладку Url list – Generate – Url list for export.

Создание карты сайт с gsitecrawler

Перед вами откроется вот такой списочек.

Создание карты сайт с gsitecrawler

Дабы не ходить вокруг да около, я выбираю графу «Simple text listing.txt», после чего просто экспортирую уже готовый вариант карты на свой компьютер. Если необходимо - дорабатываю карту.

Собственно на этом все. Ничего сложного нет. Программа просто великолепная, а главное – бесплатная.

В следующих постах я расскажу вам каким программным обеспечением лучше проверять страницы сайта на проиндексированность. Советую подписаться на RSS блога и быть в курсе всех событий.

Поделитесь ссылкой на пост в сервисы:

Оцените запись:

Комментарии

Спасибо з софтинку. Сам пользовался htmlweb.ru
Но, скоро его бесплатных мощностей мне хватать не будет, актульненько получилось.

Доброго времени суток. Немного отойду от темы, прошу не расценивать как спам, и хочу предложить Вам участие в моей акции «Меняю 1 постовой на 21 закладку» и получить 21 бесплатную ссылку с 7 трастовых сайтов для 3 страниц вашего блога. Подробнее:
_http://do-ob.ru/2010/02/15/menyayu-1-postovoy-na-21-zakladku/

Я когда делал сателлиты на народе, то пользовался http://www.xml-sitemaps.com . За пару минут получаете карту сайта во всех форматах. Быстро и гарантия индексации в течении недели.

Для WordPress всегда использую связку Google XML Sitemaps + Dagon Design Sitemap Generator. Сапа видит все страницы.

Из последней програмки отметил бы функцию сжатия карты сайта gzip-ом . Все поисковики воспринимают это и грузится быстрее

А каким боком генераторы xml карты, описанные здесь, относятся к sape (как это обещано в предисловии). А вот как загнать в sape 10 000 страниц — я так и не нашел. (((

а ручками уже не модно составлять карту?

Иван, если бы вы читали внимательно пост, то и вопросов бы не задавали насчет того, каким боком тут генераторы. Те генераторы, к вашему сведению, формируют не только xml файлы, но и html, как вам удобно. Ну если не нашли вопрос о том, как загнать 10000 страниц в сапу, то вы не по адресу попали 🙂 . Если бы воспользовались последней программой, то вопросов бы точно не возникло.
flower20, ну я посмотрю как вы на 1000-2000 страниц составите ручками карту сайта. Посмотрим 🙂

gsitecrawler — не самая удобная программа. Но некоторое время пользовался только ей.

Отличный обзор!
Например об онлайн-сервисе не знал, а показался он удобным.
Из десктопных обратите внимание на SiteMap Generetor (wonderwebware.com/sitemap-generator)

Спасибо за наводку, про gsitecrawler не знал, остальными бесплатными давно пользовался
Жаль не везде так удобно — настроил пару плагинов, и вот тебе атмообновляемая карта сайта для людей и пс =)

Хорошая программа, а главное — бесплатная. А для больших сайтов сервис xml-sitemaps действительно не подходит.

А не проще ли использовать плагины к блогу? Хотя в качестве эксперимента попробую и так… 🙂 Спс

эта програма мне не очень нравится у меня есть и получше но я одно время ей пользовался

Да действительно, не знаешь, где найдешь, где потеряешь. Если честно пришел за ссылкой, а нашел генератор. Видимо плохо искал, хотя и на нулиде и на маулнете предлагали сервисы с ограничением или крякнутые проги, которые в реале не работали. Все не знал как сайт с 13000 страниц загнать в сапу. Просто спасибо.

спасибо за статью отличная. Но и комментарии тоже хорошие попробую Google XML Sitemaps + Dagon Design Sitemap Generator.

Люблю вот такие подробные и развернутые посты-уроки с картинками, все понятно даже нубу.

Так уж получилось что у меня все сайтики на Юкозе, и раньше приходилось искать такие сервисы, пока они не ввели новую фичу, чтобы генерировать сайтмап прямо в админке.

Особенно для форумов хорошо, ведь пауки такие штуки любят 🙂

А надо в Sitemap указывать страницы проиндексированные яндексом и гуглем?

Пользуюсь A1 Sitemap Generator правда она платная, но микстурка ее без проблем лечит. Из он-лайн генераторов вот неплохой вариант http://www.freesitemapgenerator.com 5000 страниц max. Как карта сгенерируеться присылают на емеил. Единственный минус народу уйма, приходиться ждать очереди неделями.

для вордпресса плагины «Google XML Sitemaps» и «Dagon Design Sitemap Generator» — это классика! мастхев на блоге.

PS: а что за иллюстрация самая первая? напоминает mindmaps — я таким увлекаюсь но не видел подобного.

Что-то у меня не получилось((((

А все разобрался)))))) Спасибо автору

Пользуюсь A1 Sitemap Generator правда она платная, но микстурка ее без проблем лечит. Из он-лайн генераторов вот неплохой вариант http://www.freesitemapgenerator.com 5000 страниц max. Как карта сгенерируеться присылают на емеил. Единственный минус народу уйма, приходиться http://all-cs-samara.ucoz.com/ ждать очереди неделями.

http://www.freesitemapgenerator.com спасибо сейчас опробую

Если страниц 10 000 или больше и часто добавляются, что тогда

Прокомментировать

(обязательно)

(обязательно)