Создаем карту сайта с большим количеством страниц в один клик
Бывают случаи, когда необходимо добавить сайт с большим количеством страниц в известную биржу ссылок sape. Одно дело, когда страниц не много и сайт статичный, тогда особых проблем с нахождением всех страниц роботом биржи не возникает. А вот если сайт на CMS, плюс ко всему на нем множество страниц, возникает небольшая проблемка.
Такую проблему решить не составляет особого труда, правда, если знать как. Лично я склоняюсь к тому, что оптимальнее всего использовать бесплатные способы создания карты сайта, причем в сети вариантов создания карты сайта более чем предостаточно.
Я рассмотрю в данном посте несколько вариантов создания карты сайта. Ну а вы решите сами, какой наиболее оптимален для вас.
Итак, начнем, пожалуй, с бесплатных сервисов онлайн. Стоит отметить, что некоторые сервисы вводят ограничение на количество просматриваемых страниц. Как правило, это порядка 500-1000 страниц. Снятие ограничений решается с помощью оплаты досканирования страниц.
О первом сервисе, о котором пойдет речь - htmlweb.ru. Преимущества сервиса в том, что он создает уже готовую карту сайта в форматах .xml, .html, .txt. Вам лишь остается ввести url сайта и получить ожидаемый результат.
Ограничение на количество сканированных страниц – 1000. Однако вы всегда можете доплатить требуемую сумму и увеличить этот показатель до 3000.
Сервис отлично справляется со сканированием страниц до 1000, потом начинаются проблемы. По крайней мере, у меня так было и не раз. Я заплатил 3 раза по 11 рублей, чтобы досканировать оставшиеся страницы на сайте, однако сервис просто выдавал следующее «Сканируется, пожалуйста, ждите». И на этом все.
Для маленьких сателлитов и сайтов данный сервис подойдет как-никак кстати. Пробуйте, по результатам можете отписаться в комментариях к посту.
Идем дальше. Весьма неплохой забугорный сервис xml-sitemaps.com, который формирует несколько вариантов карты вашего сайта: XML, HTML, Text Format. Как говорится, выбирайте тот вариант, который вам по душе.
В отличие от первого сервиса, здесь меньший лимит индексации страниц – 500. За индексирование большего количества страниц вам придется заплатить. Сколько? Всего ничего - $19.99.
Естественно, наш бедный вебмастер просто не в состоянии заплатить такую сумму, поэтому я советую прочитать о третьем варианте создания карты сайта.
Ну а теперь о самой продвинутой программе, с помощью которой все остальные сервисы просто стоят и курят в сторонке. Программа эта называется – gsitecrawler. Главное отличие от конкурентов заключается в ее бесплатности и бесперебойной работе. Теперь не нужно тратить деньги за воздух! Если программа, представленной мною и не справится с заданием (заглючит, например), то помимо времени вы ничего не теряете.
Дабы не томить вас, переходит непосредственно к делу. Скачиваем программу с официального сайта.
Несмотря на то, что программа на английском языке, я более чем уверен, что вам будет все понятно. А если нет, то я подробно расскажу, куда жать и что делать.
Устанавливаем gsitecrawler на свой компьютер. После установки запускаем программу.
После открытия программы жмем на клавишу «Add new project», так сказать добавляем новый проект. На следующей странице вводим url сайта, для которого будет создаваться карта сайта. В качестве примера я ввел урл своего блога.
После того, как программа проверить, доступен ли ваш сайт. Лично я не снимаю галочки, оставляю как есть и перехожу к третьему шагу.
На третьем шаге подготовки проекта вам предлагают загрузить файл с картой сайта на хостинг посредством ftp. Я пропускаю данную опцию, но если вы желаете, можете воспользоваться ей.
И, последний, самый интересный момент. Здесь вам предложат пройтись по robots.txt, проверить информацию о страницах, которые не существуют, импортировать известные страницы поисковой системе Google, ну и, запустить выполнение задания прямо сейчас. Лично я пропускаю вариант с галочкой robots.txt только в том случае, если у меня в нем не стоят ограничения на индексацию ссылок, тегов и пр.
Запускаем выполнение задания простой кнопкой Finish и идем на кухню выпить чашечку кофе.
После того, как программа закончит с созданием карты, нам остается экспортировать ее на компьютер. Для этого переходим во вкладку Url list – Generate – Url list for export.
Перед вами откроется вот такой списочек.
Дабы не ходить вокруг да около, я выбираю графу «Simple text listing.txt», после чего просто экспортирую уже готовый вариант карты на свой компьютер. Если необходимо - дорабатываю карту.
Собственно на этом все. Ничего сложного нет. Программа просто великолепная, а главное – бесплатная.
В следующих постах я расскажу вам каким программным обеспечением лучше проверять страницы сайта на проиндексированность. Советую подписаться на
Поделитесь ссылкой на пост в сервисы:
Оцените запись:
Комментарии
Доброго времени суток. Немного отойду от темы, прошу не расценивать как спам, и хочу предложить Вам участие в моей акции «Меняю 1 постовой на 21 закладку» и получить 21 бесплатную ссылку с 7 трастовых сайтов для 3 страниц вашего блога. Подробнее:
_http://do-ob.ru/2010/02/15/menyayu-1-postovoy-na-21-zakladku/
Я когда делал сателлиты на народе, то пользовался
Для WordPress всегда использую связку Google XML Sitemaps + Dagon Design Sitemap Generator. Сапа видит все страницы.
Из последней програмки отметил бы функцию сжатия карты сайта gzip-ом . Все поисковики воспринимают это и грузится быстрее
А каким боком генераторы xml карты, описанные здесь, относятся к sape (как это обещано в предисловии). А вот как загнать в sape 10 000 страниц — я так и не нашел. (((
Иван, если бы вы читали внимательно пост, то и вопросов бы не задавали насчет того, каким боком тут генераторы. Те генераторы, к вашему сведению, формируют не только xml файлы, но и html, как вам удобно. Ну если не нашли вопрос о том, как загнать 10000 страниц в сапу, то вы не по адресу попали 🙂 . Если бы воспользовались последней программой, то вопросов бы точно не возникло.
flower20, ну я посмотрю как вы на 1000-2000 страниц составите ручками карту сайта. Посмотрим 🙂
Отличный обзор!
Например об онлайн-сервисе не знал, а показался он удобным.
Из десктопных обратите внимание на SiteMap Generetor (wonderwebware.com/sitemap-generator)
Спасибо за наводку, про gsitecrawler не знал, остальными бесплатными давно пользовался
Жаль не везде так удобно — настроил пару плагинов, и вот тебе атмообновляемая карта сайта для людей и пс =)
Хорошая программа, а главное — бесплатная. А для больших сайтов сервис xml-sitemaps действительно не подходит.
Да действительно, не знаешь, где найдешь, где потеряешь. Если честно пришел за ссылкой, а нашел генератор. Видимо плохо искал, хотя и на нулиде и на маулнете предлагали сервисы с ограничением или крякнутые проги, которые в реале не работали. Все не знал как сайт с 13000 страниц загнать в сапу. Просто спасибо.
спасибо за статью отличная. Но и комментарии тоже хорошие попробую Google XML Sitemaps + Dagon Design Sitemap Generator.
Люблю вот такие подробные и развернутые посты-уроки с картинками, все понятно даже нубу.
Так уж получилось что у меня все сайтики на Юкозе, и раньше приходилось искать такие сервисы, пока они не ввели новую фичу, чтобы генерировать сайтмап прямо в админке.
Пользуюсь A1 Sitemap Generator правда она платная, но микстурка ее без проблем лечит. Из он-лайн генераторов вот неплохой вариант
для вордпресса плагины «Google XML Sitemaps» и «Dagon Design Sitemap Generator» — это классика! мастхев на блоге.
PS: а что за иллюстрация самая первая? напоминает mindmaps — я таким увлекаюсь но не видел подобного.
Пользуюсь A1 Sitemap Generator правда она платная, но микстурка ее без проблем лечит. Из он-лайн генераторов вот неплохой вариант
Спасибо з софтинку. Сам пользовался htmlweb.ru
Но, скоро его бесплатных мощностей мне хватать не будет, актульненько получилось.