Генератор sitemap GSiteCrawler

[absurdo]

Кодировка сайта какая? UTF-8 ?

Кодировка сайта win1251. GSiteCrawler начал собирать заголовки страниц со второго захода, странно...

 

[fedot]

Из всего серверно и десктопного картогенераторства пока остановился на GSiteCrawler, но не в восторге от скорости... на локальной машине натравил его на 15к сайт и мне стало невыносимо грустно (, а если его запустить на реально действующий сайт с моего дохлого канала, то как минимум можно будет прослезиться. Так что хочется найти что нибудь серверное, хавающее robots.txt и вменяемо съедающее динамические ссылки..

 

[Kremator]

2К страниц минут за сорок. Для небольших сайтов самое оно.

 

[Kanataga]

че то не пойму, ссылка или сам сайт сдох.

 

[AndyFire]

Тоже проблема с заголовками GSiteCrawler - кодировка сайта Win1251, отображает заголовки и дескрипшен в другой кодировке, видимо UTF.
Как победить эту беду кто нибудь знает?

 

[antifilter]

Тоже проблема с заголовками GSiteCrawler - кодировка сайта Win1251, отображает заголовки и дескрипшен в другой кодировке, видимо UTF.
Как победить эту беду кто нибудь знает?

Я кодировку ручками поправляю на нужную в sitemap.
Попробуйте.

 

[yparah]

Если у вас есть шелл-доступ к серверу и Python на сервере (если это *nix - наверняка есть) - лучше используйте Google Sitemap Generator. Быстрый, легкий, просто настроить. Можно по крону вызывать регулярно.

Найти можно здесь:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.