Un générateur de sitemap qui crawle votre site Web

J'étais en train de terminer un script ruby qui construit un sitemap pour les gandi blog, et lors de la recherche de la spécification du sitemap xml je suis tombé dessus ce générateur de sitemap xml. Donc le voici :

https://www.xml-sitemaps.com/

Il fait son boulot correctement, mais cependant limité à 500 urls, pour que vos pages profondes soient présentes dans le sitemap il faut que des liens pointent vers celle-ci.

Page A ---lien---> Page B ---lien---> Page C

Ici si la page A est votre page d'accueil, la page C sera crawlée (via la page B) et donc sera présente dans le sitemap.xml !