v1.52 : option de suppression d'articles statiques
Voici les arguments acceptés par le crawler :
- del=1 : supprime le "cache" du crawler (vide la table).Utile pour relancer un crawl sans attendre 60 minutes.
- drop=1 : supprime complétement la table. Un peu plus efficace que del=1.
- supprimer_site_statique=1 : supprime les fichiers statiques du site, pour un gros reset. Plus efficace que del ou drop. ATTENTION VOIR AVEC SYLVAIN AVANT D'UTILISER CETTE OPTION. En effet, on peut perdre les pages profondes du site.
- nb=10 : va stopper le crawler après 10 crawls. Utile pour lire un message d'erreur ou autre sans attendre 3 minutes de chargement. Si on met pas nb=, ça crawl 2000 URL.
- debug=1 : affiche de l'aide au débuguage
- dont_copy_pictures=1 : Lance le crawler sans copier les images du dossier "upload"
- copy_all_pictures=1 : En cas de bug sur les images, utiliser cet argument. Le crawl va être plus long, mais toutes les images du dossier "upload" seront copiées.
- info=1 : affiche des infos sur le crawler, sans exécuter le crawl
- lancer le crawler de façon normale, sans option
- gerer_htpasswd=non Le crawler ne créera pas de fichier htpasswd
- gerer_htaccess_www=non Le crawler ne créera pas de fichier htaccess pour rediriger le CP vers www, ou non-www.
- gerer_htaccess_www=oui Le crawler va forcer la création du htaccess, même s'il faut écraser l'ancien htaccess. Si pas d'argument, le crawler créera le htaccess uniquement s'il n'y en a pas.
- Aller sur le site statique
- crawler_market.php?url=xxx&nb=1 => lancer seulement une url
- crawler_market.php?url=xxx&supprimer_page_statique_si_404=1&nb=1 => permet de supprimer la page statique si elle a été supprimée de wordpress
- crawler_market.php?url=xxx&nb=1&redirect_to_url=1 => le crawler redirigera vers l'URL statique quand il aura terminé
Gdoc d'aide au débugage, à disposition de toute l'équipe
tabledusite = wp_barbizontourismefr
bddhostdusite = mortelscvsopmzs.mysql.db
bddnamedusite = mortelscvsopmzs
bdduserdusite = mortelscvsopmzs
bddpassworddusite = xxx
tabledusite = wp_barbizontourismefr
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/categorie/vacances-tourisme/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/categorie/conseils-voyage/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/categorie/bons-plans/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/categorie/logement-et-camping/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/contact/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/comment-senregistrer-a-laeroport/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/quels-sont-les-prises-en-charge-des-agences-de-voyage/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/lidee-lumineuse-de-lete-sejourner-dans-un-camping-4-etoiles-a-vias-plage-dans-lherault/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/les-vacances-au-camping-paradis-de-gourdon/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/les-dossiers-a-preparer-pour-un-voyage-vers-les-royaumes-unis/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/hebergement-lors-de-vacances-dans-le-tarn-pensez-aux-gites/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/dans-quel-camping-aller-pour-les-vacances-dete/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/que-faut-il-emmener-lors-dune-randonnee/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/les-plus-belles-villes-a-visiter-en-france/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/les-bienfaits-des-vacances-sur-le-stress/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/ou-faire-du-canoe-en-france/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/animal-de-compagnie-en-voyage-informations-utiles/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/vacances-naturistes-comment-les-reussir/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/assurance-voyage-les-exclusions-retenues/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/ou-sejourner-pendant-un-voyage-a-barcelone/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/page/2/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/feed/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/comments/feed/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-includes/css/dist/block-library/style.min.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/plugins/contact-form-7/includes/css/styles.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/plugins/translatepress-multilingual/assets/css/trp-floater-language-switcher.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/plugins/translatepress-multilingual/assets/css/trp-language-switcher.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/themes/blossom-pin/css/owl.carousel.min.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/themes/blossom-pin/style.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-content/themes/blossom-pinit/style.css
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/wp-json/
-------------------------------------------------
on va crawler URL : http://www.barbizon-tourisme.fr/wp372991b2d03edd6/xmlrpc.php