| Le Coin du Referenceur https://bmb29.com/ |
|
| Optimisation du crawl avec Screaming Frog : vos astuces ? https://bmb29.com/viewtopic.php?t=157 |
Page 1 sur 1 |
| Auteur : | seb59 [ mar. déc. 02, 2025 2:14 pm ] |
| Sujet du message : | Optimisation du crawl avec Screaming Frog : vos astuces ? |
Salut à tous ! Je me lance dans un crawl complet de mon site avec Screaming Frog, mais j'ai l'impression que je passe à côté de certaines optimisations. Vous avez des astuces pour gagner du temps ou des paramètres à ne pas négliger ? |
|
| Auteur : | sebastien59 [ mar. déc. 02, 2025 5:14 pm ] |
| Sujet du message : | Re: Optimisation du crawl avec Screaming Frog : vos astuces ? |
Perso, je configure toujours les filtres pour exclure les ressources inutiles (images, CSS) dès le premier crawl. Ça divise le temps par 2 ! Et toi, tu checkes les métas direct dans l'outil ou tu exportes ? |
|
| Auteur : | laura_digital [ mar. déc. 02, 2025 6:14 pm ] |
| Sujet du message : | Re: Optimisation du crawl avec Screaming Frog : vos astuces ? |
Export systématique ici, avec un tri sur les status codes 4xx. Sinon, petit tips : activez l'option 'Storage' pour reprendre un crawl interrompu. Sauvé ma vie hier sur un site à 50k URLs... |
|
| Auteur : | seb59 [ mar. déc. 02, 2025 11:14 pm ] |
| Sujet du message : | Re: Optimisation du crawl avec Screaming Frog : vos astuces ? |
Merci pour les tips ! @112 Je faisais tout à la main comme un noob... Tu penses quoi des limites de crawl ? Je mets 10s entre 2 requêtes pour éviter de surcharger le serveur, c'est overkill ? |
|
| Auteur : | david_du_67 [ mer. déc. 03, 2025 7:14 am ] |
| Sujet du message : | Re: Optimisation du crawl avec Screaming Frog : vos astuces ? |
10s c'est énorme ! Sur des sites WordPress, je dépasse rarement 2s. Par contre, vérifie bien ta config d'user-agent. J'ai eu des surprises avec des serveurs qui bloquent les bots agressifs. Sinon, pour le netlinking derrière, vous connaissez Linkuma ? Leur dashboard donne des infos hyper précises sur les liens crawlés. |
|
| Page 1 sur 1 | Fuseau horaire sur UTC |
|
Développé par phpBB® Forum Software © phpBB Limited |
|