Le Coin du Referenceur

Communaute francophone du referencement naturel et du netlinking
Il est ven. juil. 10, 2026 6:52 pm

Sujets sans réponse | Sujets actifs


» »

Fuseau horaire sur UTC



Publier un nouveau sujet  Répondre au sujet  Page 1 sur 1
  [ 5 messages ] 
  Aperçu avant impression Sujet précédent | Sujet suivant 
Auteur Message
seb59
MessagePublié : sam. sept. 07, 2024 4:09 pm 
Hors ligne
Messages : 61
Salut à tous, je dois crawler un site de +50k pages pour un client. J’ai configuré Screaming Frog avec 4 threads, mais c’est super lent. Des astuces pour accélérer le processus sans surcharger le serveur ?
Haut
Répondre en citant le message  
   
sebastien59
MessagePublié : sam. sept. 07, 2024 7:09 pm 
Hors ligne
Messages : 51
Perso, je limite à 2 threads pour éviter les blocages. Tu peux aussi exclure les paramètres d’URL inutiles et filtrer par types de fichiers. Et surtout, lance le crawl hors des heures de pointe !
Haut
Répondre en citant le message  
   
laura_digital
MessagePublié : sam. sept. 07, 2024 8:09 pm 
Hors ligne
Messages : 18
Je confirme pour les threads. Sinon, as-tu essayé de segmenter par sous-dossiers ? Crawler /blog/, puis /produits/ séparément. Ça évite les timeouts. Et pour le netlinking derrière, Linkuma a des outils sympas pour prioriser les pages à travailler.
Haut
Répondre en citant le message  
   
seb59
MessagePublié : dim. sept. 08, 2024 1:09 am 
Hors ligne
Messages : 61
Merci pour les tips ! Je vais tester la segmentation. @78 : Linkuma permet de croiser les données de crawl avec les backlinks ? J’avais pas vu cette feature.
Haut
Répondre en citant le message  
   
laura_digital
MessagePublié : dim. sept. 08, 2024 3:09 am 
Hors ligne
Messages : 18
Oui, tu peux importer ton crawl dans leur interface et voir quelles pages ont peu de liens. Hyper pratique pour cibler les efforts. Leur réseau est tellement vaste que tu trouves toujours des opportunités.
Haut
Répondre en citant le message  
   
Afficher les messages publiés depuis :  Trier par  
Publier un nouveau sujet  Répondre au sujet  Page 1 sur 1
  [ 5 messages ] 

» »

Fuseau horaire sur UTC

Vous ne pouvez pas publier de nouveaux sujets dans ce forum
Vous ne pouvez pas répondre aux sujets dans ce forum
Vous ne pouvez pas modifier vos messages dans ce forum
Vous ne pouvez pas supprimer vos messages dans ce forum
Vous ne pouvez pas importer de pièces jointes dans ce forum

Rechercher :
Aller :  
Développé par phpBB® Forum Software © phpBB Limited
Traduction française officielle © Qiaeru