À ce stade, vous avez terminé la création de votre première tâche de scraping et vous savez comment l'exécuter pour obtenir vos données cibles. Passons à l'étape suivante et découvrons comment vous pouvez rendre vos routines de scraping quotidiennes plus efficaces et performantes grâce aux fonctionnalités suivantes :
1. Programmation des tâches
Si vous prévoyez d'extraire des données régulièrement, la programmation des tâches est exactement ce qu'il vous faut et vous fera gagner beaucoup de temps. Vous pouvez programmer votre tâche pour qu'elle s'exécute une seule fois, à intervalles réguliers, ou même qu'elle s'exécute de manière répétée, par exemple toutes les 1 minute, 5 minutes, 10 minutes ou 30 minutes.
ÉTAPE 1.
Trouvez votre tâche sur le Tableau de bord, puis cliquez sur Non configuré dans la colonne Prochaine exécution. La première option concerne les programmations sur le cloud, tandis que la deuxième concerne les programmations locales.
ÉTAPE 2.
Choisissez la fréquence à laquelle vous souhaitez exécuter la tâche.
ÉTAPE 3.
Pour les extractions de données récurrentes, sélectionnez le jour de la semaine/le jour du mois et l'heure de la journée pour exécuter votre tâche.
Pour les extractions de données répétées, sélectionnez l'intervalle de temps souhaité.
ÉTAPE 4.
Vous pouvez également enregistrer les paramètres pour une utilisation ultérieure. Donnez un nom à ces paramètres et cliquez sur Enregistrer. Ainsi, vous pourrez toujours sélectionner les paramètres enregistrés et les appliquer directement à toute autre tâche.
ÉTAPE 5.
Une fois tout configuré, cliquez sur Démarrer pour commencer à exécuter la tâche selon le planning immédiatement.
ÉTAPE 6.
Lorsqu'une tâche est programmée, vous verrez l'heure de la prochaine exécution sur le tableau de bord.
Vous pouvez facilement l'activer ou le désactiver en cliquant sur l'heure de la prochaine exécution sur le tableau de bord. De là, vous pouvez choisir Démarrer ou Arrêter.
2. Auto-exportation des données (pour les données Cloud)
L'exportation des données vers la base de données peut également être automatisée et programmée. Si vous devez exporter des données vers vos bases de données régulièrement, la planification de l'exportation des données vous fera économiser énormément de travail.
ÉTAPE 1.
Chargez les données cloud pour votre tâche.
ÉTAPE 2.
Cliquez sur Exporter des données
ÉTAPE 3.
Cliquez sur Exporter vers une base de données, puis sélectionnez le type de base de données dont vous disposez.
ÉTAPE 4.
Complétez les informations pour vous connecter à votre base de données.
ÉTAPE 5.
Une fois le processus terminé, vous pouvez trouver vos tâches d'exportation automatique dans l'outil d'exportation automatique de base de données.
3. Connect via API
Avec l'API Octoparse, vous pouvez exécuter des tâches de scraping, récupérer les données extraites, et même modifier vos tâches de manière programmatique en les coordonnant avec votre application.
Consultez la documentation de l'API pour plus de détails.
4. Connect via Zapier
Vous pouvez connecter les données extraites avec d'autres applications (par exemple, Google Drive, Google Sheets, Dropbox) facilement sans coder en utilisant Zapier. Consultez ceci pour plus de détails : Comment connecter Octoparse avec Zapier.
Continuez à Leçon 7: Allez-y ! Créez votre première tâche !