5 idées de business en ligne où utiliser le web scraping

Vous venez peut-être de découvrir les atouts du web scraping en navigant sur le Web et vous êtes enthousiaste à l’idée d’utiliser cette technique pour créer un business en ligne. 

Voici 5 bonnes idées pour tirer parti du Web Scraping en créant une entreprise ou si vous souhaitez faire de l’investissement.

Avant de commencer

En résumé, qu’appelle-t-on le Web Scraping ? Il s’agit d’un moyen d’extraire les données d’un site web de manière automatisée pour les récupérer dans un format plus pratique (généralement un tableau) afin d’analyser ces données (en utilisant les tableaux croisés dynamiques). Le Web Scraping fait gagner un temps considérable et peut s’intégrer dans des processus d’analyse plus complexes.

5 idées de business basés sur le Web Scraping

#1 Créer votre comparateur de produits pour acheter au meilleur prix

Lorsque l’on gère un business, chaque économie peut compter. C’est donc essentiel de savoir trouver le meilleur produit au meilleur prix. Le Web Scraping peut automatiser vos recherches.

Par exemple, avant d’acheter un ou plusieurs smartphones vous pouvez web scraper Amazon ou scraper un site web de smartphones reconditionnés, pour récupérer les données de toutes les fiches produits de smartphones. Pour découvrir les meilleurs deals vous pouvez par exemple comparer :

• Le prix des produits par rapport au nombre d’avis de clients et à la moyenne de ces derniers
• Le prix des produits par rapport aux spécifications techniques de chaque produits (mémoire vive, espace de stockage, résolution de l’écran, qualité max des photos, prise en charge ou non de la 5G…)

En analysant de cette manière les données web scrapées sur Amazon (ou sur un site web de vente de smartphones reconditionnés) vous pourrez trouver le smartphone au prix/modèle le plus compétitif du marché par rapport à vos besoins.

La même méthode peut s’adapter à tout type de produits. Le web scraping vous permettra aussi bien de comparer des smartphones, des voitures d’occasion, des instruments de musique…)

#2 Créer une application dédiée à l’investissement boursier (sans avoir à savoir coder)

Contrairement à la complexité apparente de cette idée de business, créer une application d’investissement en bourse est faisable sans connaissance en développement informatique. Cela nécessite toutefois un bon niveau en tableur (Excel, Google Sheets…)

L’idée est simple et son application se décompose ainsi :

1. Web Sccaper un ou plusieurs sites Web financiers (comme Yahoo Finance, Google Finance, Boursorama, MorningStar ou Quantalys) et collecter les valorisations boursières d’entreprises
2. Récupérer l’information des valeurs ayant subi les plus fortes baisses ou dont la valorisation est passée en dessous un certain seuil.
3. Regrouper ces informations dans un tableur
4. Automatiser l’envoi d’un email d’alerte dès qu’une valeur a subi une baisse importante sur une seule séance (-10% par exemple)

Pour les boursicoteurs confirmés, cette application permet d’être alerté sans avoir à poser des options d’achat sur des valeurs et de ne pas passer votre temps à regarder des graphiques pour vos investissements de moyen ou long terme.

#3 Connaître les nouveaux sujets d’attention (créer votre veille d’actualité automatisée)

En investissement il est enrichissant de s’intéresser aux nouvelles tendances. Mais rester informé requiert un temps considérable. Or, les forums offrent un avantage intéressant par rapport aux sites d’information : ils laissent plus de place pour la discussion et le débat entre les visiteurs actifs).

Il est donc aisé de connaître les sujets les plus populaires d’un forum (on pourrait aussi parler de sujets clivants ou bien qui ouvrent le plus de débats) en se basant sur le nombre de messages postés par les utilisateurs du forum sur un même sujet.

Vous pouvez donc automatiser la veille des sujets populaires d’un forum de la manière suivante :

• web scraper un forum quotidiennement (exemples : le forum “actualité” de jeuxvideos.com, le site anglophone Reddit ou alors un autre forum thématique…) et récupérer le titre des 100 sujets les plus discutés
• importer automatiquement votre webscraping dans un tableur (Google Sheets ou Excel par exemple)
• créer un graphique « nuage de mots clés » à partir des intitulés des sujets les plus populaires

Vous obtenez ainsi un aperçu des sujets d’intérêt de la communauté d’un forum sans avoir à y passer trop de temps. 

#4 Web scraper une base de données de prospects (puis la vendre ou la louer)

Les entrepreneurs ont souvent besoin de faire de la prospection pour développer leur entreprise. Vous pouvez aider les entrepreneur de votre entourage en leur construisant une base de données de prospection, automatiquement grâce au Web Scraping.

Demandez-leur simplement quel « profil » a de la valeur pour eux. De là découle :

• le choix du ou des sites Web à cibler
• la méthode de webscraping la plus adaptée pour collecter les informations

Vous n’avez pas d’entrepreneurs dans votre entourage ? Il existe des sites spécialisés qui mettent en relation des entreprises avec des web scrapeurs qualifiés (on en arrive à l’idée suivante, ci-dessous).

#5 vendre vos services de web scraping sur Internet

Envie de concurrencer DataShaker sur son propre terrain ?

Face aux enjeux de compétitivité vous envisagez peut être de vous former au Web scraping, des techniques les plus simples aux plus avancés.

La technique de web scraping à utiliser varie en fonction du site ciblé, du type et du volume de données à collecter.

Les techniques disponibles de web scraping sont nombreuses et les apprendre demande certains pré-requis (savoir coder dans certains langages informatiques notamment). Attention donc au temps nécessaire pour acquérir les techniques de web scraping.

Si vous pensez qu’il est plus simple de déléguer le web scraping à des experts, contactez-moi !

Crédit photo : @timothycdykes sur unsplash.com