…en vue du passage à l’index mobile first au travers des données collectées par OnCrawl Intervenant : Erlé Alberton – Customer Success Manager– OnCrawl

1. L’évolution des crawls
mobile de Google…
…la vue de

2. Luxembourg - 01/02/2018
J’adore que Google detecte vos optimisations Index Mobile First…
ERLEALBERTON
CUSTOMERSUcCESS
manager
10 ans de dev / 5 ans de SEO dont 2 ans
en tant que responsable SEO des
boutiques en ligne Orange et Sosh
spécialiste schema.org
seomonk
ONCRAWLTRAinER
customerclimax
& GOOD IDEAS

3. Luxembourg - 01/02/2018
Plan de vol
1. Comment fonctionne Google
2. Crawl Budget de Google
3. Comment suivre les variations du crawl
4. Best practices d’optimisation
5. Pourquoi utiliser OnCrawl

4. Luxembourg - 01/02/2018
• Google ne peut pas tout crawler tout le temps
• Pour avoir la meilleure réponse il faut connaitre toutes les pages - découverte
• Pour avoir la meilleure réponse il faut la dernière version de la page - indexation
Google Key Insights
Google n’est pas philanthrope,
il doit optimiser ses coûts de traitement…

5. Comment fonctionne Google ?
Google n’est qu’un ensemble d’algorithmes qui sont exécutés sur
des machines consommant de l’énergie… cette consommation
d’énergie à un coût qui doit être optimisé
Le rendu complet d’une page avec JS
coute 10 fois plus qu’un crawl classique !

6. Google consomme annuellement
autant d’énergie que la ville de
San Francisco

7. Luxembourg - 01/02/2018
Crawl Budget
C’est le crédit que Google alloue à
l’ensemble de ses robots pour parcourir
les URLs d’un site web, pour connaitre
que type de bot attaque une page on
utilise le « User-Agent »
Desktop : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mobile : Mozilla/5.0 (Linux ; Android 6.0.1 ; Nexus 5X Build/MMB29P)
AppleWebKit/537.36 (KHTML, comme Gecko) Chrome/41.0.2272.96 Mobile
Safari/537.36 (compatible ; Googlebot/2.1 ; +http://www.google.com/bot.html)

8. Limites de la
Google Search Console
Elle permet de constater des
évolutions dans le comportement de
crawl de Google
Elle compile les données de tous
les bots de Google :/
Elle ne donne pas les pages
crawlées :/
Crawl JS
Pas d’effet sur
les temps de
chargement
BRAVO!

9. Répartition des hits par bot (1 journée / granularité 10min) :
Mediapartners-Google
Adsbot-Google desktop
Googlebot 2.1 desktop
Googlebot 2.1 mobile
Adsbot-Google Mobile

10. Luxembourg - 01/02/2018
Evolution de la répartition des hit Google
bot Mobile sur un site de vente en ligne
Début décembre Crawl du bot Mobile Fin janvier

11. Luxembourg - 01/02/2018
Analyse des lignes traitées par OnCrawl (Mobile vs Desktop)

12. Index Mobile First Crawling :
I think you would probably
recognize it in the log files…

13. Luxembourg - 01/02/2018
THX Johny !

14. Luxembourg - 01/02/2018
Traquer Google avec les fichiers de logs
A chaque fois qu’un visiteur passe sur une page il laisse des traces dans des fichiers de logs
Google est un visiteur (presque) comme un autre il laisse ses traces et nous les analysons

15. Luxembourg - 01/02/2018
Logs Monitoring
Visualiser le comportement des robots
de crawl Mobile vs Desktop
Détecter les catégories les
+ ou – bien misent en valeur
Suivre précisément les visites SEO

16. Luxembourg - 01/02/2018
Logs Monitoring
Crawl behavior
• Suivre les variations de crawls de Google sur chaque
segment du site pour chaque type de bot
• Vérifier que toutes les pages optimisées pour mobile
sont crawlées régulièrement
• S’assurer que les pages non importantes pour Google
ne consomment pas le budget de crawl

17. Luxembourg - 01/02/2018
Logs Monitoring
SEO impact
Vérifier que les visites SEO mobiles arrivent sur les pages
dédiées
Vérifier que toutes les pages optimisée sont visitées
S’assurer que les optimisations profitent au trafic SEO

18. Luxembourg - 01/02/2018
Catégoriser les pages pour suivre les variations de crawl
Permet de détecter les parties du site propices à l’exploration des bots
Google – suivi de la fréquence de crawl par type de pages

19. Luxembourg - 01/02/2018
Best practices
Une bonne optimisation est une
modification qui va maximiser l’appétit
des robots, elle doit être tournée vers
la réduction maximale des coûts en
électricité de Google

20. Luxembourg - 01/02/2018
Responsive design
le même code HTML est affiché sur la
même URL quel que soit l'appareil
utilisé : ordinateur, tablette, mobile ou
navigateur non visuel
Toutefois, l'affichage peut être
différent selon la taille de l'écran.
Le responsive design est le modèle
que Google recommande Favoriser l’UX en adaptant l’UI
des éléments de navigation et la présentation

21. Luxembourg - 01/02/2018
Dynamique serving
Technique qui permet un affichage optimisé pour
chaque device sur la même url
votre contenu s’adapte à la fenêtre d’affichage
votre layout (code source) est optimisé sur mobile pour
permettre une expérience adaptée à la taille de l’écran
Le Dynamique serving est le modèle le plus optimisé
Gain de performance maximal en réduisant les
poids des ressources (JS, CSS, Images)

22. Luxembourg - 01/02/2018
Crawl des ressources
Google cherche à faire un rendu
de la page
pour cela il va télécharger toutes les
ressources d’une page et l’afficher
comme le ferait un utilisateur

23. Luxembourg - 01/02/2018

24. Luxembourg - 01/02/2018
Test and learn!
Google fourni des outils pour tester vos
affichages. Ils sont basés sur les mêmes
algorithmes de rendu que ceux utilisés par les
Indexeurs Mobile-first
Traiter un priorité les erreurs, les warnings
pourront être priorisés en fonction de
l’impact sur l’expérience utilisateur
Même les pages de Google
ont des ressources bloquées :)
https://search.google.com/test/mobile-friendly?hl=fr

25. Luxembourg - 01/02/2018
Comment étudier
les variations du crawl ?
L’analyse des logs serveur et le croisement des données tierces
permettent de détecter les pain points à l’exploration des bots
dédiés à l’Index Mobile First de Google
Quels sont les facteurs déclencheurs du crawl de Google?
Quels sont les facteurs gagnants à privilégier ?

26. Luxembourg - 01/02/2018
Croiser les données Google Analytics, Logs,
Google Search Console, Semrush
permet d’ouvrir la boite noire des algorithmes de Google

27. Luxembourg - 01/02/2018
Payload
Analyser le temps de chargement
pour déterminer le temps maximum
de réponse du serveur

28. Luxembourg - 01/02/2018
Exploration Sanity
Vérifier les Status code
retournés par le serveur durant le crawl de Google
Suivre les Load time
l’information sur le temps de réponse serveur TTFB et/ou
TTLB est un des axes majeurs d’optimisation pour le
mobile

29. Luxembourg - 01/02/2018
L’impact de la
profondeur
Plus une page est profonde dans
l’architecture, moins Google s’y
intéresse, moins elle est à jour
dans son index, moins elle
génère de visites

30. Luxembourg - 01/02/2018
L’impact du
duplicate content
Google dépense beaucoup d’énergie
pour choisir la meilleure page à indexer
le crawl de vos contenus dupliquées
est une perte de répartition de Budget
de Crawl

31. Luxembourg - 01/02/2018
La problématique des liens

32. Luxembourg - 01/02/2018
Analyse du
maillage interne
Plus une page reçoit de puissance
par les liens, plus elle est visitée
par Google
Vérifier le transfert de popularité
L’InRank créé par OnCrawl permet de
comprendre l’architecture du site

33. Luxembourg - 01/02/2018
Analyse du
maillage interne
Plus une page reçoit de puissance
par les liens, plus elle est visitée
par Google
Vérifier le transfert de popularité
L’InRank créé par OnCrawl permet de
comprendre l’architecture du site

34. Luxembourg - 01/02/2018
Analyse du
maillage interne
Plus une page reçoit de puissance
par les liens, plus elle est visitée
par Google
Vérifier le transfert de popularité
L’InRank créé par OnCrawl permet de
comprendre l’architecture du site

35. Luxembourg - 01/02/2018
Vérifier l’intégration du balisage schema.org
Les données structurées
forment une nouvelle
couche sémantique à
votre contenu
Ces données sont plus
simples à comprendre pour
les moteurs et de plus en
plus exploitées par Google
notamment sur Mobile

36. Luxembourg - 01/02/2018
Impact sur les
rankings
En croisant les données de Log avec
celles de la Google Search Console
dans OnCrawl, vous pouvez
déterminer les facteurs de succès de
vos pages et connaitre les fréquences
de crawl par métrique :
Positions, CTR, profondeur, nombre de
liens entrants, nombre de mots, temps de
chargement…

37. Luxembourg - 01/02/2018
Impact sur les
visites
Dans les logs nous pouvons tracer toutes
les visites SEO (pas les sessions GA)
L’impact du nombre de mots ou du nombre
de liens sur le trafic généré est simplement
accessible par le croisement des données de
Crawl et les Logs

38. Luxembourg - 01/02/2018

39. Luxembourg - 01/02/2018
The vision of the founders is to work very hard
on the data platform to make it simple and scalable,
so that everyone can work on technical SEO with accuracy

40. www.oncrawl.comwww.oncrawl.com
We help Ecommerce & Online media take
better SEO decisions and grow their revenues
By providing access to the Most Advanced SEO Software
Semantic
SEO Crawler
Comprehensive
Log Analyser
API & Platform
to combined all
website’s data

41. +600 Happy Customers

42. Luxembourg - 01/02/2018
Testez OnCrawl avec un essai
gratuit de 14 jours

43. Luxembourg - 01/02/2018
A Vous de Jouer !
Vous avez les clés pour comprendre quels
sont les points importants de l’optimisation
pour l’Index Mobile First

44. Des questions ?