Google is recent gestart met de uitrol van Mobile First Indexing, vroeger crawled de bot in eerste plaats op desktop websites en dan vervolgens op andere. Het grote probleem hierbij was dat de mobiele websites met een andere vorm van content en of informatie vertoont dan op de desktop versie, werden deze vaak onterecht afgestraft. Nu tracht men dit probleem te verhelpen door de crawling omgekeerd toe te passen dus eerst de mobiele websites en dan in een latere fase de desktop websites.