Markdown è un linguaggio leggero, di solo testo, facilmente leggibile sia dagli esseri umani che dalle macchine. Una delle più recenti tattiche di visibilità della ricerca è quella di fornire una versione Markdown delle pagine web ai bot di intelligenza artificiale generativa. L’obiettivo è assistere i bot nel recupero del contenuto riducendo le risorse di scansione, incoraggiandoli così ad accedere alla pagina.
Ho visto test isolati condotti dagli ottimizzatori di ricerca che mostrano un aumento delle visite da parte dei bot AI dopo Markdown, sebbene nessuno si sia tradotto in una migliore visibilità. Alcuni strumenti standardizzati, come Quello di Cloudflaresemplifica l’implementazione di Markdown.
Offrire versioni separate di una pagina a persone e bot non è una novità. Chiamato “occultamento”, la tattica è da tempo considerata spam dal Search Central di Google linee guida.
Lo scenario dell’intelligenza artificiale è diverso, tuttavia, perché non è un tentativo di manipolare gli algoritmi, ma piuttosto di rendere più semplice per i bot l’accesso e la lettura di una pagina.
Efficace?
Ciò, tuttavia, non rende la tattica efficace. Pensaci attentamente prima di implementarlo, per i seguenti motivi.
- Funzionalità. La versione Markdown di una pagina potrebbe non funzionare correttamente. I pulsanti, in particolare, potrebbero guastarsi.
- Architettura. Le pagine di markdown possono perdere elementi essenziali, come piè di pagina, intestazione, collegamenti interni (“prodotti correlati”) e recensioni generate dagli utenti tramite fornitori di terze parti. L’effetto è quello di rimuovere il contesto critico, che funge da segnale di fiducia per i modelli linguistici di grandi dimensioni.
- Abuso. Se la tattica Markdown diventasse mainstream, i siti inevitabilmente inietterebbero dati di prodotto, istruzioni o altri elementi unici solo per i robot AI.
Creare spesso pagine uniche per i bot diluisce i segnali essenzialicome autorità di collegamento e branding. Un approccio decisamente migliore è sempre stato quello di creare siti che siano ugualmente amichevoli sia per gli esseri umani che per i bot.
Inoltre, l’obiettivo degli agenti LLM è interagire con il web come fanno gli esseri umani. Servire versioni diverse non serve a nulla.
Rappresentanti di Google e Bing ha fatto eco a questo sentimento qualche settimana fa. John Mueller è l’analista di ricerca senior di Google:
Gli LLM si sono formati su – lettura e analisi – di normali pagine web sin dall’inizio, sembra un dato di fatto che non abbiano problemi a gestire l’HTML. Perché dovrebbero voler vedere una pagina che nessun utente vede?
Fabrice Canel è il principale product manager di Bing:
… vuoi davvero raddoppiare il caricamento strisciato? Effettueremo comunque la scansione per verificare la somiglianza. Le versioni non utente (AJAX scansionabile e simili) sono spesso trascurate, danneggiate. Gli occhi umani aiutano a correggere i contenuti visualizzati dalle persone e dai bot.
