Contesto
Un altro sito ripubblica le tue schede prodotto. I prezzi vengono aggiornati quasi subito e il catalogo riceve molte visite che non portano acquisti. Potrebbe esserci uno scraper: un programma che raccoglie pagine o dati in modo ripetuto.
Prima di intervenire, separa queste richieste da quelle dei motori di ricerca e delle integrazioni che usi per vendere.
Guarda come viene percorso il catalogo
Cerca richieste che attraversano molti prodotti in sequenza, interrogano continuamente i prezzi o generano combinazioni di filtri senza un normale percorso di navigazione.
Su Magento controlla anche gli accessi ai dati attraverso le API effettivamente esposte. Proteggere soltanto le pagine HTML può lasciare aperto un altro percorso di raccolta.
Limita il comportamento che crea il danno
Con il tecnico, imposta limiti sui percorsi più costosi e controlli per le sequenze anomale. Verifica separatamente crawler riconosciuti, feed e servizi commerciali autorizzati.
Il file robots.txt comunica indicazioni ai crawler che le rispettano; non impedisce tecnicamente l'accesso a uno scraper. Lo chiarisce la documentazione Google. Per i dati riservati servono controlli di accesso reali.
Controlla anche l'esperienza di acquisto
Dopo ogni modifica, prova ricerca, filtri e schede prodotto. Se un controllo ostacola i clienti o i crawler utili, può costare più del traffico che blocca.
Misura richieste al catalogo, tempi di risposta e acquisti completati. Conserva gli esempi delle copie trovate: aiutano a capire quali informazioni vengono raccolte e dove concentrare la protezione.