Spazio ai contenuti di valore
Un crawler efficiente, l'intelligenza artificiale correttamente applicata, un valido motore di ricerca interno ed una buona grafica ci aiuteranno a raggiungere il nostro scopo.
Per l'attività di "crawling" e di "indexing", utilizziamo l'user agent "hstar-bot", proveniente dall'indirizzo IP 209.227.230.63 ed individuabile nei log di accesso con la dicitura "Mozilla/5.0 (compatible; hstar-bot; https://hstar.it)". Il nostro amico hstar-bot segue le direttive presenti su robots.txt e pertanto non segue i percorsi a lui preclusi.
Per informazioni: paolo@hstar.it