Ab 01.09.: Google schafft Noindex und Nofollow in der Robots.txt ab Die Robots.txt ist seit über zwei Jahrzehnten der inoffizielle Standard, der Suchmaschinen-Crawlern vorgibt, welche Teile einer Website durchsucht und welche ignoriert werden. Google kündigte nun an, das Robots-Exklusion-Standard-Protokoll (REP) zu einem richtigen Internet-Standard zu machen. Im Zuge dessen sollen nun aber auch bisher angewandte […]
Der Beitrag Kein Noindex in der Robots.txt mehr? erschien zuerst auf SEO Küche.