Яндекс выложил видеоролик о robot.txt. После скандала, связанного с индексацией приватных данных, Яндекс постарался максимально обезопасить своих пользователей. Разработчики сервиса внесли изменения в Яндекс. Метрику, позволяющие блокировать доступ к найденным поисковиком ссылкам. О том, как работает файл robot.txt был написан подробный пост с пояснениями.
Но видимо этого показалось мало, и спустя время, представители Яндекса выпустили видеоролик, рассказывающий о том, что такое robot.txt, каков принцип его работы и как с помощью него можно предохраняться.
На примере «коробки с секретами», Яндекс показал, как robot.txt предупреждает поисковую систему о том, что не стоит заглядывать в эту «коробку», если же вы доверили раскрутку сайта профессионалам, то заботы об этом файле лягут на их плечи, а вы будете спать спокойно. Акцент в ролике делается на то, что robot.txt рекомендует не индексировать секретные данные, но не закрывает полностью доступ. В любом случае, ролик содержит много полезной информации, например – как создать файл robot.txt и куда его установить.