https://lavrynenko.com/kak-parsit-robots-txt-s-pomoshhyu-google-docs/
Как парсить robots.txt с помощью Google Docs?