Kiểm tra URL có bị chặn bởi Robots.txt hay không?

File robots.txt là một trong những file quyền lực nhất trên website nó như một...