如何指定抓取的权限认证方式？

在 robots.txt 文件中，可以使用 Auth-directive 指令来指定爬虫进行权限认证的方式。例如，”Auth-directive: digest” 将告诉爬虫使用 Digest 认证方式进行权限认证。

Auth-directive（也称为 Auth 指令）是一个用于控制搜索引擎蜘蛛（爬虫）在抓取网页时需要进行身份验证的指令。然而，目前并没有公开的HTTP标准支持Auth-directive指令。因此，大多数搜索引擎蜘蛛不支持 Auth-directive 指令。

虽然没有具体的搜索引擎列表，但一般情况下，常见搜索引擎的爬虫如 Googlebot、Bingbot、Baiduspider 等也不支持 Auth-directive 指令。这些搜索引擎一般是通过访问公开可见的网页来收集信息，而不依赖特定的身份验证指令。

如果你需要对搜索引擎蜘蛛进行身份验证或访问控制，通常的做法是通过其他方法，比如使用 robots.txt 文件来控制对网页的抓取和访问权限，或使用网站服务器的访问控制功能（如.htaccess文件）进行身份验证或IP限制。

请注意，搜索引擎的爬虫行为可能会随时间而变化，因此建议查阅各个搜索引擎的官方文档或相关资源以获取最新的信息和支持情况。