如何指定抓取的Cookie處理方式？

在robots.txt檔案中，可以使用Cookie-directive指令來指定爬蟲處理Cookie的方式。例如，”Cookie-directive: ignore”將告訴爬蟲忽略Cookie的處理。