我看到这篇文章使抓取抓取任何网站不受域限制。

有没有更好的方法，例如在允许的domains变量中使用正则表达式，例如-

allowed_domains = ["*"]

我希望除了破解Scrapy框架之外，还有其他方法可以做到这一点。