allow : LinkExtractor对象最重要的参数之一,这是一个正则表达式,必须要匹配这个正则表达式(或正则表达式列表)的URL才会被提取,如果没有给出(或为空), 它会匹配所有的链接?
deny : 用法同allow,只不过与这个正则表达式匹配的URL不会被提取)?它的优先级高于 allow 的参数,如果没有给出(或None), 将不排除任何链接?
来源: http://www.bubuko.com/infodetail-1970596.html