紧张大米

文章
7
资源
0
加入时间
2年10月17天

解决Scrapy性能问题——案例二(含有阻塞的代码)

症状:系统非常慢,与期望的相差很大,并且当你修改CONCURRENT_REQUESTS的值的时候,速度并没有发生变化。下载器看起来几乎是空的(比CONCURRENT_REQUESTS的值要小),scraper中只有少量一些Response对象。示例:你可以使用这两个设置项(爬虫代码见这里):SPEED_SPIDER_BLOCKING_DELAY和SPEED_PIPELINE_BLOCKING_DEL

LeetCode 10 正则表达式匹配 二维dp

// 这题能知道状态是怎么定义:// 常规套路 dp[i][j] 表示s串前[0,i]与p串前[0,j]匹配结果// 但状态不知如何跳转:// 但有一种跳转一定知道, 那就是当 s[i] == p[j] 时即:// s[i] == p[j] || p[j] == '.' 时, 毫无疑问// dp[i][j] == dp[i - 1][j - 1]// 当s[i] != p[j]时 ...