炙热蜻蜓

文章
6
资源
0
加入时间
2年10月17天
提高scrapy的爬取速度

提高scrapy的爬取速度

爬取大量数据的时候，爬取速度显著影响着爬取用时，总结一下我在使用scrapy的时候用来提升爬取速度的方法。在settings.py中设置如下参数：DOWNLOAD_DELAY = 0CONCURRENT_REQUESTS = 100CONCURRENT_REQUESTS_PER_DOMAIN = 100CONCURRENT_REQUESTS_PER_IP = 100COOKIES_EN...
爬虫 2024-07-23
Salesforce 代码锁定记录

Salesforce 代码锁定记录

需要在“流程自动设置“中 选择在Apex 中启用记录锁定和解锁复选框global class LockAndUnlock { //订单锁定 WebService static void lock(Id OrderId){ List<MicroPowderOrder__c> orderList = [Select Id from MicroPowderOrder_...
代码锁定记录 2023-10-12
nfs 配置的简单例子

nfs 配置的简单例子

最近配置了一台nfs主机，使用中有几点心得，写下来备忘 一是如果server和client如果都处于同一内网，可以使用udp协议，速度能快一些。
RedHat/Centos 2022-04-09

他的专栏

PHP编程（0）
Unix/BSD（1）
Flash教程（1）
RedHat/Centos（1）
代码锁定记录（1）
android开发小栈（1）
爬虫（1）

他的归档

2024年07月（1）
2023年10月（2）
2022年04月（3）

热门文章

1
FreeBSD在安装ports时时间过长的解决方法
2
Flash AS3.0实例教程：鼠标感应发光的文字旋转效果
3
nfs 配置的简单例子
4
Salesforce 代码锁定记录
5
使用Gradle构建Android项目的一些自定义配置
6
提高scrapy的爬取速度