内向火车

文章
5
资源
0
加入时间
2年10月17天
怎么合理控制爬虫速度

怎么合理控制爬虫速度

爬虫的工作人员都知道，爬虫的速度并不是越快越好。如果爬虫采集的速度越快，就越容易被发现，也就越容易被封IP。那么，怎么合理控制爬虫速度呢？一般情况，可以对每个页面抓取之间的延迟设置为最大来控制频率，这样不会给服务器造成负担，也不会因访问频繁被封。但这种方法会导致抓取的速度较慢，如果有大量抓取任务，会严重影响效率。有一种自然的解决方法就是等待时间动态变化，最小的时间间隔减去网页读取的时间，这样无论在...
爬虫 2024-07-23
JavaScript深入理解js闭包

JavaScript深入理解js闭包

一、变量的作用域 要理解闭包，首先必须理解Javascript特殊的变量作用域。 变量的作用域无非就是两种：全局变量和局部变量。 Javascript语言的特殊之处，就在于函数内部可以直接读取全局变量。　 var n=999;　　function f1(){　　　　alert(n);　　}　　f1(); // 999另一方面，在函数外部自然无法读取函数内的局部变量。 Js代码 　　f...
JavaScript 2023-12-08
nginx配置ssl安全证书

nginx配置ssl安全证书

0.先天条件配置完之后一定要重启nginx1.申请免费的证书　　阿里巴巴，腾讯，便宜SSL..等等2.完成一系列操作之后得到证书文件(这里只要Nginx中的证书)　　3.将这两个文件放置到服务器中　　可以使用FTP方便简单上传　　4.配置nginx的配置文件　　　　在文件中添加一个server{}：配置如下　　server {...
运维 2023-09-09
MATLAB初学第一天3

MATLAB初学第一天3

二维图dt = 1000; t = (0:dt)/dt; %定义时间序列x = sin(2*pi*t); %定义函数plot(t,x) %画图xlabel('时间'); %横坐标ylabel('幅值'); %纵坐标title('正弦函数') %标题hold on可在绘图窗口继续画图，hold off结束dt = 1000; t = (0:dt)/dt; %定义时间序列x = sin(2*pi*t); %定义函数plo.
MATLAB 2023-09-03
hashlimit模块实现分析

hashlimit模块实现分析

免责声明：有些地方没有仔细看，如有错误，不负责任，欢迎指正好久不发贴子了，来骗点积分。1、引言一直用tc来做流控，偶然发现Netfilter有一个名为hashlimit的东东，是基于TBF（令牌桶算法）的简单的流量控制的。例如：QUOTE:iptables -A INPUT -p tcp --dport 22 -m hashlimit
算法 2023-08-29

他的专栏

ASP编程（0）
JavaScript（1）
网站优化（0）
建站经验（0）
CorelDraw教程（0）
算法（1）
MATLAB（1）
运维（1）
爬虫（1）

他的归档

2024年07月（1）
2023年12月（1）
2023年09月（2）
2023年08月（1）

热门文章

1
hashlimit模块实现分析
2
MATLAB初学第一天3
3
nginx配置ssl安全证书
4
JavaScript深入理解js闭包
5
怎么合理控制爬虫速度