反爬虫必备基础知识点
1.为什么要反爬虫？因为大家都去爬，服务器会吃不消。严重时会造成 DDos攻击。有位网友的比喻十分形象：甲乙丙丁都在食堂打饭，食堂就一个窗口，甲饭没打完，后面的人就得等着。如果甲帮他们整个年级打饭，那么食堂阿姨就累瘫了（服务器崩溃）。乙丙丁不仅得等，而且等到了也没用。阿姨说我累死了，卖不动了，这饭今天你吃不了了。其实，说简单点，主要原因有以下两点：(1)、爬虫占总PV比例较高，这样浪费钱（...
