网站建设
游戏运营
视频娱乐
企业上云
智能家居
制造业升级
大数据营销
外贸电商
技术解析
服务器是 Centos 6 , 爬虫运行的时候终端上操作就会非常卡。检查过 cpu ,内存都不高,磁盘读写也不高。 然后通过more /proc/sys/fs/file-nr看,文件的打开数也才 1900
more /proc/sys/fs/file-nr
同样的程序在我的 mac 上跑就没有这些现象。