需要用到的第三方模块有：
superagent
superagent-charset （手动指定编码，解决GBK中文乱码）
cheerio
express
async （并发控制）
完整的代码，可以在我的github中可以下载。主要的逻辑逻辑在 netbian.js 中。
以彼岸桌面（http:///magicdawn/superagent-charset
2. nodejs是异步的，同一时间发送大量的请求，有可能被服务器认为是恶意请求而拒绝。 因此这里引入“async”模块，用于并发的处理，使用的方法是：mapLimit。
mapLimit(arr, limit, iterator, callback)
这个方法有4个参数：
第1个参数是数组。
第2个参数是并发请求的数量。
第3个参数是迭代器，通常是一个函数。
第4个参数是并发执行后的回调。
这个方法的作用是将arr中的每个元素同时并发limit次拿给iterator去执行，执行结果传给最后的callback。
后话
至此，便完成了图片的下载。
完整的代码，已经放在github上
以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，同时也希望多多支持！
最新文章
热门文章
猜你喜欢
