关于文件上传的前后端优化

此前做过单文件、多文件上传和大文件分片上传，虽然功能有了，效果也还可以。不过最近重新思考一下，突然注意到一个重要的事情，大文件上传中，系统做了很多无用功，导致效率太低！
怎么说呢？是这样的，大文件上传，我前端采用的是百度的webuploader，后端用nodejs+express+multer。webuploader在前端分片上传，我是分片存为临时文件，全部传完后，前端发消息到后端执行分片合并，表面上没有毛病，其实我完全是被webuploader给忽悠瘸了，因为分片合并根本就不是必要的！
multer支持将formdata传来的文件存为硬盘文件，其实也可以缓存在memoryStorage ，我们可以直接写入目标文件的特定位置，根本不必要将分片写入临时文件，再在完成所有分片时将临时文件读取写入到目标文件。假设读写一个分片的开销都是1，那么写入分片读取分片写入目标的开销就是3了，而实际上我们直接写入目标就可以了，代价是1，相当于我们的效率只有1/3，做了2/3的无用功。
后来又查了一下，有反映说multer在高版本不再支持memoryStorage了，可以直接getStream，也好，反正我是需要pipeline装配这个stream的。

const multer = require('multer');
const getStream = require('get-stream');
...
app.post('/upload_chunks', multer().array('file'), (req, res, next)=> {let obj= req.body;let dest_dir = jargs.destDir+"/"+obj.reqid;let dest_path = dest_dir+"/"+ obj.name;let chunkid = (obj.chunk)?Number(obj.chunk):0;let start = chunkid * jargs.chunkSize;pipeline( getStream(req.files[0].stream), fs.createWriteStream(dest_path, { flags:'r+', start:start }), (err) => { if (err) { return res.json({'status': 0}); } res.json({'status': 1}); });
});app.post('/createfile', (req, res) => {let dest_dir = jargs.destDir+"/"+req.body.reqid;fs.mkdir(dest_dir, { recursive: true }, (err) => {if (err) { logger.error("目录创建出错"); res.json({'status': 0}); }else {let dest_path = dest_dir+"/"+ req.body.filename;logger.info("创建目标文件 "+dest_path);fs.writeFile(dest_path, '', (error) => { if (error) { logger.error("创建文件失败"); res.json({'status': 0}); } else {res.json({ 'status': 1 });}});}});
});