「排障系列」Node gRPC 静态生成文件引发的问题
2022-09-23
背景
目前正在修改的xiaoju-bot项目,使用uni-q-payload项目中的proto生成的js代码,当前正在做的内容是,监听wechaty的dong事件,根据返回的朋友圈事件,使用uni-q-payload封装好的代码序列化后放进队列,供automation项目使用。
csv大文件读取并且写入数据库
2019-05-21
最近有一个需求,就是三方发来一个csv大文件(超过1个G)需要写入mongodb数据,提供接口支持自己的服务。由于文件太大,不能一次读入内存中,那么需要使用stream来进行处理,这里提供了几种方法来解决这次问题。