首页 > TAG信息列表 > antia1

基于EasyExcel的大数据量导入并去重

源码:https://gitee.com/antia11/excel-data-import-demo 背景:客户需要每周会将上传一个 Excel 数据文件,数据量单次为 20W 以上,作为其他模块和报表的基础数据。 客户需求分析: 数据量为 20W 条左右。 数据需要去重。 等待时间不能太长。 文件中会有错误数据存在,错误数据跳过不进入