自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

封裝了一個Excel導入加校驗的工具,同事們用了都說好

開發(fā) 開發(fā)工具
最近在做Excel導入功能,產品要求對導入數據先進行校驗然后再入庫。于是簡單封裝了一個工具,結果兄弟們用了都說好,今天就把思路分享出來。

 [[394532]]

最近太忙了,剛剛到家趕緊抽空趕一篇,不知道能不能幫到你。

最近在做Excel導入功能,產品要求對導入數據先進行校驗然后再入庫。于是簡單封裝了一個工具,結果兄弟們用了都說好,今天就把思路分享出來。

easyexcel 庫

我們都知道POI是Java操作Excel的基礎庫。為了通用性并沒有做定制,而且還有一些局限性。經過一番調研決定采用二次封裝庫easyexcel來進行業(yè)務開發(fā)。

  1. <dependency> 
  2.     <groupId>com.alibaba</groupId> 
  3.     <artifactId>easyexcel</artifactId> 
  4.     <version>${easyexcel.version}</version> 
  5. </dependency> 

 

easyexcel將讀取Excel的生命周期抽象為了幾個階段,方便我們在各個階段注入你想要實現的邏輯。這幾個階段包含在ReadListener接口中

  1. public interface ReadListener<T> extends Listener { 
  2.     /** 
  3.      * 當任何一個偵聽器執(zhí)行錯誤報告時,所有偵聽器都將接收此方法。 如果在此處引發(fā)異常,則整個讀取將終止。 
  4.      * 這里是處理讀取excel異常的 
  5.      * 
  6.      * @param exception 
  7.      * @param context 
  8.      * @throws Exception 
  9.      */ 
  10.     void onException(Exception exception, AnalysisContext context) throws Exception; 
  11.  
  12.     /** 
  13.      * 讀取每行excel表頭時會執(zhí)行此方法 
  14.      * 
  15.      * @param headMap 
  16.      * @param context 
  17.      */ 
  18.     void invokeHead(Map<Integer, CellData> headMap, AnalysisContext context); 
  19.  
  20.     /** 
  21.      * 讀取每行數據的時候回執(zhí)行此方法  
  22.      * 
  23.      * @param data 
  24.      *            one row value. Is is same as {@link AnalysisContext#readRowHolder()} 
  25.      * @param context 
  26.      *            analysis context 
  27.      */ 
  28.     void invoke(T data, AnalysisContext context); 
  29.  
  30.     /** 
  31.      * 如果有額外的單元格信息返回就用此方法處理 
  32.      * 
  33.      * @param extra 
  34.      *            extra information 
  35.      * @param context 
  36.      *            analysis context 
  37.      */ 
  38.     void extra(CellExtra extra, AnalysisContext context); 
  39.  
  40.     /** 
  41.      * 在整個excel sheet解析完畢后執(zhí)行的邏輯。 
  42.      * 
  43.      * @param context 
  44.      */ 
  45.     void doAfterAllAnalysed(AnalysisContext context); 
  46.  
  47.     /** 
  48.      * 用來控制是否讀取下一行的策略 
  49.      * 
  50.      * @param context 
  51.      * @return 
  52.      */ 
  53.     boolean hasNext(AnalysisContext context); 

其抽象實現AnalysisEventListener提供更加符合需要的抽象,我會進一步實現這個抽象來實現Excel的導入和校驗。

在你了解一個框架的抽象接口后,盡量要去看一下它有沒有能滿足你需要的實現。

另外這里要多說一點,接口中的AnalysisContext包含了很多有用的上下文元信息,比如 當前行、當前的配置策略、excel整體結構等信息,你可以在需要的時候調用這些信息。

JSR303校驗

最開始自己寫了一個抽象的校驗工具,最后發(fā)現每一個字段都要編寫其具體的校驗邏輯,如果一個Excel的字段量爆炸,這對開發(fā)來說就可能是噩夢。這使我想到了業(yè)界已經有的規(guī)范-JSR303校驗規(guī)范,它將數據模型(Model)和校驗(Validation)各自抽象,非常靈活,而且工作量明顯降低。我們只需要找到和esayexcel生命周期結合的地方就行了。我們只需要引入以下依賴就能在Spring Boot項目中集成JSR303校驗:

  1. <dependency> 
  2.     <groupId>org.springframework.boot</groupId> 
  3.     <artifactId>spring-boot-starter-validation</artifactId> 
  4. </dependency> 

關于JSR303相關的教程可以查看我這一篇文章。

實現過程

我們可以在解析每個字段的時候校驗,這對應ReadListener的invoke(T data, AnalysisContext context)方法,這種方式可以實現當字段校驗觸發(fā)約束時就停止excel解析的策略;另一種可以在Excel解析完畢后執(zhí)行校驗,對應doAfterAllAnalysed(AnalysisContext context)。這里以第二種為例我們來實現一下。

我們在編寫代碼時,盡量職責單一,一個類或者一個方法盡量只干一個事,這樣讓自己的代碼足夠清晰。

編寫校驗處理類

這里我把解析和校驗分開實現,先編寫JSR303校驗工具。這里假設已經有了校驗器javax.validation.Validator的實現,稍后我會講這個實現從哪里注入。

  1. import cn.felord.validate.Excel; 
  2. import lombok.AllArgsConstructor; 
  3. import org.springframework.util.StringUtils; 
  4.  
  5. import javax.validation.ConstraintViolation; 
  6. import javax.validation.Validator; 
  7. import java.util.*; 
  8. import java.util.stream.Collectors; 
  9.  
  10. /** 
  11.  *  excel 校驗工具 
  12.  * 
  13.  * @param <T> the type parameter 
  14.  * @author felord.cn 
  15.  * @since 2021 /4/14 14:14 
  16.  */ 
  17. @AllArgsConstructor 
  18. public class ExcelValidator<T> { 
  19.  
  20.     private final Validator validator; 
  21.     private final Integer beginIndex; 
  22.  
  23.  
  24.     /** 
  25.      *  集合校驗 
  26.      * 
  27.      * @param data 待校驗的集合 
  28.      * @return list 
  29.      */ 
  30.     public List<String> validate(Collection<T> data) { 
  31.         int index = beginIndex + 1; 
  32.         List<String> messages = new ArrayList<>(); 
  33.         for (T datum : data) { 
  34.             String validated = this.doValidate(index, datum); 
  35.             if (StringUtils.hasText(validated)) { 
  36.                 messages.add(validated); 
  37.             } 
  38.             index++; 
  39.         } 
  40.         return messages; 
  41.     } 
  42.      
  43.     /** 
  44.      * 這里是校驗的根本方法 
  45.      * 
  46.      * @param index 本條數據所在的行號 
  47.      * @param data 待校驗的某條數據 
  48.      * @return 對數據的校驗異常進行提示,如果有觸發(fā)校驗規(guī)則的會封裝提示信息。 
  49.      */ 
  50.     private String doValidate(int index, T data) { 
  51.         // 這里使用了JSR303的的校驗器,同時使用了分組校驗,Excel為分組標識 
  52.         Set<ConstraintViolation<T>> validate = validator.validate(data, Excel.class); 
  53.         return validate.size()>0 ? "第" + index + 
  54.                 "行,觸發(fā)約束:" + validate.stream() 
  55.                 .map(ConstraintViolation::getMessage) 
  56.                 .collect(Collectors.joining(",")): ""
  57.     } 

上面就是整個校驗的邏輯,如果校驗通過不提示任何信息,如果校驗不通過把校驗的約束信息封裝返回。這里的Validator是從哪里來的呢?當Spring Boot集成了JSR303會有一個Validator實現被自動注入Spring IoC,我們可以利用它。

實現AnalysisEventListener

這個完全是easyexcel的功能了,我們只需要實現最開始提到的Excel抽象解析監(jiān)聽器接口AnalysisEventListener,并將解析字段加入集合,等完全解析完畢后再進行校驗。這里如果校驗不通過就會拋出攜帶校驗信息的異常,異常經過處理返回前端提示。

切記:AnalysisEventListener的實現不能注入Spring IoC。

  1. import cn.hutool.json.JSONUtil; 
  2. import com.alibaba.excel.context.AnalysisContext; 
  3. import com.alibaba.excel.event.AnalysisEventListener; 
  4. import cn.felord.exception.ServiceException; 
  5. import org.springframework.util.CollectionUtils; 
  6.  
  7. import java.util.ArrayList; 
  8. import java.util.Collection; 
  9. import java.util.List; 
  10. import java.util.function.Consumer; 
  11.  
  12. /** 
  13.  * 該類不可被Spring托管 
  14.  * 
  15.  * @param <T> the type parameter 
  16.  * @author felord.cn 
  17.  * @since 2021 /4/14 14:19 
  18.  */ 
  19. public class JdbcEventListener<T> extends AnalysisEventListener<T> { 
  20.     /** 
  21.      * Excel總條數閾值 
  22.      */ 
  23.     private static final Integer MAX_SIZE = 10000; 
  24.     /** 
  25.      * 校驗工具 
  26.      */ 
  27.     private final ExcelValidator<T> excelValidator; 
  28.     /** 
  29.      * 如果校驗通過消費解析得到的excel數據 
  30.      */ 
  31.     private final Consumer<Collection<T>> batchConsumer; 
  32.     /** 
  33.      * 解析數據的臨時存儲容器 
  34.      */ 
  35.     private final List<T> list = new ArrayList<>(); 
  36.  
  37.     /** 
  38.      * Instantiates a new Jdbc event listener. 
  39.      * 
  40.      * @param excelValidator Excel校驗工具 
  41.      * @param batchConsumer  Excel解析結果批量消費工具,可實現為寫入數據庫等消費操作 
  42.      */ 
  43.     public JdbcEventListener(ExcelValidator<T> excelValidator, Consumer<Collection<T>> batchConsumer) { 
  44.         this.excelValidator = excelValidator; 
  45.         this.batchConsumer = batchConsumer; 
  46.     } 
  47.  
  48.     @Override 
  49.     public void onException(Exception exception, AnalysisContext context) throws Exception { 
  50.         list.clear(); 
  51.         throw exception; 
  52.     } 
  53.  
  54.     @Override 
  55.     public void invoke(T data, AnalysisContext context) { 
  56.         // 如果沒有超過閾值就把解析的excel字段加入集合 
  57.         if (list.size() >= MAX_SIZE) { 
  58.             throw new ServiceException("單次上傳條數不得超過:" + MAX_SIZE); 
  59.         } 
  60.         list.add(data); 
  61.     } 
  62.  
  63.     @Override 
  64.     public void doAfterAllAnalysed(AnalysisContext context) { 
  65.         //全部解析完畢后 對集合進行校驗并消費 
  66.         if (!CollectionUtils.isEmpty(this.list)) { 
  67.             List<String> validated = this.excelValidator.validate(this.list); 
  68.             if (CollectionUtils.isEmpty(validated)) { 
  69.                 this.batchConsumer.accept(this.list); 
  70.             } else { 
  71.                 throw new ServiceException(JSONUtil.toJsonStr(validated)); 
  72.             } 
  73.         } 
  74.     } 

封裝最終的工具

這里參考esayexcel的文檔封裝成一個通用的Excel讀取工具

  1. import com.alibaba.excel.EasyExcel; 
  2. import lombok.AllArgsConstructor; 
  3. import lombok.Data; 
  4.  
  5. import javax.validation.Validator; 
  6. import java.io.InputStream; 
  7. import java.util.Collection; 
  8. import java.util.function.Consumer; 
  9.  
  10. /** 
  11.  * excel讀取工具 
  12.  * 
  13.  * @author felord.cn 
  14.  * @since 2021 /4/14 15:10 
  15.  */ 
  16. @AllArgsConstructor 
  17. public class ExcelReader { 
  18.     private final Validator validator; 
  19.  
  20.     /** 
  21.      * Read Excel. 
  22.      * 
  23.      * @param <T>  the type parameter 
  24.      * @param meta the meta 
  25.      */ 
  26.     public <T> void read(Meta<T> meta) { 
  27.         ExcelValidator<T> excelValidator = new ExcelValidator<>(validator, meta.headRowNumber); 
  28.         JdbcEventListener<T> readListener = new JdbcEventListener<>(excelValidator, meta.consumer); 
  29.         EasyExcel.read(meta.excelStream, meta.domain, readListener) 
  30.                 .headRowNumber(meta.headRowNumber) 
  31.                 .sheet() 
  32.                 .doRead(); 
  33.     } 
  34.  
  35.  
  36.     /** 
  37.      * 解析需要的元數據 
  38.      * 
  39.      * @param <T> the type parameter 
  40.      */ 
  41.     @Data 
  42.     public static class Meta<T> { 
  43.         /** 
  44.          * excel 文件流 
  45.          */ 
  46.         private InputStream excelStream; 
  47.         /** 
  48.          * excel頭的行號,參考easyexcel的api和你的實際情況 
  49.          */ 
  50.         private Integer headRowNumber; 
  51.         /** 
  52.          * 對應excel封裝的數據類,需要參考easyexcel教程 
  53.          */ 
  54.         private Class<T> domain; 
  55.         /** 
  56.          * 解析結果的消費函數 
  57.          */ 
  58.         private Consumer<Collection<T>> consumer; 
  59.     } 
  60.  

我們把這個工具注入Spring IoC,方便我們使用。

  1. /** 
  2.  * Excel 讀取工具 
  3.  * 
  4.  * @param validator the validator 
  5.  * @return the excel reader 
  6.  */ 
  7. @Bean 
  8. public ExcelReader excelReader(Validator validator) { 
  9.     return new ExcelReader(validator); 

編寫接口

這里Excel的數據類ExcelData就不贅述了,過于簡單!去看esayexcel的文檔即可。編寫一個Spring MVC接口示例,沒錯就是這么簡單。

  1. @Autowired 
  2. private  ExcelReader excelReader; 
  3. @Autowired 
  4. private  DataService dataService; 
  5.  
  6. @PostMapping("/excel/import"
  7. public Rest<?> importManufacturerInfo(@RequestPart MultipartFile file) throws IOException { 
  8.     InputStream inputStream = file.getInputStream(); 
  9.     ExcelReader.Meta<ExcelData> excelDataMeta = new ExcelReader.Meta<>(); 
  10.     excelDataMeta.setExcelStream(inputStream); 
  11.     excelDataMeta.setDomain(ExcelData.class); 
  12.     excelDataMeta.setHeadRowNumber(2); 
  13.     // 批量寫入數據庫的邏輯 
  14.     excelDataMeta.setConsumer(dataService::saveBatch); 
  15.     this.excelReader.read(excelDataMeta); 
  16.     return RestBody.ok(); 

總結

今天演示了如何將easyexcel和JSR303結合起來,其實原理很簡單,你只需要找到兩個技術的結合點,并把它們組合起來即可,你學到了嗎?

本文轉載自微信公眾號「碼農小胖哥」,可以通過以下二維碼關注。轉載本文請聯(lián)系碼農小胖哥公眾號。

 

責任編輯:武曉燕 來源: 碼農小胖哥
相關推薦

2022-03-23 08:01:04

Python語言代碼

2024-12-12 12:00:00

代碼C++

2023-04-26 01:29:05

OkHttp3工具方式

2011-05-06 14:19:29

ExcelSQL Server

2023-09-26 11:59:48

ChatGPT人工智能

2023-04-26 08:19:48

Nacos高可用開發(fā)

2022-11-13 08:06:05

ArthasEverythingMaven help

2015-07-27 10:34:55

大數據大忽悠

2020-11-09 14:10:38

Bug安全代碼

2021-06-30 09:56:24

MySQL數據庫索引

2025-03-26 00:35:00

Javaweb開發(fā)

2024-08-30 09:05:45

2022-05-07 07:33:55

TypeScript條件類型

2020-03-02 19:08:21

JVMJDKJRE

2022-04-29 06:54:48

TS 映射類型User 類型

2022-12-20 08:32:02

2015-07-03 11:16:14

編程一個手鐲

2020-11-23 11:30:00

IDEA技巧開發(fā)

2021-07-19 09:42:45

Spring Boot@ValueJava

2019-07-26 09:20:21

ClusterShel命令Linux
點贊
收藏

51CTO技術棧公眾號