這裏主要記錄下自己在開發的過程中遇到需要手動清洗生產數據庫髒數據的解決方法,由於數據量較大,不可能手動去查找,只能先找出相關的髒數據,然後更正。
解決的過程
步驟一:數據庫中清洗出相關的規則數據,寫入txt文件中
步驟二:讀取步驟一txt文件中的數據
步驟三:將步驟二讀取的txt文件進行篩選
步驟四:講髒數據寫入另一個txt文件中
主要代碼
//數據清洗
StringBuffer sb = new StringBuffer();
BufferedReader bufferedReader = new BufferedReader(new FileReader(new File("C:/Users/admin/Desktop/數據.txt")));
String s = null;
while((s = bufferedReader.readLine()) != null){
String ss = s.substring(1,s.length()-1);
sb.append(ss).append(",");
}
String [] str = sb.toString().split(",");
//數據彙總
BufferedWriter bufferedWriter = new BufferedWriter(new FileWriter("C:/Users/admin/Desktop/結果.txt"));
SysMnguserinfoDTO tt = new SysMnguserinfoDTO();
ExecuteResult<SysMnguserinfoDto> res = null;
for(int i=0;i<str.length;i++){
tt.setStaffCode(str[i]);
res = sysUserInfoService.querySysUserView(tt);
if(res.getResult() == null){
bufferedWriter.write(str[i]);
bufferedWriter.newLine();
bufferedWriter.flush();
}
}
bufferedWriter.close();