FileDetector-基于java開發的照片整理工具

2019-11-14 09:52:30

字體：大中小

來源：轉載

供稿：網友

1. 項目背景

開發這個功能的主要原因如下： 1. 大學期間拍攝了約50G的照片，照片很多 2. 存放不規范，導致同一張照片出現在不同的文件夾內，可讀性差，無法形成記憶線。 3. 重復存放過多，很多照片都有冗余備份，導致磁盤空間越來越不夠用。

2. 解決思路

根據照片拍攝時間對照片文件重命名，并移動到統一文件夾內。重復文件只移動一份，結果是除了目標文件夾內的照片以外，其他照片都是冗余照片。

注意：并非所有照片都有拍攝時間，只有數碼相機與手機拍攝的才有。部分網上下載的圖片也有原始拍攝時間。沒有拍攝時間的照片不作處理。

3. 項目概述

3.1 項目依賴

項目依賴這里的依賴都比較普通，只有一個比較特殊：metadata-extractor是用來提取照片中的拍攝時間的。joda-time用來規范日期格式。

3.2 項目結構

項目結構功能實現比較簡單，根據業務分了biz/service/util/ui包。其中ui開發的比較粗糙，因為java開發基本上已經轉入了后端，swing已經很少用到了，能跑起來就行。

3.3 項目流程圖

1.重復文件刪除

2.按拍攝時間重命名照片

3.移動文件到目標文件夾

3.4 項目下載

代碼地址：github地址可執行應用地址:應用地址

關鍵代碼

1.重復文件檢測

package cuishining.bizz;import java.io.File;import java.io.IOException;import java.util.List;import java.util.Set;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.google.common.collect.HashMultimap;import com.google.common.hash.Hashing;import com.google.common.io.Files;import cuishining.util.FileUtil;/** * Created by shining.cui on 2016/7/20. */public class DuplicateFileDetector { PRivate static final Logger logger = LoggerFactory.getLogger(DuplicateFileDetector.class); public HashMultimap<Long, String> detect(String path, String nameSuffix) { List<File> fileList = FileUtil.getAllFilesUnderPath(path, nameSuffix); HashMultimap<Long, String> md5AndFilePathMultiMap = analyzeMd5OfAllFiles(fileList); return analyzeDuplicateFiles(md5AndFilePathMultiMap); } private HashMultimap<Long, String> analyzeMd5OfAllFiles(List<File> fileList) { HashMultimap<Long, String> md5FileNameMultiMap = HashMultimap.create(); for (File file : fileList) { logger.info("文件{}，正在分析中……",file); try { long md5 = Files.hash(file, Hashing.md5()).asLong(); String path = file.getCanonicalPath(); md5FileNameMultiMap.put(md5, path); } catch (IOException e) { logger.error("文件hash出錯，請檢查文件是否可讀。",e); } } return md5FileNameMultiMap; } private HashMultimap<Long, String> analyzeDuplicateFiles(HashMultimap<Long, String> multimap) { Set<Long> md5s = multimap.keySet(); HashMultimap<Long, String> duplicateFilesMap = HashMultimap.create(); for (Long md5 : md5s) { Set<String> fileNames = multimap.get(md5); // 如果對應md5的value多于1個，證明是重復的文件，放入新的map中返回 if (fileNames.size() > 1) { for (String name : fileNames) { duplicateFilesMap.put(md5, name); } } } return duplicateFilesMap; }}

2.重命名策略

package cuishining.service.impl;import java.io.File;import java.util.List;import org.apache.commons.lang.StringUtils;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import cuishining.service.RenamePolicy;import cuishining.util.JpgFileUtil;/** * Created by shining.cui on 2016/7/23. */public class RenameByTimePolicy implements RenamePolicy { private static final Logger logger = LoggerFactory.getLogger(RenameByTimePolicy.class); @Override public boolean rename(List<File> fileList) { logger.info("接受參數fileList為:{}", fileList); for (File file : fileList) { String photoTimeStr = JpgFileUtil.getPhotoTimeStr(file); if (StringUtils.isEmpty(photoTimeStr)) { logger.error("文件{}不存在拍攝日期，無法重命名",file); } String path = file.getParentFile().getAbsolutePath(); if (StringUtils.isNotEmpty(photoTimeStr)) { renameFile(file, photoTimeStr, path); } } return true; } private void renameFile(File file, String photoTimeStr, String path) { logger.info("文件{}正在重命名中……",file); File renamedFile = new File(path + File.separator + photoTimeStr + ".jpg"); if (renamedFile.exists()) { logger.error("{}文件已經存在，無法重命名。", renamedFile); } else { boolean renameSuccess = file.renameTo(renamedFile); if (renameSuccess) { logger.info("{}文件命名為{}", file.getName(), renamedFile.getName()); } } }}

3.文件處理工具

package cuishining.util;import java.io.File;import java.util.ArrayList;import java.util.LinkedList;import java.util.List;import java.util.Set;import com.google.common.collect.HashMultimap;import com.google.common.io.Files;import org.apache.commons.lang.StringUtils;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.google.common.collect.Lists;/** * 文件處理工具 * Created by shining.cui on 2016/7/12. */public class FileUtil { public static Logger logger = LoggerFactory.getLogger(FileUtil.class); /** * 讀取指定路徑下的所有文件，使用隊列實現 * * @param filePath 指定的文件夾目錄 * @param nameSuffix 指定后綴，若為null或者" "則匹配所有 * @return 文件夾及其子文件夾內所有文件 */ public static List<File> getAllFilesUnderPath(String filePath, String nameSuffix) { logger.info("接受的文件夾路徑為:{},文件名匹配后綴為:{}", filePath, nameSuffix); File basicfile = new File(filePath); List<File> fileLis = Lists.newArrayList(); LinkedList<File> fileQueue = Lists.newLinkedList(Lists.newArrayList(basicfile)); while (!fileQueue.isEmpty()) { File file = fileQueue.poll(); if (file.isDirectory() && file.listFiles() != null) { fileQueue.addAll(Lists.newArrayList(file.listFiles())); } else { fileQueue = matchTheSuffix(file, nameSuffix, fileQueue, fileLis); } } logger.info("得到的文件列表的長度為:{}", fileLis.size()); return fileLis; } private static LinkedList<File> matchTheSuffix(File file, String nameSuffix, LinkedList<File> fileQueue, List<File> fileList) { String fileName = file.getName(); if (StringUtils.isNotEmpty(nameSuffix) && StringUtils.endsWith(fileName.toLowerCase(), nameSuffix.toLowerCase())) { // 當有后綴名時，匹配的放入隊列 fileList.add(file); } else if (StringUtils.isEmpty(nameSuffix)) { // 沒有匹配名時，所有的都放入隊列 fileList.add(file); } return fileQueue; } public static String deleteFilesFromMultiMap(HashMultimap<Long, String> duplicateFileMultimap) { Set<Long> md5s = duplicateFileMultimap.keySet(); StringBuilder sb = new StringBuilder(); int count = 0; for (long md5 : md5s) { ArrayList<String> filenames = Lists.newArrayList(duplicateFileMultimap.get(md5)); sb.append("以下重復文件：/n"); for (String filename : filenames) { sb.append(filename).append("/n"); } String firstDupFile = filenames.get(0); File file = new File(firstDupFile); boolean delete = file.delete(); if (delete) { logger.info("文件{}已被刪除", firstDupFile); sb.append("文件").append(firstDupFile).append("已被刪除"); count++; } else { logger.error("文件{}刪除失敗", firstDupFile); } } sb.append("共刪除").append(count).append("個文件"); logger.info("共刪除{}個文件",count); return sb.toString(); }}

4.照片事件提取工具

package cuishining.util;import java.io.File;import java.io.IOException;import java.util.Date;import org.joda.time.DateTime;import org.joda.time.DateTimeZone;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.drew.imaging.ImageMetadataReader;import com.drew.imaging.ImageProcessingException;import com.drew.metadata.Directory;import com.drew.metadata.Metadata;import com.drew.metadata.exif.ExifDirectoryBase;/** * Created by shining.cui on 2016/7/23. */public class JpgFileUtil { private static final Logger logger = LoggerFactory.getLogger(JpgFileUtil.class); public static String getPhotoTimeStr(File file) { Date date = null; try { Metadata metadata = ImageMetadataReader.readMetadata(file); for (Directory dr : metadata.getDirectories()) { if (dr.containsTag(ExifDirectoryBase.TAG_DATETIME_ORIGINAL)) { date = dr.getDate(ExifDirectoryBase.TAG_DATETIME_ORIGINAL); } if (date != null) { return TimeUtil.parseDateFromJpgFileDate(date); } } } catch (ImageProcessingException e) { logger.error("jpg文件讀取錯誤", e); } catch (IOException e) { logger.error("發生io錯誤", e); } return null; }}

5.時間工具

package cuishining.util;import org.joda.time.DateTime;import org.joda.time.DateTimeZone;import java.util.Date;/** * Created by shining.cui on 2016/7/25. */public class TimeUtil { private static final String timeFormatStr = "yyyy-MM-dd HH-mm-ss"; private static final String timeFormatStr1 = "yyyy-MM-dd HH:mm:ss"; public static String parseDateFromSystemDate(Date date) { return new DateTime(date).toString(timeFormatStr1); } public static String parseDateFromJpgFileDate(Date date) { return new DateTime(date, DateTimeZone.UTC).toString(timeFormatStr); }}