FileDetector-基于java開發(fā)的照片整理工具

2019-11-14 10:26:26

字體：大中小

供稿：網(wǎng)友

1. 項(xiàng)目背景

開發(fā)這個(gè)功能的主要原因如下： 1. 大學(xué)期間拍攝了約50G的照片，照片很多 2. 存放不規(guī)范，導(dǎo)致同一張照片出現(xiàn)在不同的文件夾內(nèi)，可讀性差，無法形成記憶線。 3. 重復(fù)存放過多，很多照片都有冗余備份，導(dǎo)致磁盤空間越來越不夠用。

2. 解決思路

根據(jù)照片拍攝時(shí)間對(duì)照片文件重命名，并移動(dòng)到統(tǒng)一文件夾內(nèi)。重復(fù)文件只移動(dòng)一份，結(jié)果是除了目標(biāo)文件夾內(nèi)的照片以外，其他照片都是冗余照片。

注意：并非所有照片都有拍攝時(shí)間，只有數(shù)碼相機(jī)與手機(jī)拍攝的才有。部分網(wǎng)上下載的圖片也有原始拍攝時(shí)間。沒有拍攝時(shí)間的照片不作處理。

3. 項(xiàng)目概述

3.1 項(xiàng)目依賴

項(xiàng)目依賴這里的依賴都比較普通，只有一個(gè)比較特殊：metadata-extractor是用來提取照片中的拍攝時(shí)間的。joda-time用來規(guī)范日期格式。

3.2 項(xiàng)目結(jié)構(gòu)

項(xiàng)目結(jié)構(gòu) 功能實(shí)現(xiàn)比較簡(jiǎn)單，根據(jù)業(yè)務(wù)分了biz/service/util/ui包。其中ui開發(fā)的比較粗糙，因?yàn)?a href="http://www.5lwq4hdr.cn/article.asp?typeid=160">java開發(fā)基本上已經(jīng)轉(zhuǎn)入了后端，swing已經(jīng)很少用到了，能跑起來就行。

3.3 項(xiàng)目流程圖

1.重復(fù)文件刪除

2.按拍攝時(shí)間重命名照片

3.移動(dòng)文件到目標(biāo)文件夾

3.4 項(xiàng)目下載

代碼地址：github地址可執(zhí)行應(yīng)用地址:應(yīng)用地址

關(guān)鍵代碼

1.重復(fù)文件檢測(cè)

package cuishining.bizz;import java.io.File;import java.io.IOException;import java.util.List;import java.util.Set;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.google.common.collect.HashMultimap;import com.google.common.hash.Hashing;import com.google.common.io.Files;import cuishining.util.FileUtil;/** * Created by shining.cui on 2016/7/20. */public class DuplicateFileDetector { PRivate static final Logger logger = LoggerFactory.getLogger(DuplicateFileDetector.class); public HashMultimap<Long, String> detect(String path, String nameSuffix) { List<File> fileList = FileUtil.getAllFilesUnderPath(path, nameSuffix); HashMultimap<Long, String> md5AndFilePathMultiMap = analyzeMd5OfAllFiles(fileList); return analyzeDuplicateFiles(md5AndFilePathMultiMap); } private HashMultimap<Long, String> analyzeMd5OfAllFiles(List<File> fileList) { HashMultimap<Long, String> md5FileNameMultiMap = HashMultimap.create(); for (File file : fileList) { logger.info("文件{}，正在分析中……",file); try { long md5 = Files.hash(file, Hashing.md5()).asLong(); String path = file.getCanonicalPath(); md5FileNameMultiMap.put(md5, path); } catch (IOException e) { logger.error("文件hash出錯(cuò)，請(qǐng)檢查文件是否可讀。",e); } } return md5FileNameMultiMap; } private HashMultimap<Long, String> analyzeDuplicateFiles(HashMultimap<Long, String> multimap) { Set<Long> md5s = multimap.keySet(); HashMultimap<Long, String> duplicateFilesMap = HashMultimap.create(); for (Long md5 : md5s) { Set<String> fileNames = multimap.get(md5); // 如果對(duì)應(yīng)md5的value多于1個(gè)，證明是重復(fù)的文件，放入新的map中返回 if (fileNames.size() > 1) { for (String name : fileNames) { duplicateFilesMap.put(md5, name); } } } return duplicateFilesMap; }}

2.重命名策略

package cuishining.service.impl;import java.io.File;import java.util.List;import org.apache.commons.lang.StringUtils;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import cuishining.service.RenamePolicy;import cuishining.util.JpgFileUtil;/** * Created by shining.cui on 2016/7/23. */public class RenameByTimePolicy implements RenamePolicy { private static final Logger logger = LoggerFactory.getLogger(RenameByTimePolicy.class); @Override public boolean rename(List<File> fileList) { logger.info("接受參數(shù)fileList為:{}", fileList); for (File file : fileList) { String photoTimeStr = JpgFileUtil.getPhotoTimeStr(file); if (StringUtils.isEmpty(photoTimeStr)) { logger.error("文件{}不存在拍攝日期，無法重命名",file); } String path = file.getParentFile().getAbsolutePath(); if (StringUtils.isNotEmpty(photoTimeStr)) { renameFile(file, photoTimeStr, path); } } return true; } private void renameFile(File file, String photoTimeStr, String path) { logger.info("文件{}正在重命名中……",file); File renamedFile = new File(path + File.separator + photoTimeStr + ".jpg"); if (renamedFile.exists()) { logger.error("{}文件已經(jīng)存在，無法重命名。", renamedFile); } else { boolean renameSuccess = file.renameTo(renamedFile); if (renameSuccess) { logger.info("{}文件命名為{}", file.getName(), renamedFile.getName()); } } }}

3.文件處理工具

package cuishining.util;import java.io.File;import java.util.ArrayList;import java.util.LinkedList;import java.util.List;import java.util.Set;import com.google.common.collect.HashMultimap;import com.google.common.io.Files;import org.apache.commons.lang.StringUtils;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.google.common.collect.Lists;/** * 文件處理工具 * Created by shining.cui on 2016/7/12. */public class FileUtil { public static Logger logger = LoggerFactory.getLogger(FileUtil.class); /** * 讀取指定路徑下的所有文件，使用隊(duì)列實(shí)現(xiàn) * * @param filePath 指定的文件夾目錄 * @param nameSuffix 指定后綴，若為null或者" "則匹配所有 * @return 文件夾及其子文件夾內(nèi)所有文件 */ public static List<File> getAllFilesUnderPath(String filePath, String nameSuffix) { logger.info("接受的文件夾路徑為:{},文件名匹配后綴為:{}", filePath, nameSuffix); File basicfile = new File(filePath); List<File> fileLis = Lists.newArrayList(); LinkedList<File> fileQueue = Lists.newLinkedList(Lists.newArrayList(basicfile)); while (!fileQueue.isEmpty()) { File file = fileQueue.poll(); if (file.isDirectory() && file.listFiles() != null) { fileQueue.addAll(Lists.newArrayList(file.listFiles())); } else { fileQueue = matchTheSuffix(file, nameSuffix, fileQueue, fileLis); } } logger.info("得到的文件列表的長(zhǎng)度為:{}", fileLis.size()); return fileLis; } private static LinkedList<File> matchTheSuffix(File file, String nameSuffix, LinkedList<File> fileQueue, List<File> fileList) { String fileName = file.getName(); if (StringUtils.isNotEmpty(nameSuffix) && StringUtils.endsWith(fileName.toLowerCase(), nameSuffix.toLowerCase())) { // 當(dāng)有后綴名時(shí)，匹配的放入隊(duì)列 fileList.add(file); } else if (StringUtils.isEmpty(nameSuffix)) { // 沒有匹配名時(shí)，所有的都放入隊(duì)列 fileList.add(file); } return fileQueue; } public static String deleteFilesFromMultiMap(HashMultimap<Long, String> duplicateFileMultimap) { Set<Long> md5s = duplicateFileMultimap.keySet(); StringBuilder sb = new StringBuilder(); int count = 0; for (long md5 : md5s) { ArrayList<String> filenames = Lists.newArrayList(duplicateFileMultimap.get(md5)); sb.append("以下重復(fù)文件：/n"); for (String filename : filenames) { sb.append(filename).append("/n"); } String firstDupFile = filenames.get(0); File file = new File(firstDupFile); boolean delete = file.delete(); if (delete) { logger.info("文件{}已被刪除", firstDupFile); sb.append("文件").append(firstDupFile).append("已被刪除"); count++; } else { logger.error("文件{}刪除失敗", firstDupFile); } } sb.append("共刪除").append(count).append("個(gè)文件"); logger.info("共刪除{}個(gè)文件",count); return sb.toString(); }}

4.照片事件提取工具

package cuishining.util;import java.io.File;import java.io.IOException;import java.util.Date;import org.joda.time.DateTime;import org.joda.time.DateTimeZone;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import com.drew.imaging.ImageMetadataReader;import com.drew.imaging.ImageProcessingException;import com.drew.metadata.Directory;import com.drew.metadata.Metadata;import com.drew.metadata.exif.ExifDirectoryBase;/** * Created by shining.cui on 2016/7/23. */public class JpgFileUtil { private static final Logger logger = LoggerFactory.getLogger(JpgFileUtil.class); public static String getPhotoTimeStr(File file) { Date date = null; try { Metadata metadata = ImageMetadataReader.readMetadata(file); for (Directory dr : metadata.getDirectories()) { if (dr.containsTag(ExifDirectoryBase.TAG_DATETIME_ORIGINAL)) { date = dr.getDate(ExifDirectoryBase.TAG_DATETIME_ORIGINAL); } if (date != null) { return TimeUtil.parseDateFromJpgFileDate(date); } } } catch (ImageProcessingException e) { logger.error("jpg文件讀取錯(cuò)誤", e); } catch (IOException e) { logger.error("發(fā)生io錯(cuò)誤", e); } return null; }}

5.時(shí)間工具

package cuishining.util;import org.joda.time.DateTime;import org.joda.time.DateTimeZone;import java.util.Date;/** * Created by shining.cui on 2016/7/25. */public class TimeUtil { private static final String timeFormatStr = "yyyy-MM-dd HH-mm-ss"; private static final String timeFormatStr1 = "yyyy-MM-dd HH:mm:ss"; public static String parseDateFromSystemDate(Date date) { return new DateTime(date).toString(timeFormatStr1); } public static String parseDateFromJpgFileDate(Date date) { return new DateTime(date, DateTimeZone.UTC).toString(timeFormatStr); }}