首页 / JAVA / java查找反复类/jar包/普通文件

java查找反复类/jar包/普通文件

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了java查找反复类/jar包/普通文件，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含10151字，纯文字阅读大概需要15分钟。

内容图文

开发web应用时，有时更新了类却没有生效，事实上是由于jboss/tomcat中其它公布包下有同名类（包含全路径都同样）。

于是萌发了做个程序来检查指定文件夹是否存在反复类（通过asm从类文件里取类的全路径），扩展开来，还支持查找反复的文件（按文件md5进行比較），反复的jar文件。

主要代码例如以下：

package cn.jerryhouse.util.dup_files;


import java.io.File;

public abstract class FileProcessor {
	private long totalFileCount = 0;
	private long processedFileCount = 0;
	public void processFiles(File[] dirs) throws Exception {
		for (File file : dirs) {
			processFile(file);
		}
	}

	public void processFile(File file) throws Exception {
		if (file.isFile()) {
			if (isFileAccepted(file)) {
				handleFile(file);
				processedFileCount++;
			}
			totalFileCount++;
		} else {
			File[] files = file.listFiles();
			for (File fileInDir : files) {
				processFile(fileInDir);
			}
		}
	}

	protected boolean isFileAccepted(File file) throws Exception {
		return true;
	}

	protected abstract void handleFile(File file);

	public long getTotalFileCount() {
		return totalFileCount;
	}

	public long getProcessedFileCount() {
		return processedFileCount;
	}
}

package cn.jerryhouse.util.dup_files;

import java.io.File;
import java.io.IOException;
import java.util.LinkedList;
import java.util.List;
import java.util.Map;
import java.util.Map.Entry;
import java.util.concurrent.ConcurrentHashMap;


public class FileDupFinder extends FileProcessor {
	protected Map<String, List<String>> fileMap = new ConcurrentHashMap<String, List<String>>();
	public void analyseResult() {
		boolean foundDup = false;
		for (Entry<String, List<String>> entry : fileMap.entrySet()) {
			List<String> classPathList = entry.getValue();
			if (classPathList.size() > 1) {
				System.out.println(" paths:"
						+ classPathList);
				foundDup = true;
			}
		}
		if (foundDup == false) {
			System.out.println("No duplicate file found.");
		}
	}


	protected void handleFile(final File file) {
		try {
			String fileMD5 = FileDigest.getFileMD5(file);
			try {
				List<String> list;
				if (fileMap.get(fileMD5) != null) {
					list = fileMap.get(fileMD5);
					list.add(file.getCanonicalPath());
				} else {
					list = new LinkedList<String>();
					list.add(file.getCanonicalPath());
					fileMap.put(fileMD5, list);
				}
			} catch (IOException e) {
				e.printStackTrace();
			}
		} catch (Exception e) {
			e.printStackTrace();
		}
	}

}

package cn.jerryhouse.util.dup_files;


import java.io.File;

public class JarFileDupFinder extends FileDupFinder {

	protected boolean isFileAccepted(final File file) throws Exception
	{
		if(file.getCanonicalPath().endsWith(".jar"))
		{
			return true;
		}
		else
		{
			return false;
		}
	}

}

package cn.jerryhouse.util.dup_files;


import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.util.LinkedList;
import java.util.List;
import java.util.Map.Entry;

import org.objectweb.asm.AnnotationVisitor;
import org.objectweb.asm.Attribute;
import org.objectweb.asm.ClassReader;
import org.objectweb.asm.ClassVisitor;
import org.objectweb.asm.FieldVisitor;
import org.objectweb.asm.MethodVisitor;

public class ClassDupFinder extends FileDupFinder {

	protected boolean isFileAccepted(final File file) throws Exception {
		if (file.getCanonicalPath().endsWith(".class")) {
			return true;
		} else {
			return false;
		}
	}

	public void analyseResult() {
		boolean foundDup = false;
		for (Entry<String, List<String>> entry : fileMap.entrySet()) {
			List<String> classPathList = entry.getValue();
			if (classPathList.size() > 1) {
				System.out.println("class:" + entry.getKey() + " paths:"
						+ classPathList);
				foundDup = true;
			}
		}
		if (foundDup == false) {
			System.out.println("No duplicate class found.");
		}
	}

	protected void handleFile(final File file) {
		try {
			String filePath = file.getCanonicalPath();
			ClassVisitor visitor = new ClassVisitor() {
				@Override
				public void visit(int version, int access, String name,
						String signature, String superName, String[] interfaces) {
					try {
						List<String> list;
						if (fileMap.get(name) != null) {
							list = fileMap.get(name);
							list.add(file.getCanonicalPath());
						} else {
							list = new LinkedList<String>();
							list.add(file.getCanonicalPath());
							fileMap.put(name, list);
						}
					} catch (IOException e) {
						e.printStackTrace();
					}
				}

				@Override
				public void visitSource(String source, String debug) {
				}

				@Override
				public void visitOuterClass(String owner, String name,
						String desc) {
				}

				@Override
				public AnnotationVisitor visitAnnotation(String desc,
						boolean visiable) {
					return null;
				}

				@Override
				public void visitAttribute(Attribute attr) {
				}

				@Override
				public void visitInnerClass(String name, String outerName,
						String innerName, int access) {
				}

				@Override
				public FieldVisitor visitField(int access, String name,
						String desc, String signature, Object value) {
					return null;
				}

				@Override
				public MethodVisitor visitMethod(int access, String name,
						String desc, String signature, String[] exceptions) {
					return null;
				}

				@Override
				public void visitEnd() {
				}
			};
			ClassReader cr = new ClassReader(new FileInputStream(filePath));
			cr.accept(visitor, 0);
		} catch (Exception e) {
			e.printStackTrace();
		}
	}

}

package cn.jerryhouse.util.dup_files;


import java.io.File;
import java.io.FileInputStream;
import java.math.BigInteger;
import java.security.MessageDigest;
import java.util.HashMap;
import java.util.Map;

public class FileDigest {
	/**
	 * 获取单个文件的MD5值
	 * @param file
	 */
	public static String getFileMD5(File file) {
		if (!file.isFile()) {
			return null;
		}
		MessageDigest digest = null;
		FileInputStream in = null;
		byte buffer[] = new byte[1024];
		int len;
		try {
			digest = MessageDigest.getInstance("MD5");
			in = new FileInputStream(file);
			while ((len = in.read(buffer, 0, 1024)) != -1) {
				digest.update(buffer, 0, len);
			}
			in.close();
		} catch (Exception e) {
			e.printStackTrace();
			return null;
		}
		BigInteger bigInt = new BigInteger(1, digest.digest());
		return bigInt.toString(16);
	}

	/**
	 * 获取文件夹中文件的MD5值
	 * @param file
	 * @param listChild 为true时，递归子文件夹中的文件；否则不递归
	 */
	public static Map<String, String> getDirMD5(File file, boolean listChild) {
		if (!file.isDirectory()) {
			return null;
		}
		Map<String, String> map = new HashMap<String, String>();
		String md5;
		File files[] = file.listFiles();
		for (int i = 0; i < files.length; i++) {
			File f = files[i];
			if (f.isDirectory() && listChild) {
				map.putAll(getDirMD5(f, listChild));
			} else {
				md5 = getFileMD5(f);
				if (md5 != null) {
					map.put(f.getPath(), md5);
				}
			}
		}
		return map;
	}
}

package cn.jerryhouse.util.dup_files;


import java.io.BufferedReader;
import java.io.File;
import java.io.FileReader;

public abstract class LineReaderProcessor extends FileProcessor {
	private long totalFileCount = 0;
	private long processedFileCount = 0;
	public void processFiles(File[] dirs) throws Exception {
		for (File file : dirs) {
			processFile(file);
		}
	}

	public void processFile(File file) throws Exception {
		if (file.isFile()) {
			if (isFileAccepted(file)) {
				handleFile(file);
			}
		} else {
			File[] files = file.listFiles();
			for (File fileInDir : files) {
				processFile(fileInDir);
			}
		}
	}

	protected boolean isFileAccepted(File file) throws Exception {
		return true;
	}

	protected void handleFile(File file)
	{
		try {
			BufferedReader br = new BufferedReader(new FileReader(file));
			String line;
			while((line=br.readLine())!=null)
			{
				readLine(file,line);
			}
			br.close();
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
	protected abstract void readLine(File file,String line);

	public long getTotalFileCount() {
		return totalFileCount;
	}

	public long getProcessedFileCount() {
		return processedFileCount;
	}
}

package cn.jerryhouse.util.dup_files;


import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.File;
import java.io.FileReader;
import java.io.FileWriter;
import java.util.UUID;

public abstract class LineUpdateProcessor extends FileProcessor {
	private long totalFileCount = 0;
	private long processedFileCount = 0;
	private String NEW_LINE = System.getProperty("line.separator");
	public void processFiles(File[] dirs) throws Exception {
		for (File file : dirs) {
			processFile(file);
		}
	}

	public void processFile(File file) throws Exception {
		if (file.isFile()) {
			if (isFileAccepted(file)) {
				handleFile(file);
			}
		} else {
			File[] files = file.listFiles();
			for (File fileInDir : files) {
				processFile(fileInDir);
			}
		}
	}

	protected boolean isFileAccepted(File file) throws Exception {
		return true;
	}

	protected void handleFile(File file)
	{
		try {
			BufferedReader br = new BufferedReader(new FileReader(file));
			File tmpFile = new File(tmpFilePath(file));
			BufferedWriter bw = new BufferedWriter(new FileWriter(tmpFile));
			String line;
			while((line=br.readLine())!=null)
			{
				String updatedLine = updateLine(file,line);
				bw.write(updatedLine+NEW_LINE);
			}
			br.close();
			bw.close();
			file.delete();
			tmpFile.renameTo(file);
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
	
	private String tmpFilePath(File file)
	{
		String dir = file.getParent();
		String filePath = dir+""+getUniqFileName();
		return filePath;
	}
	
	private String getUniqFileName()
	{
		return UUID.randomUUID().toString();
	}
	protected abstract String updateLine(File file,String line);

	public long getTotalFileCount() {
		return totalFileCount;
	}

	public long getProcessedFileCount() {
		return processedFileCount;
	}
}

简单測试代码：

package cn.jerryhouse.util.dup_files.test;

import java.io.File;

import org.junit.Test;

import cn.jerryhouse.util.dup_files.ClassDupFinder;
import cn.jerryhouse.util.dup_files.FileDupFinder;
import cn.jerryhouse.util.dup_files.JarFileDupFinder;

public class DupTest {

	@Test
	public void testJarFiles() {
		try {
			File[] files = new File[1];
			files[0] = new File("E:\\workspace\\yinxing");
			JarFileDupFinder dupFinder = new JarFileDupFinder();
			dupFinder.processFiles(files);
			dupFinder.analyseResult();
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
	@Test
	public void testFileDup() {
		try {
			File[] files = new File[1];
			files[0] = new File("E:\\workspace\\yinxing");
			FileDupFinder classDupFinder = new FileDupFinder();
			classDupFinder.processFiles(files);
			classDupFinder.analyseResult();
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
	
	@Test
	public void testClassDup() {
		try {
			File[] files = new File[1];
			files[0] = new File("E:\\workspace\\yinxing");
			ClassDupFinder classDupFinder = new ClassDupFinder();
			classDupFinder.processFiles(files);
			classDupFinder.analyseResult();
		} catch (Exception e) {
			e.printStackTrace();
		}
	}


}

注：依赖jar包asm.jar。

原文：http://www.cnblogs.com/mengfanrong/p/4392259.html

内容总结

以上是互联网集市为您收集整理的java查找反复类/jar包/普通文件全部内容，希望文章能够帮你解决java查找反复类/jar包/普通文件所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1109597.html

来源：【匿名】

【上一篇】Java Swing 【下一篇】JAVA/JSP学习系列之五

更多 ►

【java查找反复类/jar包/普通文件】教程文章相关的互联网学习教程文章

关于java.lang.reflect.InvocationTargetException(jar 包缺少或者冲突)的错误【图】

我在合肥那边运行了的是湖北石首市的项目没有错可是回武汉之后运行这个项目点击这里的时候就报错java.lang.reflect.InvocationTargetException 不是数据库问题，不是MyEclipse版本问题，而是SVN检出的时候出问题了，lib里的jar包检出少了我仔细看了一下是没检出完整可能是我检出的时候出问题了检出的lib少了我从新检出一下.原文：http://www.cnblogs.com/YangK-java/p/4642999.html

java--manifest.txt写入jar包【代码】

照着书上敲了一遍jar -cvmf mainfest.txt hello.jar com 却提示hello.jar没有主清单属性。打开jar包查看MANIFEST.MF。写在manifest.txt里面的Main-class信息没有写入进去。原来是，注意：Main-class:后面接空格 Main-class: com.point.HelloMain-calss这行结束后一定要再换行。保存。原文：https://www.cnblogs.com/staynight/p/15208388.html

不用ide编译java程序时调用jar包

调用特定目录下的jar包javac -cp d:\javatest\dom4j.jar Dom4jDemo.java//这部分必须注意，d:\javatest 是Dom4jDemo.class所在的目录，运行时;d:\javatest 必须包括D:\javatest>java -classpath d:\javatest\dom4j.jar;d:\javatest\jaxen.jar;d:\javatest Dom4jDemo（注意jar之后的分号）//如果像下面的写法则会提示未找到Dom4jDemo的main函数D:\javatest>java -classpath d:\javatest\dom4j.jar;d:\javatest\jaxen.jar Dom4jDemo原...

java中实现对lib文件中的jar包快速buildpath

当我们把jar文件全部复制到lib后,如果一个一个去buildpath是很麻烦的,这里其实有小技巧的，我们点击第一个jar文件,然后按着shift,再点击最后一个jar文件,就可以实现全选jar包,然后右键-->buildpath即可.原文：http://12295883.blog.51cto.com/12285883/1872889

Python一键转Jar包，Java调用Python新姿势！【代码】【图】

粉丝朋友们，不知道大家看故事看腻了没（要是没腻可一定留言告诉我^_^），今天这篇文章换换口味，正经的来写写技术文。言归正传，咱们开始吧！今天的这篇文章，聊一个轩辕君之前工作中遇到的需求：如何在Java中调用Python代码？要不要先Mark一下，说不定将来哪天就用上了呢？本文结构：- 需求背景- 进击的 Python- Java 和 Python - 给 Python 加速- 寻找方向- Jython? - Python->Native 代码- 整体思路- 实际动手- 自动化 - 关键...

Java项目打成jar包后，如何获取项目中文件的路径【代码】

作者：fstimer 出处：https://www.cnblogs.com/fstimers/ 欢迎转载，也请保留这段声明。谢谢！简介最近有个需求，需要发送一个上传文件的请求，为了尽可能模拟用户操作，所以要传入文件路径，而不直接是文件的内容（需要文件的路径，不是获取文件内容），使用this.getClass().getClassLoader().getResource("文件名").getPath()获取项目中文件路径（其它集中获取文件路径的方法请参考获取文件路径），未打成jar前一切正常运行，打成...

JAVA在Linux上发布WAR\JAR包【代码】【图】

前言一般都会使用Xshell进行远程发布项目，当然在Linux上命令是一样的本文使用到了两个工具Xshell 和 Xftp一、发布WAR包1、我们先使用Xftp，进入tomcat的webapp文件夹下cd /usr/local/tomcat/logs/ 2、把WAR包复制过来，注意重名问题3、接下来，打开Xshell，进入到tomcat的bin中　　进行停止项目，和之后的启动项目cd /usr/local/tomcat/bin/./shutdown.sh4、当我们停止项目后，切换到Xftp进行现有WAR包的备份或删除，并且把刚刚上...

Android源码编译jar包BUILD_JAVA_LIBRARY 与BUILD_STATIC_JAVA_LIBRARY的区别

一般情况下，在Android源码下编译一个jar包的典型makefile（Android.mk）如下：在文件中加入以下内容：LOCAL_PATH:= $(call my-dir)#make jarinclude $(CLEAR_VARS)LOCAL_SRC_FILES := $(call all-subdir-java-files)LOCAL_MODULE := mytestjarinclude $(BUILD_JAVA_LIBRARY)#include $(BUILD_STATIC_JAVA_LIBRARY) 那么，BUILD_JAVA_LIBRARY 与BUILD_STATIC_JAVA_LIBRARY的区别是什么？简单的说，jar包其实就是一个zip格式的压缩...

[Java] Java 打包成jar包和解压jar包【代码】

解压jar包jar xf xxx.jar打包成jar包方法一：通过jar命令jar命令的用法：下面是jar命令的帮助说明：用法：jar {ctxui}[vfm0Me] [jar-file] [manifest-file] [entry-point] [-C dir] files ...选项包括： -c 创建新的归档文件 -t 列出归档目录 -x 解压缩已归档的指定（或所有）文件 -u 更新现有的归档文件 -v 在标准输出中生成详细输出 -f 指定归档文件名 -m 包含指定清单文件中的清单信息 ...

java项目打jar包

java项目打jar包分为2种情况：一、java项目没有导入第三方jar包这时候打包就比较简单：1. 首先在Eclipse中打开项目，右键点击项目，选择“Export”；2. 选择Java/JAR file，Next；3. Select the resources to export中可以选择你想要包含的项目文件夹，一些不必要的文件夹就无需放进去了，免得增大空间；这里有几个选项： * Export generated class files and resources 表示只导出生成的.class文件和其他资源文件 * Export...

java -jar启动jar包报错：YAMLException: java.nio.charset.MalformedInputException: Input length = 1

java -jar启动SpringBoot jar包报错：YAMLException: java.nio.charset.MalformedInputException: Input length = 1，而在eclipse中通过运行main函数启动则没有问题，且项目编码为UTF-8。解决办法： java -Dfile.encoding=UTF-8 -jar springboot.jar原文：https://www.cnblogs.com/xing-nb/p/15232970.html

java开发常用jar包介绍（转载）

jta.jar 标准JTA API必要commons-collections.jar 集合类必要antlr.jar ANother Tool for Language Recognition 必要asm.jar ASM字节码库如果使用“cglib” 则必要asm-attrs.jar ASM字节码库如果使用“cglib” 则必要ehcache.jar EHCache缓存如果没有其他的缓存，则是必要的cglib.jar CGLIB字节码解释器如果使用“cglib” 则必要commons-beanutils.jar 提供对java反射和自省API的包装对bean操作的类，可以访问类的...

连接Oracle需要jar包和javadoc文档的下载【图】

下载可以直接访问官网http://www.oracle.com/technetwork/database/features/jdbc/index-091264.html如图原文：http://www.cnblogs.com/sxmcACM/p/3574992.html