Java编程实现用hash方法切割文件
更新时间：2017年12月04日 09:08:49 作者：yan456jie
这篇文章主要介绍了Java编程实现用hash方法切割文件，简单介绍了hash的概念，然后分享了使用方法示例，具有一定借鉴价值，需要的朋友可以了解下。
Hash，一般翻译做“散列”，也有直接音译为“哈希”的，就是把任意长度的输入（又叫做预映射， pre-image），通过散列算法，变换成固定长度的输出，该输出就是散列值。这种转换是一种压缩映射，也就是，散列值的空间通常远小于输入的空间，不同的输入可能会散列成相同的输出，所以不可能从散列值来唯一的确定输入值。简单的说就是一种将任意长度的消息压缩到某一固定长度的消息摘要的函数。
如果有大型数据文件（如每行为url或者ip或者单词等的），以G为单位的，处理的时候需先切分。普通切分方法直接根据数据条数切分，得到的每个文件大小相近。
但是有时需要将相同数据放到相同文件中。可以使用hash切分法。
public class Test {
static int HASHLEN = 1000;
public static void main(String[] args) {
// TODO Auto-generated method stub
String words [] = {"yes" ,"an" ,"go"};
for(String word:words){
int temp = hash(word.toCharArray());
System.out.println(temp);
}
}
public static int hash(char[] word) {
int index = 0;
int i=0;
while(i<word.length) {
index += index * 31 + word[i];
i++;
}
return index % HASHLEN;
}
}
总结
以上就是本文关于Java编程实现用hash方法切割文件的全部内容，希望对大家有所帮助。感兴趣的朋友可以继续参阅本站其他相关专题，如有不足之处，欢迎留言指出。
相关文章
这篇文章主要介绍了pagehelper插件显示total为-1或1,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2020-09-09
Object.wait()与Object.notify()的用法详细解析
以下是对java中Object.wait()与Object.notify()的用法进行了详细的分析介绍，需要的朋友可以过来参考下2013-09-09
springboot将mybatis升级为mybatis-plus的实现
之前项目工程用的是mybatis,现在需要将其替换为mybatis-plus,本文主要介绍了springboot将mybatis升级为mybatis-plus的实现,具有一定的参考价值,感兴趣的可以了解一下2023-09-09
本文主要介绍了idea全局设置Maven配置，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-07-07
这篇文章主要给大家介绍了关于Java中类加载机制的相关资料,JVM将类加载过程分为三个步骤：装载（Load）、链接（Link）和初始化(Initialize),本文通过示例代码介绍的非常详细,需要的朋友可以参考下2021-09-09
JVisualVM是由Sun提供的性能分析工具，如此强大的后盾怎能不强大？在Jdk6.0以后的版本中是自带的，配置好环境变量然后在运行中输入“JVisualVm”或直接到Jdk的安装目录的Bin目录下找到运行程序即可运行。如果是用Jdk1.5或以前版本的朋友就得要单独安装了2015-12-12
本文详细讲解了Java解析XML的四种方式，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2021-12-12
本文主要介绍了Spring Data Redis怎么读不到我刚才设进去的值，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2021-09-09
这篇文章主要介绍了java生成文件夹和文件的简单示例,需要的朋友可以参考下2014-04-04
这篇文章主要介绍了Java 实现常见的非对称加密算法，帮助大家更好的理解和使用Java，感兴趣的朋友可以了解下2020-11-11
最新评论