您当前的位置:
科技成果 >
基于Hadoop分布式文件系统的小文件存储方法
基于Hadoop分布式文件系统的小文件存储方法
173
2019/12/12
基本信息
-
成果类型
高等院校
-
委托机构
西安电子科技大学
-
成果持有方
西安电子科技大学
-
行业领域
计算机科学与技术
-
项目名称
基于Hadoop分布式文件系统的小文件存储方法
-
知识产权
发明专利
-
成果成熟度
-
项目简介
本发明公开一种基于Hadoop分布式文件系统的小文件存储方法,实现步骤为:(1)新增两台服务器;(2)判断文件是否是小文件;(3)判断大文件请求状态;(4)判断小文件请求状态;(5)预处理写请求;(6)处理写请求;(7)检测缓存区;(8)预处理读请求;(9)处理读请求;(10)小文件分离;(11)建立预取记录;(12)更新预取记录。本发明相比现有技术存储海量小文件的方法,在保证系统通用性的同时,还具有读写性能效率高、缓解NameNode内存负担的优点,解决了海量小文件时NameNode内存占用率高、存储访问效率低的问题。本发明可用于分布式文件系统对海量小文件的存储和管理。
-
交易信息
-
意向交易额
面议
-
挂牌时间
2020/12/12
-
委托机构
西安电子科技大学
-
分享至: