国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于Cache的海量圖片存取優(yōu)化方案
DOI:
CSTR:
作者:
作者單位:

(四川民族學(xué)院 計算機科學(xué)系,四川 康定 626001 )

作者簡(jiǎn)介:

陳 渝(1974-),男,四川儀隴人,碩士,副教授,主要從事計算機應用、人機交互技術(shù)方向的研究。[FQ)]

通訊作者:

中圖分類(lèi)號:

TP391

基金項目:

四川省教育廳科研項目(13ZA0135)。


High Concurrent Access Optimization in HDFS Based on Cache for Mass Images
Author:
Affiliation:

(Department of Computer Science,Sichuan University for Nationalites, Kangding 626001, China)

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    針對Hadoop分布式文件系統(Hadoop distributed file system,HDFS)存儲海量圖片效率低下的問(wèn)題,在分析HDFS的基本框架以及其固有的文件讀寫(xiě)流程基礎上,提出了基于Cache的海量圖片存儲優(yōu)化方案(HDFS based on Cache,CHDFS);該方案引入了Cache、預讀、文件合并等機制,來(lái)提高圖片讀寫(xiě)的性能,彌補了HDFS存儲海量圖片時(shí)的缺陷;采用圖片合并的方式減少Namenode中元數據的個(gè)數,同時(shí)提高Datanode存儲空間的利用率;由于Cache、預讀以及圖片合并等操作對用戶(hù)都是透明的,所以,該方案并沒(méi)有增加用戶(hù)使用HDFS的復雜性;實(shí)驗結果表明,CHDFS方法可以有效地提高圖片的存取效率。

    Abstract:

    To solve the problem of the low efficiency of HDFS (Hadoop Distributed File System) to store mass images, this paper studied the HDFS architecture and the flow of reading and writing files into HDFS, and then proposed an access optimization solution for mass pictures which is based on Cache. It is called CHDFS (HDFS Based on Cache).CHDFS adopts the following ideas to improve the performance, such as establishing appropriate cache ,reading ahead pictures, merging more than one images into a big file and so on. File merge can decrease the number of metadata in Namenode and improve the capacity factor of storage space in Datanode. To the client, this solution does not complex the operations to use the HDFS, due to the transparency of cache, read ahead and pictures merge. The experimental data indicates that CHDFS can increase the performance of storing and accessing mass pictures in HDFS without affecting the normal running of HDFS.

    參考文獻
    相似文獻
    引證文獻
引用本文

陳渝.基于Cache的海量圖片存取優(yōu)化方案計算機測量與控制[J].,2014,22(8):2669-2672,2676.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2014-04-15
  • 最后修改日期:2014-05-04
  • 錄用日期:
  • 在線(xiàn)發(fā)布日期: 2014-12-16
  • 出版日期:
文章二維碼
嘉祥县| 顺昌县| 南郑县| 宜兰县| 道孚县| 南靖县| 保靖县| 清涧县| 东光县| 崇义县| 徐闻县| 柏乡县| 农安县| 保靖县| 闽清县| 瓦房店市| 两当县| 台中市| 唐河县| 江阴市| 元朗区| 南和县| 佳木斯市| 溆浦县| 许昌市| 永胜县| 阿克苏市| 治县。| 海丰县| 昌吉市| 南京市| 南和县| 南陵县| 利川市| 常山县| 沂南县| 榆林市| 镇雄县| 正安县| 休宁县| 县级市|