适应高并发写操作的云存储平台核心技术研究

基本信息
批准号:61173161
项目类别:面上项目
资助金额:58.00
负责人:金英伟
学科分类:
依托单位:大连理工大学
批准年份:2011
结题年份:2015
起止时间:2012-01-01 - 2015-12-31
项目状态: 已结题
项目参与者:迟忠先,李先毅,高秀娥,张莹州,牟远平,刘秀龙,杨丹,赵雨,刘杰
关键词:
云存储高并发写操作
结项摘要

云存储平台技术是当今计算机互联网行业的热点研究内容。虽然对于适应高读操作、低写操作(written once, read often, never modified, rarely deleted)的云存储平台相关的技术已经逐步成熟并在一些领域内得以广泛应用,但对于有着高并发写操作需求的云存储技术并未得到深入研究和发展。如何能提高云存储平台的数据分布平衡性,如何提高节点自适应,特别是如何能让平台适应大量的高并发写操作,都是云存储技术发展亟需解决的难题。.本项目针对基于改良的chord模型的数据布局和提取技术、基于paxos双通道写操作机制技术以及弹性粒度锁技术进行研究。以期实现适应高并发写操作的云存储平台,并最终落实理论研究,构建实际应用平台。不但有巨大的示范作用,还可以在实践上得到实测数据和反馈,检验和强化研究成果。通过本项目的研究我国在云存储技术领域可以达到国际领先水平。

项目摘要

当前云计算的发展已日趋成熟,云计算应用越来越受用户青睐。作为云计算的一个主要分支,云存储技术的发展极为迅猛。本项目主要针对云存储相关技术及云存储底层的数据中心基础设施相关内容展开研究工作。. 首先,我们依照项目预定研究计划,重点针对云存储平台核心技术展开研究。主要研究进展包括:搭建基于局域网加速的工作组云存储服务系统,设计高效的云存储系统负载均衡算法,构建移动云存储系统及结合云存储的虚拟化云服务平台。. (1)构建面向工作组的云存储服务系统原型,主要功能是为用户提供云存储服务,帮助用户备份文件资料、管理文件修改版本、实时同步文件等。. (2)针对当前开源云存储系统中Chunk Server负载均衡算法的缺陷,提出对权值调整增量的改进,通过将服务器性能和用户连接数这两种因素进行量化处理,并在此基础上重新定义权值,给出新的计算方法。. (3)构建一套面向Android移动客户端的云盘系统。并在云存储平台基础上进一步构建一个面向高校,科研机构等社会组织的免费开源的高稳定性在线虚拟化云平台,以此作为云计算科研实验平台。. 其次,我们从云存储应用及平台的研究过渡到底层支撑云存储的数据中心基础架构的研究。重点研究数据中心内部面向多资源环境的数据流调度,以及基于deadline的数据流调度。. (1)当前的多资源环境下的数据流调度方法大多只关心为数据流提供公平的服务分割。而为了实现这一调度目标,这些调度方法通常会导致极大的资源浪费。为解决这一问题,我们提出以公平性和效率为综合调度目标的新型调度方法,该方法通过降低公平性的约束来提高资源利用率和调度效率。. (2)在多资源的环境下为数据流提供公平服务的同时,如何进一步满足数据流的deadline需求是一个值得研究的问题。为此,我们提出基于deadline的新型数据流调度算法,通过引入时间戳标记来识别数据流的deadline,再通过引入调度器来依次调度不同数据流的数据包。. 项目的主要研究成果包括:发表及录用学术论文17篇,其中包括:TPDS,IEEE Network、TCOM等国际著名期刊;设计并实现“筋斗云盘”云存储系统原型一套,获得2014年全国高校云计算应用创新大赛二等奖;获得国际学术会议IUCC 2015的Best Paper Award。

项目成果
{{index+1}}

{{i.achievement_title}}

{{i.achievement_title}}

DOI:{{i.doi}}
发表时间:{{i.publish_year}}

暂无此项成果

数据更新时间:2023-05-31

其他相关文献

1

小跨高比钢板- 混凝土组合连梁抗剪承载力计算方法研究

小跨高比钢板- 混凝土组合连梁抗剪承载力计算方法研究

DOI:10.19701/j.jzjg.2015.15.012
发表时间:2015
2

面向云工作流安全的任务调度方法

面向云工作流安全的任务调度方法

DOI:10.7544/issn1000-1239.2018.20170425
发表时间:2018
3

采煤工作面"爆注"一体化防突理论与技术

采煤工作面"爆注"一体化防突理论与技术

DOI:10.13247/j.cnki.jcumt.001297
发表时间:2021
4

东部平原矿区复垦对土壤微生物固碳潜力的影响

东部平原矿区复垦对土壤微生物固碳潜力的影响

DOI:10.13225/j.cnki.jccs.xr21.1686
发表时间:2022
5

倒装SRAM 型FPGA 单粒子效应防护设计验证

倒装SRAM 型FPGA 单粒子效应防护设计验证

DOI:
发表时间:2016

金英伟的其他基金

批准号:60973116
批准年份:2009
资助金额:30.00
项目类别:面上项目

相似国自然基金

1

云平台中可优化分析操作的海量医学图像存储管理技术

批准号:61462012
批准年份:2014
负责人:李晖
学科分类:F0202
资助金额:45.00
项目类别:地区科学基金项目
2

基于数据共享的高并发图计算系统及核心技术研究

批准号:61472009
批准年份:2014
负责人:代亚非
学科分类:F0204
资助金额:80.00
项目类别:面上项目
3

构建高可信云操作系统的若干关键技术研究

批准号:61672062
批准年份:2016
负责人:沈晴霓
学科分类:F0205
资助金额:62.00
项目类别:面上项目
4

云计算平台上多类型任务的自适应调度技术研究

批准号:61240035
批准年份:2012
负责人:强彦
学科分类:F0202
资助金额:18.00
项目类别:专项基金项目