搜索到1329篇“ ERASURE“的相关文章
关于R-融合框架丢失问题
2024年
给定一个Hilbert空间中的R-融合框架,考虑移除一组元素后所产生的序列在什么条件仍是R-融合框架,即R-融合框架丢失问题。特别地,利用一个特殊的有界线性算子等价地刻画了一个给定的R-融合框架,并应用该结果给出了丢失后所产生的R-融合框架的框架界。
洪国庆万林宾张建霞
关键词:线性算子HILBERT空间
基于擦除和生成式模型的情感可解释性分析
2024年
情感可解释性分析是近年来比较新颖的研究方向,其目标是在预测文本的情感极性的同时给出决定情感极性的证据片段。该文在仅有情感分类任务数据集的基础上,提出了基于擦除的情感可解释性片段抽取方法,通过被擦除单词对情感极性逻辑判断的波动影响来决定证据的抽取。随后,利用擦除的方法使用模型对公开情感分析数据集中的部分数据进行片段抽取并人工过滤得到有监督数据,再使用T5序列生成式模型进行有监督训练,从而进一步提升证据抽取的性能。最终在“百度2022语言与智能技术竞赛:情感可解释评测”中获得第三名的成绩。
陈世男葛东来沈力行徐东钦贡正仙
一种纠删码条带化数据的一致性检查方法
2024年
纠删码冗余策略常用于分布式存储系统.在纠删码数据中,条带是一致性检查的基本单元,每个条带包含多份原始数据单元和校验数据单元.为了减少纠删码条带化数据一致性检查的读取开销,提高纠删码数据一致性检查和读后写的效率,在执行纠删码条带化数据写入时,为每个条带单元加入自修正数据标签(SCDT),后续对每个条带的一致性检查基于SCDT完成.该方法不需要读取每个条带中所有数据单元即可完成该条带的一致性检查,将一致性检查效率提升了1.7~2.6倍,并且当写入数据更新的条带单元数小于临界值时,可以有效减少写入的输入输出(IO)交互次数.本文方法可以更好地应对条带化数据组的部分更新,同时提高一致性检查效率.
许亮业石连星单蓉胜
关键词:分布式存储系统纠删码
“被遗忘权可被删除权替代说”之质疑
2024年
被遗忘权的具体构成不同于删除权。被遗忘权的实质在于遗忘,而不在于删除。被遗忘权是由遗忘权与删除权融合而成的在线权利,对个人信息的一种控制保留的权利。遗忘权是使个人信息权利主体免受过时的、不当的、不相关的负面信息困扰或伤害而设立的权利,目的是维护人的尊严和自由。程序性权利的删除权是个人信息权利主体为了实现遗忘权,向个人信息处理者请求删除,经其审查没有例外保留个人信息的必要性,依法采取删除等技术措施,区分作为被遗忘权的义务主体,以决定是否具有通知相关个人信息处理者的义务,从而达到防止个人信息扩散的目的。被遗忘权不能被删除权替代,我国应当考虑设立被遗忘权。
邾立军
关键词:个人信息保护法权利行使
个人信息删除权规则的检视与完善
2024年
我国《民法典》第1037条和《个人信息保护法》第47条对个人信息删除权作出规定,但是目前关于删除权法律适用规则的构建尚不完善。《个人信息保护法》第47条所列的“个人撤回同意”情形在适用时应有限制,通过采取更严格的告知-同意模式,增强知情同意的正当性基础,并结合《个人信息保护法》第13条的规定,寻找限制“个人撤回同意”情形适用的规范依据,结合具体个案考虑公共利益、合同等因素的限制。删除义务的履行规则尚需明确和细化,若信息处理者采取一切必要的技术措施仍不能实质性删除,允许其采用其他替代方式使信息不再与信息主体相关联,达到不可利用的程度即可,并保证不再对个人信息进行任何其他处理行为,直至技术条件成熟时进行彻底删除。
贺璟珊
关键词:个人信息保护法
基于FPGA的软硬件协同纠删码编码加速方案
2024年
纠删码容错技术已广泛应用于分布式存储系统,相较于多副本容错技术能显著降低数据存储成本,并且具有更高的数据通信可靠性和安全性,但在数据存储过程中不可避免地会引入额外的计算开销并增加编码时延,导致数据写入吞吐量降低。针对该问题,提出一种基于现场可编程门列阵(FPGA)的纠删码编码加速方案。首先,利用FPGA的高速并行计算优势对纠删码算法进行硬件加速,并实现并行处理和时序优化。然后,针对上位机与FPGA之间因传输速率和处理速率不一致造成内存中的数据溢出问题,在FPGA上拓展了片外DDR3接口用于数据缓存,提高了通信可靠性,并利用DDR3的随机存取特点实现对数据块的分片。最后,设计基于FPGA的纠删码编码硬件加速架构进行实验验证。实验结果表明,与主流Jerasure 2.0开源纠删码库相比,该方案的数据写入吞吐量提升了2.7~93.0倍,尤其对于小文件的编码写入性能提升更为显著。
杨思捷陈俊奇王勇王勇
关键词:纠删码现场可编程门阵列硬件加速分布式存储
一种基于多层次校验的低恢复成本纠删码
2024年
随着纠删码在分布式存储系统中的实际应用,纠删码为存储系统提供了更加优秀的存储效率,但当节点丢失时,相较于传统副本技术更多的网络传输带宽开销成为了造成系统性能瓶颈的关键因素。为了解决MDS编码高带宽开销对系统性能的影响,一类新型编码方案——分组码被应用在分布式存储系统中,相较于传统MDS编码能够有效地降低节点修复时的数据传输量,从而减少网络带宽需求。在Pyramid分组码的基础上进行层次扩展,提出一种HLRC(hierarchical local repair codes)纠删码。HLRC相较于LRC引入了层次编码模型,将原始数据块构建为编码矩阵,根据层次进行分别编码,生成包含数据块范围不同的局部校验块;每个层次包含的数据块数量不同,可以保证修复节点时的低修复成本,同时还拥有较高的存储效率。HLRC相较于Pyramid拥有额外的校验块冗余,能够降低校验块出错和多节点出错时的恢复开销。在基于Ceph的分布式存储系统中的实验结果表明,HLRC与Pyramid等分组码相比,单节点修复开销最高可降低48.56%,多节点修复开销最高可降低25%。
邓文杰洪铁原唐聃王燮
关键词:纠删码分组码
Linear recursive state estimation for 2-D systems with multiple memoryless erasure channels: The unknown case
This paper aims to investigate the linear minimum mean square error estimation for a two-dimensional(2-D) syst...
Fengying GeChunyan HanBufang Zhang
面向车载场景的纠删码文件系统设计与实现
2024年
车载传感器与车联网的普及可将低成本且可靠的海量数据存储需求引入车载场景。针对该需求,文章综合考虑数据编码方式、存储结构以及错误恢复机制等车载环境对文件系统的特殊需求,设计并实现了基于纠删码的文件系统(ECFS),并基于开源Fuse文件系统实现了ECFS原型。应用结果表明,在ECFS中,存储空间不仅存放文件的原始数据,还可存放由原始数据生成的冗余数据,且当页面故障发生时,该系统可利用冗余数据修复原始数据,从而避免数据丢失。通过实际测试发现,ECFS具有较高的读写性能,并能够快速修复页面级错误数据。
张浩
关键词:纠删码存储器
面向存算联调的跨云纠删码自适应数据访问方法被引量:1
2024年
日益旺盛的跨云存算联调需求对跨云数据访问速度提出较高要求.因此,跨云数据访问速度较高的基于数据冗余技术(纠删码和多副本)的跨云数据访问方法逐渐受到关注.其中,基于纠删码的跨云数据访问方法因其存储开销较低、容错性较高而成为当前研究热点.为通过缩短编码块传输用时以提高数据访问速度,现有基于纠删码的跨云数据访问方法尝试引入缓存技术并优化编码数据访问方案.然而,由于现有方法的缓存管理粒度较粗且未协同优化缓存管理与编码数据访问方案,导致其存在缓存命中量低、缓存命中增效低、低传输速度编码块访问量大等问题,使得其编码块传输用时仍较长.为此,首先提出了一种基于星际文件系统(interplanetary file system,IPFS)的跨云存储系统框架(IPFS-based cross-cloud storage system framework,IBCS),可基于IPFS数据分片管理机制实现细粒度的缓存管理,从而可提高缓存命中量.然后,提出一种面向存算联调的跨云纠删码自适应数据访问方法(adaptive erasure-coded data access method for cross-cloud collaborative scheduling of storage and computation,AECAM).AECAM以编码块(含缓存编码块)与数据访问节点的分布为依据评估数据访问过程中各编码块的传输速度,并据此制定可避免访问低传输速度编码块的编码数据访问方案.此外,AECAM可识别出其制定编码数据访问方案时易选中且实际传输速度较低的编码块,并将其缓存在数据访问节点附近,从而可同时提高缓存命中量和命中增效.最后,基于IBCS和AECAM构建了面向跨云存算联调的存储系统(cross-cloud storage system for collaborative scheduling of storage and computation,C2S2).跨云环境下的实验表明,相较于现有引入缓存的基于纠删码的存储系统,C2S2可以将数据访问速度提高75.22%~81.29%.
张凯鑫王意洁包涵阚浚晖
关键词:纠删码数据访问技术缓存

相关作者

霍志刚
作品数:68被引量:70H指数:5
供职机构:中国科学院计算技术研究所
研究主题:内存 用户级 分布式文件系统 并行通信 机群
邢晶
作品数:34被引量:26H指数:4
供职机构:中国科学院计算技术研究所
研究主题:纠删码 元数据 分布式文件系统 数据放置 机群文件系统
熊萍
作品数:27被引量:79H指数:3
供职机构:武汉科技大学城市学院
研究主题:混沌 模糊控制 粗糙集理论 粗糙集 混沌同步
艾小川
作品数:36被引量:27H指数:3
供职机构:海军工程大学
研究主题:英文 同余方程组 防欺骗 可信第三方 可视密码方案
严林
作品数:2被引量:0H指数:0
供职机构:中国科学院计算技术研究所
研究主题:CODE 海量数据存储 机群文件系统 系统I/O 数据放置