0 引言
云计算是一个热门研究方向,许多企业都相继开发出自己的云端系统进行运算与研究。然而,只要是计算机就会发生错误[1]。在云计算中由于资源的高度动态性和异构性,使云计算平台较传统计算平台出错几率更高[2]。为减少发生错误所造成的损失,需要容错机制保证系统在故障情况下也能持续运行[3]。容错包括故障检测或识别、故障预测和故障恢复3个策略。故障检测或识别通常用于检测故障类型,然后用最合适的方案进行故障诊断。故障预测侧重于根据历史数据预测故障发生的概率,并应用合适的调度策略降低故障概率。故障恢复常用技术有作业复制和检查点[4]。作业复制的优点是不需要重新计算,因为每个作业都会同时分配给不同资源的多个副本,如果其中一个失败,其它作业副本仍然可以处理[5]。但是,这种技术不是很有效,因为作业的副本单独执行可能会占用作业队列。检查点是另一种技术,它要求将运行任务的状态存储在一个已定义的检查点上。如果作业执行失败,则从最后一次保存的状态重新启动任务执行而不是从头开始,这样可极大地节省任务执行时间。
针对云计算容错技术,国内外学者进行了相应研究,提出了许多算法:文献[6]提出了周期任务模型的容错调度算法,但是该模型要求所有任务的周期完全相同,文献[7] 研究了动态实时调度算法与速率单调算法。文献[8]讨论带固定优先级实时调度算法,这些算法均没有考虑系统的容错问题。文献[9]针对当前计算机系统计算和存储资源丰富但并行文件系统写带宽提高相对滞后的特点,提出了基于内存缓存的异步检查点容错技术。文献[10]提出了一种主备份的容错调度策略用于对宿主机的错误容忍,其使用主从宿主机结构,需要设置多个宿主机作为备份宿主机,对宿主机资源浪费比较严重。文献[11]提出了增强型蚁群优化算法(Enhanced Ant Colony Optimization, EACO),根据任务和资源数量引入动态蒸发速率确定信息素蒸发速率,确保每个资源处理的任务数量很多时蒸发率很小,否则蒸发率会很高,实验结果表明控制蒸发率可有效平衡所有资源的负载。文献[12]提出了基于信任的蚁群优化调度算法(Trust-based Ant Colony Optimization,TACO),旨在尽量减少作业完成时间,平衡所有可用资源的工作量,同时引入面向资源的信任机制处理资源故障问题。文献[13]通过ACS算法和有向无环图(DAG)方法相结合,提出了一种新的云计算故障管理算法,该算法可提供有效的资源分配但没有恢复操作。文献[14]提出基于遗传算法(Genetic Algorithm,GA)的混合蚁群优化算法,以克服元启发式算法不受控制的性质,但会降低云计算分配性能。文献[15]提出在云计算中使用检查点的容错蚁群优化算法(Fault Tolerance ACO,FTACO),有效利用云计算中的动态资源解决故障和负载平衡问题。文献[16]提出了使用蚁群优化算法进行云计算的容错作业调度以满足服务质量需求,该服务使用资源失败率和基于检查点的回滾恢复策略。在任务执行期间,故障索引管理器将不断与检查点处理程序交互以记录资源故障率,每发生一次故障,都将应用回滚恢复技术以节省执行时间,该算法减少了任务总执行时间,提高了吞吐量和平均周转时间。 1 系统建模
蚁群优化算法是一种生物启发式算法,为求解优化问题和设计元启发式算法提供一个自适应概念[17]。蚁群优化算法在处理调度和负载均衡时非常有效,且在查找最佳路径过程中出现故障时可构建替代路径,图1为蚁群在查找最佳路径期间出现故障最终找到替代路径的例证[18]。
流程如下:①通过蚁群1建立最优资源a的路径路线;②资源a执行任务失败,重新调用提交流程;③通过蚁群1建立替代资源b的新路径,并完成任务的提交和处理;④从不同来源的蚁群2选择由前一个蚁群1构造的最优路径分配下一个任务。
本文受蚁群寻找最适合资源的最佳路径概念启发,基于此概念进一步扩展,提出基于蚁群算法的动态容错技术(Dynamic ACS-based Fault Tolerance, DAFT),使蚁群能够在重新提交任务过程中执行资源研究,以确保任何执行失败的任务都被完全处理。此外,进一步改进信息素更新技术,作为一种惩罚失败的资源机制,使其不那么有吸引力以最终减少失败的可能性,并根据资源适当控制任务分配。
基于蚁群算法的动态容错算法对每个任务都会生成一个蚁群,根据信息素值选择执行资源。初始化的信息素值首先被启动,以确定所有资源的状态,然后提交队列中的第一个任务。资源的选择是基于信息素初始计算或信息素更新过程的信息素值的量。在执行过程中,每个任务被分成几个检查点,这些检查点将按顺序处理以保持输出的真实性。如果任务执行成功,蚁群会更新全局信息素再执行后增加的信息素;但是,如果在执行过程中出现任何故障,最后一个检查点将重新提交给另一个合适的资源,并且会更新本地信息素,此外每个成功的检查点还将更新本地信息素。最后,资源将与更新的信息素一起发布,用于下一个任务分配。利用重新提交的新资源、检查点技术和资源执行历史记录的方法,减少任务执行和处理时间,提高云计算环境的成功率。
2 基于蚁群算法的动态容错技术
2.1 算法描述
在初始任務期间,每个资源应具有预定义的参数,例如处理器速度、当前负载和带宽以及处理元素的数量,所有这些参数将用来计算初始的信息素值,[PVij] 用于每个资源[i]和任务[j]的组合。 初始信息素值由公式(1)给出。
假定所有资源都是相互关联的,这意味着如果任务来自特定资源,那么它就可以分配给所有可用的资源。[PVmatrix] 中的每一行都列出了资源[i]的可能任务列表,任务[j]的可能资源列表。
每列中最大的信息素值被蚁群视为最适合的资源,并且该任务分配给选定索引所引用的资源进行处理。 一旦任务被分配,相应[PVmatrix]中的信息素值将根据公式(3)更新全局信息素,以减少分配给当前资源的信息素量,使它变得对下一个蚁群不具有吸引力,让其探索其它资源。
2.2 算法流程
图2为DAFT算法流程,实现步骤如下:
(1)初始化。配置所有参数,根据公式(1)计算每个资源的初始化信息素值,为每项任务生成一个单独的蚁群,在第一次迭代中确定具有最高初始信息素的资源。
(2)开始循环。根据蚁群优化算法思想确定最适合的资源,然后发出任务提交信号,通过公式(3)更新全局信息素的值,确实任务是否完成。如果任务完成则结束,否则继续判断任务执行状态。如果任务执行成功就保存检查点,增加成功计数,并根据公式(1)-公式(5)更新局部信息素值。如果任务执行失败,则检索最后一个检查点,重新提交,增加失败计数,并根据公式(5)更新局部信息素,重复步骤(2)操作。
(3)任务状态。任务完成时,终止执行。
3 实验结果
为了验证本文的DAFT算法性能,定义平均成功率为70%(0.7),误差范围用标准偏差±0%(0.0)~±30%(0.3)表示。使用具有标准偏差的伪随机算法分配成功率,在初始化过程中定义每个单独资源范围。每种资源具有不同的成功率,且这些信息在资源分配期间不被蚁群知道。为确保实验的可靠性,每个资源都设置为具有相同的处理能力,参数如表1所示。
在云计算环境中,除了处理能力之外,每个可用资源都具有不同的适应性。在这种情况下,可使用最小和最大适应值形成适应范围。实验结果表明,启发式能够改善任务分配过程并最终提高云计算环境性能。随着执行深入,成功和失败的次数被记录并最终影响资源信息素值的蒸发。可根据资源适应度动态分配任务,如资源的成功率为0%,则分配给它的任务量最少。另一方面,如果资源的成功率非常高,则会分配最多的任务。除了在调度或重新提交过程中考虑资源适应性以外,检查点还允许从最后保存的状态重新提交失败的任务,这大大减少了处理时间,因为任务不需要从头开始。
4 结语
为了提高云计算容错性能,本文提出在云环境下基于蚁群算法的动态容错技术,利用检查点回滚技术消除从一开始就重新启动任务,减少了任务总执行时间,提高了吞吐量和平均周转时间。在资源分配期间,根据其适合度通过蚁群算法的启发式能力选择最佳资源,不但减少了每个任务的处理时间,还提高了云计算环境的成功率。与TACO算法和FTACO算法进行比较,仿真结果表明,本文方法在容错性上明显优于TACO算法和FTACO算法,最大限度提高了云环境下的容错性能。但是,在任务调度过程中,保存检查点的数量太多会加大数据量计算,因此如何控制保存检查点数量是后续研究目标。
随着天气转暖,各地项目工地建设现场忙碌而有序,建设者们使用绿色施工的“加减乘除”,最大限度地节约资源,让工地告别“尘土飞扬”,减少施工对环境负面影响。“加”强BIM技术运用当下,一些施工单位积极运用BIM(建筑信息模型)、大数据、云计算等信息化技术组织绿色施工,针对施工过程中的关键技术、施工重难点方案设计等利用BIM技术进行研究、比选、优化,确定最优方案,不断提高施工过程中的精细化水平,一方面有利...
近年来,抗心绞痛用药市场作为心血管疾病治疗的重要细分领域,已形成规模超6亿元的稳定赛道。这一市场长期由跨国药企主导,但近期随着国药集团的强势入局,竞争格局或将迎来重塑。作为中国医药行业的“航母级”央企,国药集团凭借其全产业链布局和研发实力,正试图在这一领域开辟新的增长极。政策红利与技术突破的双重驱动抗心绞痛用药市场的扩容与我国心血管疾病发病率持续攀升密切相关。世界卫生组织数据显示,中国心血管病患者...
前言尽管风湿免疫疾病的治疗在过去的一个世纪里取得了显著进展,但目前的治疗方法仍然不能永久治愈该类疾病,且作用机制不够精确,可能会增加感染的发生风险。2023年,此类疾病的治疗迎来的重大进展有望改善现有治疗的局限性。本文重点介绍三种主要的新兴疗法,即嵌合抗原受体(CAR)T细胞广泛靶向B细胞、精准细胞疗法选择性靶向自身反应性B细胞以及单克隆抗体和双特异性抗体靶向自身反应性T细胞。注:自身反应性B细胞...
2023年欧洲肿瘤内科学会亚洲年会(ESMOASIA)将于12月1日至3日在新加坡举行。ESMOASIA是亚太地区讨论肿瘤学领域最新研究数据和前沿临床进展的领先平台。医脉通团队将再赴新加坡,第一时间报道学术前沿,带您领略肿瘤诊疗的“攻守之道”。 大会亮点 ESMOASIA年会重点关注亚太区域特性,大会披露的众多研究多是针对亚太地区人群,包括多项全球重磅研究的亚洲亚组结果分析。届...
当前,正值高校毕业生求职高峰期。教育部近日发文提醒毕业生求职需做到“五防三要”,避免踩“坑”。 教育部提醒,求职中要严防非法机构以介绍工作为名,向求职者收取高额中介费,却找借口拖延或直接不履行合同;要防用人单位或中介机构以用工为名收取报名费、体检费、培训费、押金、岗位稳定金、资料审核费、服装费等费用,再以各种理由拒绝毕业生入职或中途辞退。凡是在求职中遇到此类情况,要拒绝支付入职前要求交纳的各种非...
一个永恒的科学问题是:什么时候能有足够的证据,以改变当前的体系框架?一项近期发表于BipolarDisord.的社论《双相障碍的神经进展假说:是时候道歉了?》(Theneuroprogressionhypothesisinbipolardisorders:timeforapologies?)[1]指出,双相障碍的治疗已达到这个临界点。 该社论指出,我们无法证实双相障碍的神经进展假说,固守...
GenAI使用规定写作和评审生成式人工智能技术(generativeartificialintelligence,GenAI)是指具有文本、图片、音频、视频、数据、代码、模式等内容生成能力的模型及相关技术。GenAI正在影响和改变学术研究和论文写作。为维护科研诚信,防范学术不端,确保科研过程和成果的真实性、准确性及透明性,《中华医学杂志》社有限责任公司(中华医学会杂志社)对在医学科技论文写作和评审...
2024年4月7日,《欧洲心脏杂志》(EHJ;IF=39.9)总结了2023年糖尿病和代谢紊乱领域最热门的10篇文章[1],一起来看看哪些研究上榜。NO.12023ESCGuidelinesforthemanagementofcardiovasculardiseaseinpatientswithdiabetes2023年ESC糖尿病患者心血管疾病管理指南原文链接:https://academic....
近年来,HR+/HER2-晚期乳腺癌的治疗格局正经历革命性变革。作为占比高达70%的乳腺癌主要亚型,这类患者长期面临CDK4/6抑制剂一线治疗进展后的方案选择困境。而随着药物A与药物B的Ⅰ期临床数据相继披露,医学界首次观察到双靶点协同作用带来的突破性曙光。从实验室到临床:Ⅰ期试验的破冰意义药物Ⅰ期临床试验如同新药研发的"探路先锋",主要评估人体对药物的耐受性、安全性及代谢特征。对于抗癌药物而言,这...
双相障碍的病程通常以抑郁相为主导。相比于躁狂,双相抑郁的治疗难度更大。目前,美国食品药品监督管理局(FDA)仅批准五种药物治疗双相抑郁,包括四种抗精神病药(卡利拉嗪、卢美哌隆、鲁拉西酮、喹硫平)及奥氟合剂。表1获FDA批准的双相抑郁治疗药物真实世界临床中,双相抑郁患者往往需要联用精神药物,其中常包括抗抑郁药。现行指南不鼓励双相抑郁患者单用抗抑郁药治疗,这种顾虑缘于抗抑郁药有可能诱发躁狂和轻躁狂发作...