[发明专利]数据存储IO请求的流控方法和相关装置 有效
申请号: | 202210962809.7 | 申请日: | 2022-08-11 |
公开(公告)号: | CN115314439B | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 刘宝琴;罗向征 | 申请(专利权)人: | 迈普通信技术股份有限公司 |
主分类号: | H04L47/10 | 分类号: | H04L47/10; H04L67/10;G06F3/06 |
代理公司: | 北京超凡宏宇知识产权代理有限公司 11463 | 代理人: | 张欣欣 |
地址: | 610041 四*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数据存储IO请求的流控方法和相关装置,涉及数据存储领域。该方法包括:通过在当前流控周期内,针对共享请求队列的各前端块设备,分别计算用于衡量该前端块设备对应的后端存储服务状态的指标数据,并根据各前端块设备对应的指标数据,启动或停止各前端块设备对应的子流控开关,实现对前端块设备发往请求队列的数据存储IO请求进行流控。本发明采用软硬件协同流控的方法,可实现在多个前端块设备共享资源的场景下,对每个前端块设备进行独立流控,避免了前端块设备存储访问错误以及不同服务能力的存储设备共存时性能相互影响,有效提升了智能网卡的整机存储IO性能和单个前端块设备的存储IO性能。 |
搜索关键词: | 数据 存储 io 请求 方法 相关 装置 |
|
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于迈普通信技术股份有限公司,未经迈普通信技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://qyhapp.sbs/patent/202210962809.7/,转载请声明来源球友会app。
- 同类专利
- 一种数据中心算力调度方法、系统、设备及可读存储介质-202311218708.X
- 陈康壮;谭长华; 车科谋;彭韧辉 - 广东云下汇金科技有限公司
- 2023-09-21 - 2023-10-27 - H04L47/10
- 本申请提供了一种数据中心算力调度方法、系统、设备及可读存储介质,首先通过远程监测设备获取环境数据的二维矩阵,对环境数据的二维矩阵进行频域特征变换后量化编码得到压缩数据块,再获取压缩数据块在传输时对应的比特数,得到比特特征值,记录上一调度周期中远程监测设备的历史比特特征值序列,并根据历史比特特征值序列确定各个远程监测设备对应的算力信息熵,得到算力信息熵集合,对算力信息熵集合进行权重标准化,得到算力调度权重矩阵,最后根据算力调度权重矩阵调整下一调度周期中各个远程监测设备对应区域占用的浮点数,实现了一种能够根据远程监测设备在上一调度周期传输的数据情况,实时调度各区域占用的计算资源的算力调度方法。
- 访问流量的分配方法、装置、设备及存储介质-202311203656.9
- 夏凯;张雷;任传敏 - 阿里健康科技(中国)有限公司
- 2023-09-19 - 2023-10-27 - H04L47/10
- 本说明书实施方式提供了一种访问流量的分配方法、装置、计算机设备及存储介质。所述方法包括:获取多个流量处理链路针对访问流量的需求度取值;其中,所述需求度取值用于表示为达成指定目标,每个流量处理链路对于获得访问流量的需求迫切程度;其中,所述指定目标用于表示访问流量被多个流量处理链路处理后,处理结果的目标;其中,所述需求度取值随着所述处理结果相对于所述指定目标的差距动态变化;根据所述需求度取值向多个流量处理链路分配访问流量,以使所述处理结果趋于所述指定目标。使得每个流量处理链路上被分配到的访问流量与该流量处理链路的处理能力更加匹配,进而使访问流量在多个流量处理链路间的分配更加合理,提升整体服务质量。
- 路径探测方法、装置及系统-202210389758.3
- 钱国锋;杨平安;赵然晓;夏阳 - 华为技术有限公司
- 2022-04-13 - 2023-10-27 - H04L47/10
- 一种路径探测方法、装置及系统,属于网络技术领域。该方法包括:第一节点接收第一探测报文,第一探测报文携带多路径探测指示信息,该多路径探测指示信息用于指示探测报文用于探测源节点到目的节点的多条路径;第一节点向第二节点发送第二探测报文,第二探测报文是第一节点基于第一探测报文获得的;第一节点向第三节点发送第三探测报文,第三探测报文是第一节点基于第一探测报文获得的;第二探测报文与第三探测报文的发送间隔为第一间隔,第二节点和第三节点是第一节点的两个下一跳节点。本申请能够降低大量探测报文在同一时间到达同一网络节点的概率,保证探测结果的准确性。
- 数据存储IO请求的流控方法和相关装置- 202210962809.7
- 刘宝琴;罗向征 - 迈普通信技术股份有限公司
- 2022-08-11 - 2023-10-24 - H04L47/10
- 本发明公开了一种数据存储IO请求的流控方法和相关装置,涉及数据存储领域。该方法包括:通过在当前流控周期内,针对共享请求队列的各前端块设备,分别计算用于衡量该前端块设备对应的后端存储服务状态的指标数据,并根据各前端块设备对应的指标数据,启动或停止各前端块设备对应的子流控开关,实现对前端块设备发往请求队列的数据存储IO请求进行流控。本发明采用软硬件协同流控的方法,可实现在多个前端块设备共享资源的场景下,对每个前端块设备进行独立流控,避免了前端块设备存储访问错误以及不同服务能力的存储设备共存时性能相互影响,有效提升了智能网卡的整机存储IO性能和单个前端块设备的存储IO性能。
- 流量控制方法、装置、系统、电子设备及存储介质- 202310717340.5
- 江鹏;黄伟琦;曲春雨 - 北京百度网讯科技有限公司
- 2023-06-16 - 2023-10-24 - H04L47/10
- 本公开提供了流量控制方法、装置、系统、电子设备及存储介质,涉及数据处理领域,尤其涉及大数据、云计算、语音技术领域。具体实现方案为:接收目标对象的处理请求;处理请求中包括目标任务的任务标识以及目标任务的处理进度;在任务集合中查找任务标识,得到查找结果;任务集合用于记录目标对象的并发任务的描述信息;基于查找结果和目标任务的处理进度,确定目标对象的并发任务的第一总量;在目标对象的并发任务的第一总量大于总量阈值的情况下,拒绝目标任务。基于本公开实施例中提出的任务集合中的任务标识以及处理进度,可准确的统计得到目标对象的并发任务的总量,以便于实现对该目标对象的限流。
- 数据传输方法、装置、处理设备及介质-202010793135.3
- 姜曦楠;朱子霖;周飞虎; 郭振宇 - 腾讯科技(深圳)有限公司
- 2020-08-07 - 2023-10-24 - H04L47/10
- 本发明实施例基于云技术公开了一种数据传输方法、装置、处理设备及介质,其中方法包括:获取目标对象的计算图中的多个目标节点的支配点信息;根据各目标节点的支配点信息,将至少两个目标节点聚合为目标聚合节点;采用所述目标聚合节点更新所述计算图,并将更新后的计算图发送至计算设备,所述更新后的计算图用于指示:所述计算设备按照所述目标聚合节点的指示,在所述目标对象的计算过程中对所述被聚合的目标节点所表示的数据处理操作的执行结果数据进行聚合,并传输聚合结果。本发明实施例可通过更新后的计算图指示计算设备对目标节点的执行结果数据进行聚合传输,从而减少数据传输的次数,以节省网络资源并缩短传输总时长。
- 车载以太网带宽分配方法、装置、电子设备及存储介质-202010747117.1
- 李小娟; 余健 - 华人运通(江苏)技术有限公司
- 2020-07-29 - 2023-10-24 - H04L47/10
- 本申请实施例提供一种车载以太网带宽分配方法、装置、电子设备及存储介质。具体实现方案为:根据使用车载以太网的各个应用的带宽,计算车载以太网的使用带宽;判断车载以太网的使用带宽是否大于或等于预定的带宽限制阈值;在车载以太网的使用带宽大于或等于预定的带宽限制阈值的情况下,调整全部应用中的至少部分应用的流量数据的传输时间,以改变分配给全部应用中的至少部分应用的带宽,使得车载以太网的使用带宽小于预定的带宽限制阈值。本申请实施例能够根据实际使用带宽综合考虑车载以太网的带宽资源调配,减少各个应用在使用网络过程中的冲突和碰撞,提高通信质量,并且可为新增应用预留足够的带宽。
- 一种增强型业务流量控制系统及控制方法-202310670470.8
- 王冬明;谢志艳 - 上海清算信息技术有限公司
- 2023-06-07 - 2023-10-20 - H04L47/10
- 本发明公开一种增强型业务流量控制系统,所有外部系统的请求,通过统一网关访问控制模块进行流控处理和分发到内部业务系统,根据外部请求的机构类型和请求类型获得实现配置的策略,根据最大请求数和时间间隔进行判断,是调用固定窗口累计算法,还是调用滑动窗口累计算法进行流量控制,流量累计数缓存更新模块分别实现固定窗口累计算法和滑动窗口累计算法,流控配置监控模块判断当前累计值是否超过流控配置值,是则拒绝访问,否则允许访问。本发明的优点是降低了存储空间和计算的复杂度。
- 一种网络流量的管控方法及系统-202010055718.6
- 刘坤 - 中国平安人寿保险股份有限公司
- 2020-01-17 - 2023-10-20 - H04L47/10
- 本发明适用于互联网技术领域,提供了一种网络流量的管控方法及系统,包括:若接收到目标接口发送的数据包,则识别所述目标接口的接口类型以及所述数据包的目的地址;根据所述接口类型以及所述目的地址,确定所述目标接口的关联网关;通过所述关联网关获取当前的网络运行参量,并将所述网络运行参量导入到所述关联网关预设的流量管控算法,输出流量管控结果;若所述流量管控结果为流量正常,则通过所述关联网关将所述数据包转发给所述目标地址对应的通信对象。本发明能够通过该关联网关对应的流量管控算法实现对接收到的数据包进行网络流量的限流操作,使得服务响应系统能够适用于多类型用户以及多应用场景的环境,提高了限流操作的准确性以及流量管控的适用范围。
- 一种针对数据中心网络的数据流调度系统-202111318727.0
- 葛钊;李文信;曲雯毓 - 天津大学
- 2021-11-09 - 2023-10-17 - H04L47/10
- 本发明公开了一种针对数据中心网络的数据流调度方法;所述方法是基于数据流调度系统,所述数据流调度系统包括数据发送端、数据接收端,所述数据发送端通过设置在交换机中的队列优先级处理模块,将组成数据流的每个数据包按照最少剩余处理时间优先排序传输至数据接收端;其中:所述调度系统还包括:数据流获取模块用于将数据流大小等相关信息从发送端的用户空间传递到内核空间;数据标记模块通过ipv4_change_dsfield()函数将优先级标记在数据包的包头上;队列优先级处理模块根据数据包优先级的标记进行配置和识别乱序数据包;数据包乱序处理模块对乱序数据包进行重组和检测;该发明可以在已知流量大小的前提下,有效地模拟SRPT算法调度数据流,优化数据传输的平均完成时间和尾延迟。
- 流量控制方法、系统- 202310911998.X
- 王中飞;俞贵涛 - 宁波方太厨具有限公司
- 2023-07-24 - 2023-10-13 - H04L47/10
- 本公开提供了一种流量控制方法、系统,该系统包括物联网卡平台、物联网管理平台和物联网设备;物联网卡平台用于监测物联网设备的实际使用流量;物联网管理平台用于设置物联网设备的流量阈值;基于实际使用流量和流量阈值,获取目标物联网设备,并向目标物联网设备发送第一流量控制指令;计算所有物联网设备在预设时间段内的总流量阈值和总实际使用流量之差,得到总剩余流量,并基于总剩余流量确定目标物联网设备的第一目标通信频率;目标物联网设备用于接收第一流量控制指令,并基于第一流量控制指令消耗流量共享池中的流量,以第一目标通信频率进行通信工作。本公开利用流量池中共享流量,保障设备的正常通信频率,同时提高物联网流量的利用率。
- 一种基于时间分布和总量规划的流量控制方法-202310982772.9
- 方友松;张富 - 百寻信息科技(上海)有限公司
- 2023-08-07 - 2023-10-13 - H04L47/10
- 本发明公开了一种基于时间分布和总量规划的流量控制方法,涉及流量控制技术领域,该流量控制方法由两个模块配合完成,其一为负责统计历史时间区段的数据并提供对外部模块的查询服务的统计及服务模块,以及依赖统计及服务模块的数据,进行QPS计算并进行流量控制的外部QPS控制模块,该流量控制方法包括以下步骤:统计历史上每天的自然流量:按半小时为一个时间段的粒度;根据前一天不同时段的流量水平,估算当天当前时段的流量水平,进一步估算发送给流量需求方的流量速度。本发明针对流量交易平台中,对需求方的流量在总量和流速两个方面进行优化,达到“符合”自然流量规律的放量效果,有利于需求方进行优化广告填充,进一步提升流量的价值。
- 一种基于TSN网络下的报文处理方法-202311040096.X
- 李诚祥;刘云清;颜飞;张琼 - 长春理工大学
- 2023-08-18 - 2023-10-13 - H04L47/10
- 本申请提供了一种基于TSN网络下的报文处理方法,包括遍历填写时间和报文处理时间,遍历填写时间和报文处理时间交替且周期分布,在每个遍历填写时间中,在一统计器ID对应的一容器的上次填写时间与当前时间的时间差大于相应的遍历填写间隔时,根据该统计器ID对应的带宽配置参数更新该统计器ID的对应的所述容器的容量和填写时间;并且,在每个报文处理时间中,根据一统计器ID的带宽配置参数和当前时间,更新该统计器ID对应的容器的容量和填写时间;并且,在每个报文处理时间中,还根据统计器ID的对应的容器容量对所述报文进行统计。本申请可实现容器的容量和填写时间能更及时的更新,从而提高报文的通过率及填写的及时性,从而提高了TSN网络的实时性。
- 拥塞控制方法及装置、通信网络、计算机存储介质-202310459240.7
- 冀智刚;曲迪;夏寅贲;晏思宇 - 华为技术有限公司
- 2019-06-17 - 2023-10-13 - H04L47/10
- 本申请公开了一种拥塞控制方法及装置、通信网络、计算机存储介质,属于网络技术领域。网络设备先获取目标出端口队列在第一时间段内的统计信息,目标出端口队列为网络设备中的任一出端口队列;再基于目标出端口队列在第一时间段内的统计信息,确定目标出端口队列在第二时间段内的显示拥塞通知ECN水线,第二时间段在时序上位于第一时间段之后。在第二时间段内,当目标出端口队列的队列深度超出ECN水线时,网络设备为目标出端口队列中的数据包设置ECN标记。本申请通过网络设备实现了对出端口队列的ECN水线的动态调整,从而提高了网络拥塞控制的灵活性。
- 用于边缘终止点之间通信的传输协议-201880062200.6
- 迪尔克·特罗森;塞巴斯蒂安·罗比兹奇;斯科特·C·赫根汉 - 交互数字专利控股公司
- 2018-09-24 - 2023-10-13 - H04L47/10
- 可以提供诸如层2传输网络之类的网络中的两个或更多边缘终止点(ETP)之间的ETP传输协议。一种设备可以在网络中的边缘终止点(ETP)处接收传入的因特网协议(IP)事务。所述设备可以在所述ETP处终止所接收的传入IP事务。所述设备可以将所终止的传入IP事务映射到ETP到ETP通信上。所述设备可以控制所述ETP到ETP通信。例如,所述设备可以基于资源管理体制来控制所述ETP到ETP通信。所述设备可以将所述ETP到ETP通信映射到所述ETP处的一个或多个传出IP事务。所述设备可以将所述IP事务映射到ETP‑ETP通信上。该ETP‑ETP通信可包括一个或多个ETP流和一个或多个ETP事务。
- 数据传输方法、装置、设备及存储介质- 202310861870.7
- 彭长江 - 中创(深圳)物联网有限公司
- 2023-07-14 - 2023-10-13 - H04L47/10
- 本申请提供了一种数据传输方法,所述方法包括:对第一机器人的负荷情况进行实时监测,所述负荷情况用于指示FIFO是否有溢出风险;当所述负荷情况小于预设阈值时,指示所述第一机器人按照预设采样频率进行数据采集;当所述负荷情况大于或者等于预设阈值时,指示所述第一机器人向云端服务器发送协助指令,所述云端服务器用于根据所述协助指令判断是否存在与所述第一机器人处于同一空间且能够协助第一机器人完成任务的第二机器人,若存在,则指示降低所述第一机器人的采样频率,基于所述第二机器人的采集数据协助第一机器人完成相应的任务。此外,还提出了一种数据传输装置、设备和存储介质。
- 一种应用于采集系统中控制数据流量的方法及装置-202310780642.7
- 赵二保;袁礼山 - 安徽尚特杰电力技术有限公司
- 2023-06-28 - 2023-10-10 - H04L47/10
- 本发明提供了一种应用于采集系统中控制数据流量的方法及装置,该方法包括:S101,建立采集设备id与所述采集设备上使用的物联网卡的iccid的对应关系;S103,建立物联网卡流量池;S105,根据所述采集设备id与物联网卡iccid的对应关系、物联网卡流量池,建立动态实时采集数据与物联网卡流量的关系模型,确定采集设备的采集周期。本发明提供了一种应用于采集系统中精准控制数据流量的方法,通过建立算法模型,对每个采集设备的采集周期进行动态的调整,使系统中使用的流量不会超标,减少不必要的损失,也不会影响当前系统实时数据的采集和应用,保证了系统正常稳定运行,同时为用户选择合适的通讯流量套餐提供了有力的参考。
- 流量数据取证分析方法、装置、计算机设备及存储介质- 202310683679.8
- 马奕飞 - 台州市公安局
- 2023-06-09 - 2023-10-10 - H04L47/10
- 本发明实施例公开了流量数据取证分析方法、装置、计算机设备及存储介质。所述方法包括:将捕获数据流量条件配置以及操作按钮转化为命令行;执行所述命令行,获取流量数据包;导入历史流量数据包;对所述流量数据包以及所述历史流量数据包进行解析,以得到解析结果;保存所述解析结果;获取语音查询请求;根据所述语音查询请求从所述解析结果中查询对应的内容,并转化为语音文件;导出所述语音文件。通过实施本发明实施例的方法可实现能满足电子行业的高安全要求以及具体办案过程中的操作简便,取证速度快的场景。
- 一种信号乱序控制与速率自适应的传输装置及其传输方法-202210190453.X
- 袁结全;罗仁昌;陈世伟;胡裕赟 - 深圳市风云实业有限公司
- 2022-02-28 - 2023-10-10 - H04L47/10
- 本发明公开了一种信号乱序控制与速率自适应的传输装置及其传输方法,其装置包括速率自适应模块、请求发送模块、外部主机模块、数据接收模块和乱序控制模块;速率自适应模块用于根据不同的TAG字段区分读请求,并根据乱序控制模块的剩余缓存和存储TAG字段的先进先出队列进行速率自适应;请求发送模块用于将读请求发送至外部主机模块;外部主机模块用于发送对应的读数据至数据接收模块;数据接收模块用于将读数据发送至乱序控制模块;乱序控制模块用于进行乱序分流和二级缓存。本发明的传输装置解决了数据的乱序与速率自适应问题,同时在乱序分流缓存的基础上采用了二级缓存模块,减小了系统的缓存压力,具有结构简单和速率自适应等优势。
- 流量控制方法及装置、存储介质及电子设备-202310928182.8
- 陈凯;彭明田;王映彤;高梦瑶; 范铭烨;贺海丽;彭振;刘绍杰 - 中国民航信息网络股份有限公司
- 2023-07-26 - 2023-10-03 - H04L47/10
- 本发明提供了一种流量控制方法及装置、存储介质及电子设备,该方法包括:当服务器集群中的服务器接收到用户发送的业务请求时,判断用户是否符合流量控制条件;若用户符合流量控制条件,则确定流量配置数量,即允许用户请求执行的业务请求数量;确定用户对应的全局统计数量和本地统计增量;对全局统计数量和本地统计增量进行求和运算,得到流量统计数量;依据流量配置数量和流量统计数量,判断用户是否符合超量条件,若符合条件,则拒绝当前的业务请求,以对业务系统进行流量控制。应用本发明的方法,在流量控制过程中可结合用户在业务系统中的整体流量实现流量控制,有利于提高流量控制的准确性,保障系统的平稳运行以及资源的合理分配。
- 一种限流处理方法、装置、电子设备及计算机可读介质-202210301736.7
- 吴大帅;刘军飞 - 北京京东拓先科技有限公司
- 2022-03-25 - 2023-10-03 - H04L47/10
- 本申请公开了限流处理方法、装置、电子设备及计算机可读介质,涉及计算机技术领域,该方法包括:接收业务访问请求,获取对应的渠道标识,调用渠道标识对应的渠道的限流配置信息,确定对应的限流模式;根据限流模式判断是否为单实例限流模式,若是,获取渠道对应的单实例单位时间内的访问量并更新,进而将更新后的访问量与预设的缩容访问量阈值或预设的扩容访问量阈值进行比对,确定渠道对应的单实例进行缩容或扩容,以执行业务访问请求;若否,则获取渠道对应的各个单实例,切换各个单实例的限流配置信息为分布式集群限流配置信息,以基于切换后的各个单实例执行业务访问请求。从而实现对服务器资源的动态分配,提高系统稳定性,给业务赋能。
- 数据分流传输方法、装置、电子设备及存储介质-202310841193.2
- 赵静;张婷 - 中国电信股份有限公司
- 2023-07-10 - 2023-10-03 - H04L47/10
- 本公开提供了一种数据分流传输方法、装置、电子设备及存储介质,涉及数据传输技术领域。该方法包括:接收应用对应的应用数据;从数据汇聚节点获取应用对应的数据分流策略信息;若监控终端生成应用对应的数据分流策略终端偏好信息,获取应用对应的数据分流策略终端偏好信息;根据应用数据,生成数据传输报文,根据数据分流策略终端偏好信息,生成带有控制标识的数据传输报文;基于数据分流策略信息,将数据传输报文和带有控制标识的数据传输报文,通过第一数据传输链路和/或第二数据传输链路,发送给数据汇聚节点,以使数据汇聚节点基于数据分流策略终端偏好信息,对数据分流策略信息进行处理。本公开能够适应终端变化的分流需要,灵活性更好。
- 专利分类