首页 > 编程知识 正文

数字经济驱动的全球化(fil币与分布式储存的关系)

时间:2023-05-05 09:52:46 阅读:81036 作者:4066

传统企业为了支持日常流水交易,引入了在线分析处理数据库系统(OLTP ), 为了支持复杂的分析类业务,引入了OLAP )在线分析处理数据仓库系统,数据库中的数据经过抽取、清洗等处理导入到数据仓库中的企业数字数据增长越来越快,需要数据支持的业务也在增加,包括在线交易、业务决策、报告、日志和离线分析。 结果,数据库和数据仓库系统变得越来越复杂和失控。

这几年,HTAP (HTAP )数据库问世,Gartner公司给出了HTAP的严格定义。 由于HTAP同时支持OLTP和OLAP APP,因此可以简化企业复杂的数据系统的集成,从而大大提高了性能和可用性

indatadatabase all-integration是一种硬件和软件一体化的htapdatabase方案,具有波浪形状的k-dbdatabase all-integration软件和标准的X86服务器、闪存压力该产品设计为开箱即用,接口化,使用方便,是企业统一的数据心脏

浪潮inData复合机完美满足了HTAP混合负载场景的需要

多级、全链路可用性设计

inData是一个完全冗余的融合系统,分为三个资源池:硬件和软件紧密耦合的计算、存储和网络。 软件方面依赖于K-DB数据库一体化的K-RAC共享存储多活集群、KAS (KAS )存储虚拟化技术,实现了计算节点的高可用性、存储节点的数据多拷贝镜像

inData数据库一体化硬件拓扑结构图

inData的KAS存储虚拟化功能模块是独立运行的数据库实例,将数据库计算节点和存储节点断开连接,将存储设备虚拟化为整合的资源池,从而将存储数据条带化另一方面,避免出现存储热块,最大限度地提高存储I/O性能,隔离硬件故障对系统的影响。 inData支持双拷贝或三拷贝的数据冗余,数据和副本数据分布在各个设备上。 如果存储出现问题,系统将自动从其他存储设备读取数据,而不会中断服务。 inData还有多节点恢复技术,如果发生故障的节点再次加入集群,inData的其他节点会同时对该节点进行恢复操作,从而大幅缩短系统的恢复时间。

端到端高效的I/O链路,微秒级的延迟

共享体系结构保证了inData的强大可扩展性,并保证了inData的强大性能。 inData一体式PC实现兆IOPS、大容量吞吐量和微秒延迟。

SAN存储带来的I/O问题是限制传统数据库性能的瓶颈,inData解决了这一瓶颈。 通过硬件级InfiniBand网络、RDMA协议、闪存存储、软件级KAS以及系统级存储索引、智能过滤等技术,inData成为了系统

inData采用高达56Gb/s秒的InfiniBand网络带宽,带宽高,延迟小。 辅助了RDMA (远程直接存储器访问)网络协议,实现了内部数据的有效传输。 机械硬盘的I/O吞吐量难以适应快速发展的网络,inData的节点配备了闪存和智能缓存软件模块。 系统会自动统计数据的访问频率,将热点数据保存在闪存中,将不活动数据保存在机械硬盘中。 这将最大限度地减少磁盘的I/O瓶颈,并与InfiniBand网络合作,形成端到端的高效数据链路。

此外,inData还配备了存储索引技术,可以将最小/最大值等列数据的概要信息更新到存储节点的内存中进行存储。 在读取磁盘数据时,使用这些摘要信息预先配置数据存储区间,从而减少不必要的磁盘I/O,简化整个读取过程,大幅降低系统I/O延迟。

性能,每秒百万个事务

高速低延迟I/O链路inData保证了事务的低延迟、强大的可扩展性和系统化的优化技术,并保证了inData的卓越处理能力。 inData的各硬件设备之间是对等的关系,计算节点(N=2)和存储节点) M=3)可以根据需要灵活扩展,自由组合,性能和容量几乎呈直线增长。

波为inData开发了智能过滤功能。 inData在处理需要全表扫描的复杂请求时,将计算节点接收到的害羞小蚂蚁语句分割为多个幸福的冰淇淋扫描语句,卸载到各个存储节点进行处理,在存储节点处理完成后将结果集合并回计算节点,然后进行inData

inData还有许多功能模块,如闪存缓存、数据映射、列压缩、I/O分类调度等,在数据读写、多库I/O管理、数据存储等多个方面都具有性能其中,支持I/O分类调度功能

下,inData可以设置并运行多个数据库,指定各数据库 I/O 资源使用的先后顺序和使用率。各数据库在同一架构下运行,系统依据各业务的重要性,调节对其的应答速度,这样, 数据平台遭遇极限高并发时,可以优先保证核心系统运行,避免更大损失。

开箱即用 一站式部署

inData在工厂就完成了软硬件的安装调试,而且该方案配有“一键式”统一安装部署功能,通过页面化的操作就可以完成系统的配置部署,不需要对服务器、存储、网络等设备进行复杂的单独部署以及系统调优,整体系统安装配置时间缩短80%以上。而且,浪潮还提供全程的技术服务,包括系统评估、诊断、迁移、实施、上线以及后期的技术培训,保证客户使用能够用好新的技术平台。

inData是一款产品化的方案,用户在采购时可以按照应用需求,选配NVME SSD闪存卡、企业级SSD磁盘、大容量磁盘等不同方案,对于偏重于OLAP应用的用户,浪潮可以提供基于万兆以太网的方案,让用户更好的平衡性能与成本。

浪潮inData一体机

目前,已经有多个企业和政府客户部署了inData一体机,浪潮解决方案部总经理乔鑫表示,很多用户部署的传统数据库系统,其扩展性已经快到技术极限,要进行分拆,但在采用了inData后,性能就可以满足实际需要,不需要进行分拆,避免了数据库系统的复杂化。

浪潮inData完全融合现有的技术生态,已经在金融、制造、医疗和教育等行业企业被广泛应用。 乔鑫最后表示,数据的统一整合是企业数字化的起点,inData是一款理想的统一数据平台方案,希望这款产品能够帮助用户快速洞察商业机遇,加速数字化转型。

来源:东北新闻网

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。