分布式内存数据库
01

分布式内存数据库

概述

以内存为中心的分布式数据库、缓存和处理平台,用于事务性、分析性和流式工作负载,提供内存速度在PB级规模。为应用和不同的数据源之间提供一个高性能、分布式内存中数据组织管理的框架。更快的速度:分布式内存计算架构,性能比基于磁盘的系统架构有数量级的提升。更强的功能:全功能的分布式架构解决方案,适用于数据密集的HTAP业务场景。更低的成本:学习门槛低、部署灵活、运维简单,可轻易融入既有架构,助力既有业务低成本完成分布式架构改造。

应用场景

内存数据库

Ignite作为分布式内存数据库,它支持ACID事务,支持SQL语句,Key-value,计算器,机器学习和其他数据处理的API。Ignite持久化的内存架构允许数据和索引存储在内存和硬盘中。硬盘持久化式可选的,开启了硬盘持久化后,Ignite可以存储更多的数据,并将作为一个完整的分布式数据库。

键值数据网格

Ignite提供了丰富Key-value的相关的API,使Ignite能够作为内存网格来运行。你可以把Ignite看作一个分布式分区哈希图,每个节点拥有整个数据集的一部分。Ignite能把数据存储在内存和硬盘,因此能够存储更多的数据在物理内存。Ignite网格数据时现在在分布式系统中实现ACID事务或者原子数据更新最快的实现方式之一。

数据缓存

Ignite database caching在数据网格组件中实现。它使用户能够将最常访问的数据保存在内存中,方法是在一组计算机上对其进行分区或复制。只要内存中缓存发生更新,Ignite就可以选择将其传播到底层数据库。在简单的直写模式下,每个缓存放置和移除操作都将涉及到对持久性存储的相应请求,因此缓存更新的总体持续时间可能相对较长。

分布式数据库

Ignite自动控制数据如何分区,但是,用户可以插入他们自己的分发(亲和)功能并将各种数据组合在一起以提高效率。Ignite支持用于建模和访问数据的键值和SQL。另外,Ignite还提供强大的处理API,用于在分布式数据上进行计算。Apache Ignite可以用作支持SQL,键值,计算,机器学习和其他数据处理API的一体化分布式数据库。

SQL数据库

Apache Ignite的SQL支持级别非常广泛,因此该平台被广泛用作成熟的SQL数据库。将Ignite的SQL功能与其分布式核心结合在一起,您可以获得水平可扩展,容错且始终可用的SQL数据库。借助Ignite Durable Memory 体系结构,可以将数据和索引存储在内存中,也可以存储在磁盘上。这允许跨不同内存层执行分布式SQL操作,并通过磁盘的持久性实现内存中性能。

数据持久化

Ignite中的本地持久性可以打开和关闭。这使Ignite可以存储大于可用内存容量的数据集。如果持久化关闭,那么Ignite就可以作为一个分布式的内存数据库或者内存数据网格,这完全取决于使用SQL和键-值API的喜好。如果持久化打开,那么Ignite就成为一个分布式的,可水平扩展的数据库,它会保证完整的数据一致性以及集群故障的可恢复能力。

02

ETL数据集成套件

公司特色服务包括数据抽取、转换、加载ETL工具开发,主数据管理,云原生应用开发,ESB企业总线实施,大数据计算集群监控管理,边缘计算平台构建等。从数据端的采集到计算分析及机器学习模型建立,到最终的业务应用分析全生命周期的大数据云计算应用实施。

03

探索ETL数据集成套件

从奥软件(上海)有限公司可以为企业实施定制Ignite 技术产品,Apache Ignite是一个全功能的分布式键-值数据网格,它既可以用于纯内存模式,也可以带有Ignite的原生持久化,它也可以与任何第三方数据库集成,包括RDBMS和NoSQL。

  • 数据仓库建设服务

    数据仓库建设服务

    数据仓库建设服务

    数据中心业务应用系统软件开发,包括:数据仓库基础功能平台(含数据基础平台)、业务应用软件(以运营、维保管理业务为对象,建立活动、客流、生产过程管理等主题数据库及

04

实施案例介绍

从奥软件(上海)有限公司可以为企业实施定制Ignite 技术产品,Apache Ignite是一个全功能的分布式键-值数据网格,它既可以用于纯内存模式,也可以带有Ignite的原生持久化,它也可以与任何第三方数据库集成,包括RDBMS和NoSQL。

05

SSIS数据交换实施

采用微软SQL Server数据库组件SSIS作为ETL工具,实现业务系统数据集成到数仓数据仓库采用SQL Server 2016,部署到本地IDC机房SSIS部署到Azure云端,具有7*24监控机制数据源包括SQL Server, SAP, EXCELPortal导入数据、更新数据、日志管理,软件界面语言中文建设内容包括:SSIS抽取EXCEL数据并分发到业务系统数据库Portal管理建设IDC数据库本机备份,异机备份,云端备份Portal定制开发用户认证与鉴权。SSIS任务管理。通过SSIS应用日志···

查看详情

移动用户行为分析平台

1000万级用户访问用户行为分析:实时采集移动用户的行为数据,如启动程序、会话时长、页面跳转、完成预设任务等。根据行为数据分析用户行为,向移动应用运营商提供用户运营支撑服务。移动广告投放效果分析:从移动广告的链接展示开始,记录链接点击、谷歌商店下载、应用安装等一系列行为,以此计算移动广告投放转化率,为移动广告供应链提供广告投放效果分析服务。整合移动广告投放效果分析与用户行为分析,建立移动用户全生命周期···

查看详情

大数据智能仓储平台

一套提供生产制造信息化、自动化、智能化的软硬件整体解决方案,系统基于大数据文本分析技术、分类聚类算法、TensorFlow深度学习框架而构建的智能化仓储管理系统。通过自动仓储、自动搬运、自动化生产设备、自动化检测设备与信息化软件进行集成,对整个生产过程实现数据采集、过程监控、TPM设备管理、质量管理、生产调度以及数据统计分析,从而实现生产现场的信息化、智能化和柔性化的智能制造管理。包括智能补货预测,智能调拨分···

查看详情

企业财报自动抓取系统

一套做数据抓取入数据库,实现计算的决策引擎工具,业务人员可以自由条件判断组合计算,主要包含四大模块:1)财报辨伪评分 2)流水交叉核验 3)其它交叉核验 4)企业财务行 为评分,最终返回评分和风险提示到系统界面供客户参考。1、 登录查询界面PC 端 后台通过邮箱号或手机号等生成账号,交由客户自己安装,远程控制客户软件使用次数或时间权限。 页面分为两大类:上市公司&非上市公司上市公司——客户输入需查询企业的股票···

查看详情

移动追溯防窜货系统

一套软件系统通过扫码追溯产品流通渠道地域等信息。系统承载方式为微信公众号或者手机直接进入H5页面登录使用。系统包括公众号后台管理系统、公众号前端H5页面和数据导出解析模块三个主要模块。后台管理系统:管理员登录工作人员登录鉴权工作人员用户管理经销商信息导入经销商信息可以批量增量导入,第一次对经销商扫码时工作人员也可以通过H5页面录入经销商信息,第二次之后直接选择现有经销商;工作人员扫码使用前需要登录,后台···

查看详情