分布式数据库原理与应用（分布式数据库的工作原理是什么）

本文目录

• 分布式数据库的工作原理是什么
• 快速了解分布式数据库的主要特点
• 分布式数据库的工作原理是什么（分布式数据库的特点是什么）
• 分布式数据库系统（DDBS）概述
• 什么叫分布式数据库
• 分布式数据库系统（分布式数据库系统不具有的特点）
• 分布式数据库的简介
• 什么是分布式数据库系统分布式数据库系统有哪些特点

分布式数据库的工作原理是什么

银行的电子资金转移系统便是一个典型的分布式数据库。虽然各地的账户记录只保存于本地的数据库中，但外地用户能够十分容易地进行远程查询。这主要是因为，分布式数据库系统向用户提供了一个统一的数据操作窗口，使用户不必寻找某一数据的具体位置，更不必远程登录，就可以直接使用整个数据库系统中所有的信息。从实质上看，分布式数据库就是利用网络和软件技术，使物理空间上分散的数据库的各个部分整合为各个用户的信息空间中统一的数据库。

随着信息高速公路的发展，高性能并行计算机系统和大型数据库／信息库，以及分布式计算机系统和分布式数据库将得到进一步的开发，同时还可能涌现出许多新的计算机系统和数据库技术。

快速了解分布式数据库的主要特点

分布式数据库系统通常使用较小的计算机系统，每台计算机可单独放在一个地方，每台计算机中都有DBMS的一份完整拷贝副本，并具有自己局部的数据库，位于不同地点的许多计算机通过网络互相连接，共同组成一个完整的、全局的大型数据库。

　　这种组织数据库的方法克服了物理中心数据库组织的弱点。首先，降低了数据传送代价，因为大多数的对数据库的访问操作都是针对局部数据库的，而不是对其他位置的数据库访问;其次，系统的可靠性提高了很多，因为当网络出现故障时，仍然允许对局部数据库的操作，而且一个位置的故障不影响其他位置的处理工作，只有当访问出现故障位置的数据时，在某种程度上才受影响;第三，便于系统的扩充，增加一个新的局部数据库，或在某个位置扩充一台适当的小型计算机，都很容易实现。然而有些功能要付出更高的代价。例如，为了调配在几个位置上的活动，事务管理的性能比在中心数据库时花费更高，而且甚至抵消许多其他的优点。

　　分布式数据库系统主要特点：

　　· 多数处理就地完成;

　　· 各地的计算机由数据通信网络相联系。

　　· 克服了中心数据库的弱点：降低了数据传输代价;

　　· 提高了系统的可靠性，局部系统发生故障，其他部分还可继续工作;

　　· 各个数据库的位置是透明的，方便系统的扩充;

　　· 为了协调整个系统的事务活动，事务管理的性能花费高;

　　数据分片

　　类型：

　　(1)水平分片：按一定的条件把全局关系的所有元组划分成若干不相交的子集，每个子集为关系的一个片段。

　　(2)垂直分片：把一个全局关系的属性集分成若干子集，并在这些子集上作投影运算，每个投影称为垂直分片。

　　(3)导出分片：又称为导出水平分片，即水平分片的条件不是本关系属性的条件，而是其他关系属性的条件。

　　(4)混合分片：以上三种方法的混合。可以先水平分片再垂直分片，或先垂直分片再水平分片，或其他形式，但他们的结果是不相同的。

　　条件：

　　(1)完备性条件：必须把全局关系的所有数据映射到片段中，决不允许有属于全局关系的数据却不属于它的任何一个片段。

　　(2)可重构条件：必须保证能够由同一个全局关系的各个片段来重建该全局关系。对于水平分片可用并操作重构全局关系;对于垂直分片可用联接操作重构全局关系。

　　(3)不相交条件：要求一个全局关系被分割后所得的各个数据片段互不重叠(对垂直分片的主键除外)。

　　数据分配方式

　　(1)集中式：所有数据片段都安排在同一个场地上。

　　(2)分割式：所有数据只有一份，它被分割成若干逻辑片段，每个逻辑片段被指派在一个特定的场地上。

　　(4)全复制式：数据在每个场地重复存储。也就是每个场地上都有一个完整的数据副本。

　　(5)混合式：这是一种介乎于分割式和全复制式之间的分配方式。

分布式数据库的工作原理是什么（分布式数据库的特点是什么）

分布式数据有不同的理论支撑，TiDB官方社区（AskTUG）

目前国产数据排名靠前的可以了解下TiDB

水平弹性扩展

通过简单地增加新节点即可实现TiDB的水平扩展，按需扩展吞吐或存储，轻松应对高并发、海量数据场景。

分布式事务

TiDB100%支持标准的ACID事务。

真正金融级高可用

相比于传统主从(M-S)复制方案，基于Raft的多数派选举协议可以提供金融级的100%数据强一致性保证，且在不丢失大多数副本的前提下，可以实现故障的自动恢复(auto-failover)，无需人工介入。

分布式数据库系统（DDBS）概述

　　 一 什么是分布式数据库

　　分布式数据库系统是在集中式数据库系统的基础上发展来的 是数据库技术与网络技术结合的产物

　　分布式数据库系统有两种 一种是物理上分布的 但逻辑上却是集中的 这种分布式数据库只适宜用途比较单一的 不大的单位或部门 另一种分布式数据库系统在物理上和逻辑上都是分布的 也就是所谓联邦式分布数据库系统 由于组成联邦的各个子数据库系统是相对 自治 的 这种系统可以容纳多种不同用途的 差异较大的数据库 比较适宜于大范围内数据库的集成

　　分布式数据库系统(DDBS)包含分布式数据库管理系统(DDBMS)和分布式数据库(DDB)

　　在分布式数据库系统中 一个应用程序可以对数据库进行透明操作 数据库中的数据分别在不同的局部数据库中存储 由不同的DBMS进行管理 在不同的机器上运行 由不同的操作系统支持 被不同的通信网络连接在一起

　　一个分布式数据库在逻辑上是一个统一的整体 即在用户面前为单个逻辑数据库 在物理上则是分别存储在不同的物理节点上 一个应用程序通过网络的连接可以访问分布在不同地理位置的数据库 它的分布性表现在数据库中的数据不是存储在同一场地 更确切地讲 不存储在同一计算机的存储设备上 这就是与集中式数据库的区别 从用户的角度看 一个分布式数据库系统在逻辑上和集中式数据库系统一样 用户可以在任何一个场地执行全局应用 就好那些数据是存储在同一台计算机上 有单个数据库管理系统(DBMS)管理一样 用户并没有什么感觉不一样

　　分布式数据库中每一个数据库服务器合作地维护全局数据库的一致性

　　分布式数据库系统是一个客户/服务器体系结构

　　在系统中的每一台计算机称为结点 如果一结点具有管理数据库软件 该结点称为数据库服务器 如果一个结点为请求服务器的信息的一应用 该结点称为客户 在ORACLE客户 执行数据库应用 可存取数据信息和与用户交互 在服务器 执行ORACLE软件 处理对ORACLE数据库并发 共享数据存取 ORACLE允许上述两部分在同一台计算机上 但当客户部分和服务器部分是由网连接的不同计算机上时 更有效

　　分布处理是由多台处理机分担单个任务的处理 在ORACLE数据库系统中分布处理的例子如

　　客户和服务器是位于网络连接的不同计算机上

　　单台计算机上有多个处理器 不同处理器分别执行客户应用

　　参与分布式数据库的每一服务器是分别地独立地管理数据库 好像每一数据库不是网络化的数据库 每一个数据库独立地被管理 称为场地自治性 场地自治性有下列好处

　　◆系统的结点可反映公司的逻辑组织

　　◆由局部数据库管理员控制局部数据 这样每一个数据库管理员责任域要小一些 可更好管理

　　◆只要一个数据库和网络是可用 那么全局数据库可部分可用 不会因一个数据库的故障而停止全部操作或引起性能瓶颈

　　◆故障恢复通常在单个结点上进行

　　◆每个局部数据库存在一个数据字典

　　◆结点可独立地升级软件

　　可从分布式数据库的所有结点存取模式对象 因此正像非分布的局部的DBMS 必须提供一种机制 可在局部数据库中引用一个对象 分布式DBMS必须提供一种命名模式 以致分布式数据库中一个对象可在应用中唯一标识和引用 一般在层次结构的每一层实施唯一性 分布式DBMS简单地扩充层次命名模型 实施在网络上唯一数据库命名 因此一个对象的全局对象名保证在分布式数据库内是唯一

　　ORACLE允许在SQL语句中使用全局对象名引用分布式数据库中的模式对象(表 视图和过程) 在ORACLE中 一个模式对象的全局名由三部分组成 包含对象的模式名 对象名 数据库名 其形式如

　　SCOTT EMP@SALES DIVISION ACME

　　一个远程查询为一查询 是从一个或多个远程表中选择信息 这些表驻留在同一个远程结点

　　一个分布式查询可从两个或多个结点检索数据 一个分布式更新可修改两个或两个以上结点的数据

　　一个远程事务为一个事务 包含一人或多个远程语句 它所引用的全部是在同一个远程结点上 一个分布式事务中一个事务 包含一个或多个语句修改分布式数据库的两个或多个不同结点的数据

　　在分布式数据库中 事务控制必须在网络上直辖市 保证数据一致性 两阶段提交机制保证参与分布式事务的全部数据库服务器是全部提交或全部回滚事务中的语句

　　ORACLE分布式数据库系统结构可由ORACLE数据库管理员为终端用户和应用提供位置透明性 利用视图 同义词 过程可提供ORACLE分布式数据库系统中的位置透明性

　　ORACLE提供两种机制实现分布式数据库中表重复的透明性 表快照提供异步的表重复;触发器实现同步的表的重复 在两种情况下 都实现了对表重复的透明性

　　在单场地或分布式数据库中 所有事务都是用MIT或ROLLBACK语句中止

　　 二 分布式数据库系统的分类

　　( ) 同构同质型DDBS 各个场地都采用同一类型的数据模型(譬如都是关系型) 并且是同一型号的DBMS

　　( )同构异质型DDBS 各个场地采用同一类型的数据模型 但是DBMS的型号不同 譬如DB ORACLE SYBASE SQL Server等

　　( )异构型DDBS 各个场地的数据模型的型号不同 甚至类型也不同 随着计算机网络技术的发展 异种机联网问题已经得到较好的解决 此时依靠异构型DDBS就能存取全网中各种异构局部库中的数据

　　 三 分布式数据库系统主要特点

　　DDBS的基本特点

　　( )物理分布性 数据不是存储在一个场地上 而是存储在计算机网络的多个场地上

　　逻辑整体性 数据物理分布在各个场地 但逻辑上是一个整体 它们被所有用户(全局用户)共享 并由一个DDBMS统一管理

　　( )场地自治性 各场地上的数据由本地的DBMS管理 具有自治处理能力 完成本场地的应用(局部应用)

　　( )场地之间协作性 各场地虽然具有高度的自治性 但是又相互协作构成一个整体

　　DDBS的其他特点

　　( )数据独立性

　　( )集中与自治相结合的控制机制

　　( )适当增加数据冗余度

　　( )事务管理的分布性

　　 四 分布式数据库系统的优点

　　( )更适合分布式的管理与控制

　　分布式数据库系统的结构更适合具有地理分布特性的组织或机构使用 允许分布在不同区域 不同级别的各个部门对其自身的数据实行局部控制 例如 实现全局数据在本地录入 查询 维护 这时由于计算机资源靠近用户 可以降低通信代价 提高响应速度 而涉及其他场地数据库中的数据只是少量的 从而可以大大减少网络上的信息传输量;同时 局部数据的安全性也可以做得更好

　　( )具有灵活的体系结构

　　集中式数据库系统强调的是集中式控制 物理数据库是存放在一个场地上的 由一个DBMS集中管理 多个用户只可以通过近程或远程终端在多用户操作系统支持下运行该DBMS来共享集中是数据库中的数据 而分布式数据库系统的场地局部DBMS的自治性 使得大部分的局部事务管理和控制都能就地解决 只有在涉及其他场地的数据时才需要通过网络作为全局事务来管理 分布式DBMS可以设计成具有不同程度的自治性 从具有充分的场地自治到几乎是完全集中式的控制

　　( )系统经济 可靠性高 可用性好

　　与一个大型计算机支持一个大型的集中式数据库在加一些进程和远程终端相比 由超级微型计算机或超级小型计算机支持的分布式数据库系统往往具有更高的性价比和实施灵活性 分布式系统比集中式系统具有更高的可靠性和更好的可用性 如由于数据分布在多个场地并有许多复制数据 在个别场地或个别通信链路发生故障时 不致于导致整个系统的崩溃 而且系统的局部故障不会引起全局失控

　　( )在一定条件下响应速度加快

　　如果存取的数据在本地数据库中 那么就可以由用户所在的计算机来执行 速度就快

　　( )可扩展性好 易于集成现有系统 也易于扩充

　　对于一个企业或组织 可以采用分布式数据库技术在以建立的若干数据库的基础上开发全局应用 对原有的局部数据库系统作某些改动 形成一个分布式系统 这比重建一个大型数据库系统要简单 既省时间 又省财力 物力 也可以通过增加场地数的办法 迅速扩充已有的分布式数据库系统

　　 五 分布式数据库系统的劣势

　　( )通信开销较大 故障率高

　　例如 在网络通信传输速度不高时 系统的响应速度慢 与通信相关的因素往往导致系统故障 同时系统本身的复杂性也容易导致较高的故障率 当故障发生后系统恢复也比较复杂 可靠性有待提高

　　( )数据的存取结构复杂

　　一般来说 在分布时数据库中存取数据 比在集中时数据库中存取数据更复杂 开销更大

　　( )数据的安全性和保密性较难控制

　　在具有高度场地自治的分布时数据库中 不同场地的局部数据库管理员可以采用不同的安全措施 但是无法保证全局数据都是安全的 安全性问题式分布式系统固有的问题 因为分布式系统式通过通信网络来实现分布控制的 而通信网络本身却在保护数据的安全性和保密性方面存在弱点 数据很容易被窃取

　　分布式数据库的设计 场地划分及数据在不同场地的分配比较复杂 数据的划分及分配对系统的性能 响应速度及可用性等具有极大的影响 不同场地的通信速度与局部数据库系统的存取部件的存取速度相比 是非常慢的 通信系统有较高的延迟 在CPU上处理通信信息的代价很高 分布式数据库系统中要注意解决分布式数据库的设计 查询处理和优化 事务管理及并发控制和目录管理等问题

　　 六 分布式数据库系统 数据分片

　　类型

　　 水平分片

　　按一定的条件把全局关系的所有元组划分成若干不相交的子集 每个子集为关系的一个片段

　　 垂直分片

　　把一个全局关系的属性集分成若干子集 并在这些子集上作投影运算 每个投影称为垂直分片

　　 导出分片

　　又称为导出水平分片 即水平分片的条件不是本关系属性的条件 而是其他关系属性的条件

　　 混合分片

　　以上三种方法的混合 可以先水平分片再垂直分片 或先垂直分片再水平分片 或其他形式 但他们的结果是不相同的

　　条件

　　( )完备性条件

　　必须把全局关系的所有数据映射到片段中 决不允许有属于全局关系的数据却不属于它的任何一个片段

　　( )可重构条件

　　必须保证能够由同一个全局关系的各个片段来重建该全局关系 对于水平分片可用并操作重构全局关系;对于垂直分片可用联接操作重构全局关系

　　( )不相交条件

　　要求一个全局关系被分割后所得的各个数据片段互不重叠(对垂直分片的主键除外)

　　 七 分布式数据库系统 数据分配方式

　　( )集中式 所有数据片段都安排在同一个场地上

　　( )分割式

　　所有数据只有一份 它被分割成若干逻辑片段 每个逻辑片段被指派在一个特定的场地上

　　( )全复制式 数据在每个场地重复存储 也就是每个场地上都有一个完整的数据副本

　　( )混合式 这是一种介乎于分割式和全复制式之间的分配方式

　　 八 分布式数据库系统 体系结构

　　数据分片和数据分配概念的分离 形成了 数据分布独立型 概念

　　数据冗余的显式控制 数据在各个场地的分配情况在分配模式中一目了然 便于系统管理

　　局部DBMS的独立性 这个特征也称为 局部映射透明性 此特征允许我们在不考虑局部DBMS专用数据模型的情况下 研究DDB管理的有关问题

　　 九 分布式数据库管理系统

　　接受用户请求 并判定把它送到哪里 或必须访问哪些计算机才能满足该要求

　　访问网络数据字典 了解如何请求和使用其中的信息

　　如果目标数据存储于系统的多个计算机上 就必须进行分布式处理

　　通信接口功能 在用户 局部DBMS和其他计算机的DBMS之间进行协调

　　在一个异构型分布式处理环境中 还需提供数据和进程移植的支持 这里的异构型是指各个场地的硬件 软件之间存在着差别

　　分布式数据库管理系统

什么叫分布式数据库

1、数据存储方式不同。

关系型和非关系型数据库的主要差异是数据存储的方式。关系型数据天然就是表格式的，因此存储在数据表的行和列中。数据表可以彼此关联协作存储，也很容易提取数据。

与其相反，非关系型数据不适合存储在数据表的行和列中，而是大块组合在一起。非关系型数据通常存储在数据集中，就像文档、键值对或者图结构。你的数据及其特性是选择数据存储和提取方式的首要影响因素。

2、扩展方式不同。

SQL和NoSQL数据库最大的差别可能是在扩展方式上，要支持日益增长的需求当然要扩展。

要支持更多并发量，SQL数据库是纵向扩展，也就是说提高处理能力，使用速度更快速的计算机，这样处理相同的数据集就更快了。

因为数据存储在关系表中，操作的性能瓶颈可能涉及很多个表，这都需要通过提高计算机性能来客服。虽然SQL数据库有很大扩展空间，但最终肯定会达到纵向扩展的上限。而NoSQL数据库是横向扩展的。

而非关系型数据存储天然就是分布式的，NoSQL数据库的扩展可以通过给资源池添加更多普通的数据库服务器(节点)来分担负载。

3、对事务性的支持不同。

如果数据操作需要高事务性或者复杂数据查询需要控制执行计划，那么传统的SQL数据库从性能和稳定性方面考虑是你的最佳选择。SQL数据库支持对事务原子性细粒度控制，并且易于回滚事务。

虽然NoSQL数据库也可以使用事务操作，但稳定性方面没法和关系型数据库比较，所以它们真正闪亮的价值是在操作的扩展性和大数据量处理方面。

——关系型数据库

——非关系型数据库

分布式数据库系统（分布式数据库系统不具有的特点）

分布式数据库系统(DDBS)包含分布式数据库管理系统(DDBMS)和分布式数据库（DDB)。在分布式数据库系统中，一个应用程序可以对数据库进行透明操作，数据库中的数据分别在不同的局部数据库中存储、由不同的DBMS进行管理、在不同的机器上运行、由不同的操作系统支持、被不同的通信网络连接在一起。

一个分布式数据库在逻辑上是一个统一的整体，在物理上则是分别存储在不同的物理节点上。一个应用程序通过网络的连接可以访问分布在不同地理位置的数据库。它的分布性表现在数据库中的数据不是存储在同一场地。更确切地讲，不存储在同一计算机的存储设备上。这就是与集中式数据库的区别。从用户的角度看，一个分布式数据库系统在逻辑上和集中式数据库系统一样，用户可以在任何一个场地执行全局应用。就好像那些数据是存储在同一台计算机上，有单个数据库管理系统（DBMS)管理一样，用户并没有什么感觉不一样。

分布式数据库系统是在集中式数据库系统的基础上发展起来的，是计算机技术和网络技术结合的产物。分布式数据库系统适合于单位分散的部门，允许各个部门将其常用的数据存储在本地，实施就地存放本地使用，从而提高响应速度，降低通信费用。分布式数据库系统与集中式数据库系统相比具有可扩展性，通过增加适当的数据冗余，提高系统的可靠性。在集中式数据库中，尽量减少冗余度是系统目标之一．其原因是，冗余数据浪费存储空间，而且容易造成各副本之间的不一致性．而为了保证数据的一致性，系统要付出一定的维护代价．减少冗余度的目标是用数据共享来达到的。而在分布式数据库中却希望增加冗余数据，在不同的场地存储同一数据的多个副本，其原因是：①．提高系统的可靠性、可用性当某一场地出现故障时，系统可以对另一场地上的相同副本进行操作，不会因一处故障而造成整个系统的瘫痪。②．提高系统性能系统可以根据距离选择离用户最近的数据副本进行操作，减少通信代价，改善整个系统的性能。

分布式数据库的简介

分布式数据库是指利用高速计算机网络将物理上分散的多个数据存储单元连接起来组成一个逻辑上统一的数据库。分布式数据库的基本思想是将原来集中式数据库中的数据分散存储到多个通过网络连接的数据存储节点上，以获取更大的存储容量和更高的并发访问量。近年来，随着数据量的高速增长，分布式数据库技术也得到了快速的发展，传统的关系型数据库开始从集中式模型向分布式架构发展，基于关系型的分布式数据库在保留了传统数据库的数据模型和基本特征下，从集中式存储走向分布式存储，从集中式计算走向分布式计算。
另一方面，随着数据量越来越大，关系型数据库开始暴露出一些难以克服的缺点，以NoSQL 为代表的非关系型数据库，其高可扩展性、高并发性等优势出现了快速发展，一时间市场上出现了大量的key-value 存储系统、文档型数据库等NoSQL 数据库产品。NoSQL 类型数据库正日渐成为大数据时代下分布式数据库领域的主力。
这种组织数据库的方法克服了物理中心数据库组织的弱点。 首先，降低了数据传送代价，因为大多数的对数据库的访问操作都是针对局部数据库的，而不是对其他位置的数据库访问； 其次，系统的可靠性提高了很多，因为当网络出现故障时，仍然允许对局部数据库的操作，而且一个位置的故障不影响其他位置的处理工作，只有当访问出现故障位置的数据时，在某种程度上才受影响； 第三，便于系统的扩充，增加一个新的局部数据库，或在某个位置扩充一台适当的小型计算机，都很容易实现。然而有些功能要付出更高的代价。例如，为了调配在几个位置上的活动，事务管理的性能比在中心数据库时花费更高，而且甚至抵消许多其他的优点。 分布式软件系统(Distributed Software Systems)是支持分布式处理的软件系统,是在由通信网络互联的多处理机体系结构上执行任务的系统。它包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等。
分布式操作系统负责管理分布式处理系统资源和控制分布式程序运行。它和集中式操作系统的区别在于资源管理、进程通信和系统结构等方面。 分布式程序设计语言用于编写运行于分布式计算机系统上的分布式程序。一个分布式程序由若干个可以独立执行的程序模块组成,它们分布于一个分布式处理系统的多台计算机上被同时执行。它与集中式的程序设计语言相比有三个特点：分布性、通信性和稳健性。 分布式文件系统具有执行远程文件存取的能力,并以透明方式对分布在网络上的文件进行管理和存取。 分布式数据库系统由分布于多个计算机结点上的若干个数据库系统组成,它提供有效的存取手段来操纵这些结点上的子数据库。分布式数据库在使用上可视为一个完整的数据库,而实际上它是分布在地理分散的各个结点上。当然,分布在各个结点上的子数据库在逻辑上是相关的。
Hadoop的分布式文件系统HDFS，作为开源的分布式平台，为目前流行的很多分布式数据库提供了支持，譬如HBase等。Yonghong的分布式文件系统ZFS，为分布式数据集市Z-DataMart提供了底层平台。

什么是分布式数据库系统分布式数据库系统有哪些特点

分布式数据库是一个逻辑数据库，它的物理数据库在地理位置上分布在多个数据库管理系统的计算机网络中，这些数据库系统构成了分布式的数据库管理系统。在分布式数据库管理系统中，每台计算机上的用户在访问数据库时并不感到他使用的数据在物理上不存储在自己的计算机中，而是由分布式数据库系统由网络从其它机器中传输过来。因此，对每一用户来说，看到的都是一个统一的概念模式。分布式数据库系统的主要特点是：（1）具有较高的可靠性，当系统中一台机器发生故障时、不会导致整个系统的破坏。当故障排除后，分布式数据库系统可将故障期间的数据库加以恢复修改。（2）分散了工作负荷，使大量的处理均匀分担。（3）便于实现系统的扩充。分布式数据库系统是计算机通讯和数据库技术相结合的产物，是非常有代表性的数据库技术发展方向之一。