lob,或大对象,是oracle处理和存储非字符数据的首选方式,如mp3、视频、图片等,以及长字符数据(非结构化和半结构化数据)。二进制大对象(blob)和字符大对象(clob)可以存储高达tb的数据。
文章后续测试:《oracle lob——空间重用规则》
basicfiles
oracle已经引入了许多新的多媒体数据类型(lob数据类型),使得处理图片、视频、音频或大型字符数据集变得更加容易。
在oracle8之前的早期版本中,所有多媒体类型都被放置在long raw数据类型中。
由于oracle对long raw的所有限制,通常更容易将大型对象类型数据保存在数据库外部,只使用oracle作为文件位置的索引系统。
对于oracle8i和更高版本的数据库,建议使用lob数据类型存储大量结构化和半结构化数据。lob数据类型比long和long raw类型有几个优点,包括:
-
lob容量:
lob可以存储更大量的数据。lob可以存储4gb或更多数据,具体取决于您的系统配置。long和long raw类型的数据限制为2gb。
-
表中lob列的个数:
一个表可以有多个lob列。表中的lob列可以是任何lob类型。
在oracle release 7.3及更高版本中,表被限制为单个long或long raw列。
-
随机分段访问:
lob支持对数据的随机访问,而long只支持顺序访问。
lob也可以是对象属性。
securefiles
从oracle database 11g release 1开始,oracle引入了securefiles,一种新的lob存储架构。
securefiles lob是在create table语句中出现存储关键字securefile时创建的。
原始的lob存储架构basicfiles lob是默认存储。如果没有使用关键字securefile,或者在create table语句中使用关键字basicfile,则创建为basicfiles lob。
securefile只能创建在assm (automatic segment space management)表空间中。
oracle securefiles增加了以下功能:
-
智能lob压缩允许用户显式地压缩数据以节省磁盘空间。此特性只能与此版本中的新lob实现一起使用(存储参数securefile)。
-
智能lob加密为lob引入了一种新的加密工具。加密数据现在存储在原地,可用于随机读取和写入。此特性只能与此版本中的新lob实现一起使用(存储参数securefile)。
-
通过重复数据删除,oracle数据库可以自动发现重复的lob数据,只存储一个副本(存储参数securefile)以节省空间。
-
lob数据路径优化包括存储层以上的逻辑缓存、读取预取、新的缓存模式、矢量i/o等。
-
新的lob api。现有的oci函数作用于新的securefile lob。还添加了新的oci函数和pl/sql包。对于lob, create table、alter table和sql命令的参数是新的或更改的。高性能空间管理包括对lob sql语句的更改和dbms_space包的更改。
securefiles lobs 12c enhancements
-
enable pdml operations on securefiles
在这个版本中,已经消除了对securefiles lob的并行dml (pdml)支持的限制。该特性允许securefiles利用oracle数据库pdml特性的性能和可扩展性优势。 -
oracle data pump: support securefiles lob as default
impdp命令行有一个新参数(pl/sql dbms_datapump包有一个新选项),它告诉oracle data pump将所有lob创建为securefiles lob。默认情况下,从oracle database 12c release 1(12.1)开始,所有lob列都被创建为securefiles lob。但是,oracle data pump重新创建的表与导出数据库中存在的表完全相同,因此,如果一个lob列是导出数据库中的basicfile lob, oracle data pump将尝试将其重新创建为导入数据库中的basicfile lob。该特性允许用户强制将lob创建为securefiles lob,并迁移到最新的性能更好的特性。 -
securefiles is the default for lob storage
在此版本中,当兼容初始化参数设置为12.1或更高时,securefiles现在是lob存储的默认值。securefiles特性为在数据库中存储非结构化数据提供了最佳性能。将securefiles设置为非结构化数据的默认值有助于确保数据库在管理非结构化数据时提供最佳性能。 -
sql apply support for securefiles lobs
该特性为securefiles lob列的重复数据删除提供了sql apply支持。sql apply可以用于使用securefiles lob的oracle数据库的滚动升级,没有任何限制。
restrictions on lobs
- 不能是集群表的一部分。
- 不能用于sql语句的以下部分:
- group by
- order by
- select distinct
- joins
- aggregate functions
- 不能使用analyze命令进行分析。
- 不能包含在分区索引组织的表中。
- 不能在数组varray中使用它们。
- 不能使用nclob作为对象属性。
内部lob
内部lob作为表中的列存储在数据库中,它们参与服务器的事务模型。内部lob有三种类型:
-
clob -字符lob。用于存储数据库字符集中的字符数据
-
blob -二进制lob。用于存储二进制、原始数据。
-
nclob -用于存储多字节字符数据(unicode数据)的lob
外部lob
外部lob作为操作系统文件存储在数据库外部。数据库中只存储对实际操作系统文件的引用。外部lob不参与事务。oracle 8i/9i中唯一的外部lob数据类型称为bfile。
- bfile -二进制文件的简称。bfile lob保存对存储在数据库外部的操作系统中的物理文件的大型二进制数据的引用。
内部lob和外部lob的区别
以下是一些比较重要的区别:
-
内部lob的类型包括clob、nclob和blob。唯一的外部lob是bfile。
-
内部lob作为表中的列存储在数据库中,而外部lob存储在数据库之外的操作系统文件中。
-
内部lob参与服务器的事务模型。在数据库发生故障时,可以恢复内部lob,并且可以提交甚至回滚对它们所做的更改。外部lob不参与事务。bfile类型只允许对操作系统文件进行读访问。对外部lob的所有更改都必须通过底层操作系统在数据库外部完成。
-
内部lob使用复制语义。也就是说,当您使用表中另一行的lob插入或更新lob时,lob定位器和lob值将被复制到该行。另一方面,外部lob使用引用语义。那就是只复制bfile位置,而不是实际的操作系统文件。
-
每个内部lob列对每行都有一个不同的lob定位器和一个不同的lob值副本。每个bfile列对每行都有自己的bfile定位器。但是,您可以在表中有两行包含指向相同操作系统文件的bfile定位器。
介绍lob定位器
每个lob都有一个lob定位器。lob定位器是指向lob值实际位置的指针。与内部lob相关联的定位器称为lob定位器,而与外部lob相关联的定位器称为bfile定位器。在lob列中存储数据时,同时也存储了lob定位器。lob定位器是在选择lob列时返回给您的内容。然后可以使用这个定位器检索实际的lob值。
lob列可以初始化为null值,也可以设置为空。基本的区别与lob定位器有关。如果lob列被设置为null,则lob没有存储定位符或值。lob的值将为null。然而,空lob在列中存储有一个lob定位器和一个长度为0的lob值。在尝试使用各种编程接口(pl/sql、oci、java等)开始向lob列写入数据之前,需要使用lob定位器填充它,使其变为 non-null。为此,对于clob和bclob使用内置函数empty_clob(),对于blob使用empty_blob()。对于bfiles,使用bfilename()方法初始化bfile列以指向os文件。请记住,在查询lob列时,只返回lob定位器。各种编程接口使用这个lob定位器来操作lob值。
操作lob最流行的方法之一可能是通过pl/sql。pl/sql提供了一种通过包dbms_lob操作lob的方法。dbms_lob包提供了过程和函数,允许操作特定的部分以及完整的内部lob以及对bfile的只读操作。使用和操作lob的一个重要概念是,所有dbms_lob例程都基于lob定位器工作。
pctversion:
指定用于维护lob的旧版本占总体lob存储空间的最大百分比。默认值为10,这意味着在使用了整个lob存储空间的10%之前,不会覆盖旧版本的lob数据。
securefiles不能指定pctversion参数,在11g兼容性下,创建securefiles lob时忽略该参数。
retention:
如果数据库处于自动undo模式,那么可以指定retention而不是pctversion来指示oracle保留这个lob的旧版本。此子句将覆盖pctversion的任何先前设置。
注意:即使后续更改了undo_retention, dba_lobs中的retention仍将保持不变。但是,lob undo应考虑到对参数undo_retention随时间推移的影响更改。
retention参数设计用于数据库的undo功能,例如闪回版本查询。当lob列设置了retention属性时,旧版本的lob数据将在undo_retention参数指定的时间内保留。
创建lob时不能同时指定pctversion和retention。
如果数据库运行在手动undo模式,则不能指定retention。
primary note: overview of oracle large objects (basicfiles lobs and securefiles lobs) (doc id 1490228.1)
订阅号:dongdb手记
墨天轮:https://www.modb.pro/u/231198