当前位置: 开发笔记 > 数据库 > 正文

【OracleDatabase12cNewFeature】ILM–In-Database

作者：青岛大学MBA校友件_176 | 来源：互联网 | 2018-06-11 20:51

本文介绍OracleDatabase12c中关于数据生命周期管理多个新特性中相对最简单的一个，数据库内归档（In-DatabaseArchiving）。使用的测试表是上一篇介绍数据时间有效期管理中使用的TV表（包括表结构和测试数据），如果你还没有看过上一篇文章，可以先阅读【O

本文介绍Oracle Database 12c中关于数据生命周期管理多个新特性中相对最简单的一个，数据库内归档（In-Database Archiving）。使用的测试表是上一篇介绍数据时间有效期管理中使用的TV表（包括表结构和测试数据），如果你还没有看过上一篇文章，可以先阅读【O

本文介绍Oracle Database 12c中关于数据生命周期管理多个新特性中相对最简单的一个，数据库内归档（In-Database Archiving）。使用的测试表是上一篇介绍数据时间有效期管理中使用的TV表（包括表结构和测试数据），如果你还没有看过上一篇文章，可以先阅读【Oracle Database 12c New Feature】ILM – Temporal Validity。

相比起数据时间有效期管理而言，数据库内归档非常简单，只有一个开关，对于一条数据，要不就是活跃的允许显示，要不就是归档掉不显示，这是由数据库管理员来人工操作的。

在设置数据库内归档之前，必须要在表级别启用该特性。如上一篇文章提到的，In-Database Archiving支持多租户架构，可以在PDB中使用。

SQL> ALTER TABLE TV ROW archival;
 
TABLE altered.

Oracle仍然是使用隐藏列来实现这个功能的，在启用该特性以后，会自动在表上增加ORA_ARCHIVE_STATE字段，这是一个VARCHAR2(4000)的字段。

SQL> SELECT COLUMN_NAME,DATA_TYPE,HIDDEN_COLUMN FROM USER_TAB_COLS WHERE TABLE_NAME='TV';
 
COLUMN_NAME          DATA_TYPE            HID
-------------------- -------------------- ---
ORA_ARCHIVE_STATE    VARCHAR2             YES
SYS_NC00005$         RAW                  YES
VALID_TIME_END       DATE                 YES
VALID_TIME_START     DATE                 YES
INSERT_TIME          DATE                 NO
VALID_TIME           NUMBER               YES
 
6 ROWS selected.

先检查一下TV表中的数据分布，一共有9个不同的时间段，前面5个都只有1条记录，后面4个则有大量测试记录。

SQL> SELECT INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY INSERT_TIME ORDER BY 1;
 
INSERT_TIME         COUNT&＃40;*&＃41;
----------------- ----------
20130811 09:04:30          1
20130811 09:08:27          1
20130811 09:22:30          1
20130811 09:39:40          1
20130811 09:45:22          1
20130811 09:50:44      19368
20130811 09:50:46      19368
20130811 09:50:47      19368
20130811 09:50:48      19368
 
9 ROWS selected.

尝试将所有20130811 09:50之后的记录全部设置为归档模式。直接使用UPDATE语句将ORA_ARCHIVE_STATE字段更新为任意非0的字符，0表示该记录是活跃的，任何非0字符都表示该记录被归档。

SQL> UPDATE TV SET ORA_ARCHIVE_STATE = '20' WHERE INSERT_TIME>to_date&＃40;'20130811 09:50','YYYYMMDD HH24:MI'&＃41;;
 
77472 ROWS updated.

再次执行相同的查询语句，可以看到只存在活跃的5条记录了。

SQL> SELECT INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY INSERT_TIME ORDER BY 1;
 
INSERT_TIME         COUNT&＃40;*&＃41;
----------------- ----------
20130811 09:04:30          1
20130811 09:08:27          1
20130811 09:22:30          1
20130811 09:39:40          1
20130811 09:45:22          1
 
5 ROWS selected.

可以在会话级别设置即使是记录被归档，也仍然显示出来。

SQL> ALTER SESSION SET ROW ARCHIVAL VISIBILITY = ALL;
 
SESSION altered.
 
SQL> SELECT INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY INSERT_TIME ORDER BY 1;
 
INSERT_TIME         COUNT&＃40;*&＃41;
----------------- ----------
20130811 09:04:30          1
20130811 09:08:27          1
20130811 09:22:30          1
20130811 09:39:40          1
20130811 09:45:22          1
20130811 09:50:44      19368
20130811 09:50:46      19368
20130811 09:50:47      19368
20130811 09:50:48      19368
 
9 ROWS selected.

检查ORA_ARCHIVE_STATE值，可以看到所有活跃数据的ORA_ARCHIVE_STATE字段值均为0，这也是在表级别启用数据库内归档以后的默认值。

SQL> SELECT ORA_ARCHIVE_STATE,INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY ORA_ARCHIVE_STATE,INSERT_TIME ORDER BY 2;
 
ORA_ARCHIVE_STATE    INSERT_TIME         COUNT&＃40;*&＃41;
-------------------- ----------------- ----------
0                    20130811 09:04:30          1
0                    20130811 09:08:27          1
0                    20130811 09:22:30          1
0                    20130811 09:39:40          1
0                    20130811 09:45:22          1
20                   20130811 09:50:44      19368
20                   20130811 09:50:46      19368
20                   20130811 09:50:47      19368
20                   20130811 09:50:48      19368
 
9 ROWS selected.

将其中的一些记录的ORA_ARCHIVE_STATE字段更新为另外的非0字符。

SQL> UPDATE TV SET ORA_ARCHIVE_STATE='ARCHIVING' WHERE INSERT_TIME='20130811 09:50:48';
 
19368 ROWS updated.
 
SQL> SELECT ORA_ARCHIVE_STATE,INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY ORA_ARCHIVE_STATE,INSERT_TIME ORDER BY 2;
 
ORA_ARCHIVE_STATE    INSERT_TIME         COUNT&＃40;*&＃41;
-------------------- ----------------- ----------
0                    20130811 09:04:30          1
0                    20130811 09:08:27          1
0                    20130811 09:22:30          1
0                    20130811 09:39:40          1
0                    20130811 09:45:22          1
20                   20130811 09:50:44      19368
20                   20130811 09:50:46      19368
20                   20130811 09:50:47      19368
ARCHIVING            20130811 09:50:48      19368

在会话级别重新设置不显示归档数据，可以看到只要是ORA_ARCHIVE_STATE字段不为0的记录都不会显示。

SQL> ALTER SESSION SET ROW ARCHIVAL VISIBILITY = ACTIVE;
 
SESSION altered.
 
SQL> SELECT INSERT_TIME,COUNT&＃40;*&＃41; FROM TV GROUP BY INSERT_TIME ORDER BY 1;
 
INSERT_TIME         COUNT&＃40;*&＃41;
----------------- ----------
20130811 09:04:30          1
20130811 09:08:27          1
20130811 09:22:30          1
20130811 09:39:40          1
20130811 09:45:22          1

性能考虑，这一点数据库内归档与时间有效性是相同的，都只是对隐藏字段进行了filter操作。即使是只显示活跃数据，也仍然需要扫描全表。这一点在真实应用中可以通过创建索引来避免全表扫描，可以参看MOS Note: Potential SQL Performance Degradation When In Database Row Archiving (Doc ID 1579790.1)，也就是数据库内归档只应该在一个具备良好性能的SQL基础上对返回结果进行过滤，而不要期望归档的记录不参与扫描。

SQL> SELECT * FROM TV;
 
INSERT_TIME
-----------------
20130811 09:04:30
20130811 09:08:27
20130811 09:22:30
20130811 09:39:40
20130811 09:45:22
 
 
Execution Plan
----------------------------------------------------------
Plan hash VALUE: 1723968289
 
--------------------------------------------------------------------------
| Id  | Operation         | Name | ROWS  | Bytes | Cost &＃40;%CPU&＃41;| TIME     |
--------------------------------------------------------------------------
|   0 | SELECT STATEMENT  |      |     4 |  8044 |   102   &＃40;0&＃41;| 00:00:01 |
|*  1 |  TABLE ACCESS FULL| TV   |     4 |  8044 |   102   &＃40;0&＃41;| 00:00:01 |
--------------------------------------------------------------------------
 
Predicate Information &＃40;IDENTIFIED BY operation id&＃41;:
---------------------------------------------------
 
   1 - FILTER&＃40;"TV"."ORA_ARCHIVE_STATE"='0'&＃41;
 
Note
-----
   - dynamic statistics used: dynamic sampling &＃40;level=2&＃41;
 
 
Statistics
----------------------------------------------------------
          0  recursive calls
          0  db block gets
        375  consistent gets
          0  physical reads
          0  redo SIZE
        648  bytes sent via SQL*Net TO client
        543  bytes received via SQL*Net FROM client
          2  SQL*Net roundtrips TO/FROM client
          0  sorts &＃40;memory&＃41;
          0  sorts &＃40;disk&＃41;
          5  ROWS processed

数据库内归档可以跟时间有效性管理一起配合使用。在会话级别激活时间有效性，可以看到检索不再返回任何数据。执行计划中显示filter条件融合了数据库内归档跟时间有效性两层过滤。

SQL> EXEC dbms_flashback_archive.enable_at_valid_time&＃40;'CURRENT'&＃41;;
 
PL/SQL PROCEDURE successfully completed.
 
SQL> SELECT * FROM tv;
 
no ROWS selected
 
 
Execution Plan
----------------------------------------------------------
Plan hash VALUE: 1723968289
 
--------------------------------------------------------------------------
| Id  | Operation         | Name | ROWS  | Bytes | Cost &＃40;%CPU&＃41;| TIME     |
--------------------------------------------------------------------------
|   0 | SELECT STATEMENT  |      |     3 |  6087 |   102   &＃40;0&＃41;| 00:00:01 |
|*  1 |  TABLE ACCESS FULL| TV   |     3 |  6087 |   102   &＃40;0&＃41;| 00:00:01 |
--------------------------------------------------------------------------
 
Predicate Information &＃40;IDENTIFIED BY operation id&＃41;:
---------------------------------------------------
 
   1 - FILTER&＃40;"T"."ORA_ARCHIVE_STATE"='0' AND &＃40;"T"."VALID_TIME_START"
              IS NULL OR SYS_EXTRACT_UTC&＃40;INTERNAL_FUNCTION&＃40;"T"."VALID_TIME_START"&＃41;&＃41;<=S
              YS_EXTRACT_UTC&＃40;SYSTIMESTAMP&＃40;6&＃41;&＃41;&＃41; AND &＃40;"T"."VALID_TIME_END" IS NULL OR
              SYS_EXTRACT_UTC&＃40;INTERNAL_FUNCTION&＃40;"T"."VALID_TIME_END"&＃41;&＃41;>SYS_EXTRACT_UTC
              &＃40;SYSTIMESTAMP&＃40;6&＃41;&＃41;&＃41;&＃41;
 
 
Statistics
----------------------------------------------------------
         34  recursive calls
          8  db block gets
        397  consistent gets
          0  physical reads
          0  redo SIZE
        347  bytes sent via SQL*Net TO client
        532  bytes received via SQL*Net FROM client
          1  SQL*Net roundtrips TO/FROM client
          0  sorts &＃40;memory&＃41;
          0  sorts &＃40;disk&＃41;
          0  ROWS processed

将时间有效期设置为20130811 09:39:50，根据上一篇文章我们设置的1分钟有效期，只有在20130811 09:39:40插入的这条活跃记录可以被显示出来。

SQL> EXEC dbms_flashback_archive.enable_at_valid_time&＃40;'ASOF',to_date&＃40;'20130811 09:39:50','YYYYMMDD HH24:MI:SS'&＃41;&＃41;;
 
PL/SQL PROCEDURE successfully completed.
 
SQL> SELECT * FROM TV;
 
INSERT_TIME
-----------------
20130811 09:39:40
 
 
Execution Plan
----------------------------------------------------------
Plan hash VALUE: 1723968289
 
--------------------------------------------------------------------------
| Id  | Operation         | Name | ROWS  | Bytes | Cost &＃40;%CPU&＃41;| TIME     |
--------------------------------------------------------------------------
|   0 | SELECT STATEMENT  |      |     3 |  6087 |   102   &＃40;0&＃41;| 00:00:01 |
|*  1 |  TABLE ACCESS FULL| TV   |     3 |  6087 |   102   &＃40;0&＃41;| 00:00:01 |
--------------------------------------------------------------------------
 
Predicate Information &＃40;IDENTIFIED BY operation id&＃41;:
---------------------------------------------------
 
   1 - FILTER&＃40;"T"."ORA_ARCHIVE_STATE"='0' AND &＃40;"T"."VALID_TIME_START"
              IS NULL OR INTERNAL_FUNCTION&＃40;"T"."VALID_TIME_START"&＃41;<=TIMESTAMP'
              2013-08-11 09:39:50.000000000'&＃41; AND &＃40;"T"."VALID_TIME_END" IS NULL OR
              INTERNAL_FUNCTION&＃40;"T"."VALID_TIME_END"&＃41;>TIMESTAMP' 2013-08-11
              09:39:50.000000000'&＃41;&＃41;
 
 
Statistics
----------------------------------------------------------
         35  recursive calls
          6  db block gets
        398  consistent gets
          0  physical reads
          0  redo SIZE
        550  bytes sent via SQL*Net TO client
        543  bytes received via SQL*Net FROM client
          2  SQL*Net roundtrips TO/FROM client
          0  sorts &＃40;memory&＃41;
          0  sorts &＃40;disk&＃41;
          1  ROWS processed

结论：数据库内归档是一个Oracle利用隐藏字段实现的非常简单的功能，但是数据架构人员在规划的时候一定要考虑性能因素。

Share/Save

Oracle 11g new feature &＃8211; Virtual Column
How to Use DBMS_ADVANCED_REWRITE in Oracle 10g
【Oracle Database 12c New Feature】How to Learn Oracle (12c New Feature) from Error

sql
hive

推荐阅读

insert
ASP.NET Tips: 获取插入记录的ID的方法详解

本文详细介绍了在ASP.NET中获取插入记录的ID的几种方法，包括使用SCOPE_IDENTITY()和IDENT_CURRENT()函数，以及通过ExecuteReader方法执行SQL语句获取ID的步骤。同时，还提供了使用这些方法的示例代码和注意事项。对于需要获取表中最后一个插入操作所产生的ID或马上使用刚插入的新记录ID的开发者来说，本文提供了一些有用的技巧和建议。 ... [详细]

蜡笔小新 2023-12-13 17:03:18
mysql
FileNotFoundException: File does not exist

ubuntu用sqoop将数据从hive导入mysql时，命令： ... [详细]

蜡笔小新 2023-12-12 18:56:13
database
Postgresql备份和恢复的方法及命令行操作步骤

本文介绍了使用Postgresql进行备份和恢复的方法及命令行操作步骤。通过使用pg_dump命令进行备份，pg_restore命令进行恢复，并设置-h localhost选项，可以完成数据的备份和恢复操作。此外，本文还提供了参考链接以获取更多详细信息。 ... [详细]

蜡笔小新 2023-12-11 10:17:12
database
REVERT权限切换的操作步骤和注意事项

本文介绍了在SQL Server中进行REVERT权限切换的操作步骤和注意事项。首先登录到SQL Server，其中包括一个具有很小权限的普通用户和一个系统管理员角色中的成员。然后通过添加Windows登录到SQL Server，并将其添加到AdventureWorks数据库中的用户列表中。最后通过REVERT命令切换权限。在操作过程中需要注意的是，确保登录名和数据库名的正确性，并遵循安全措施，以防止权限泄露和数据损坏。 ... [详细]

蜡笔小新 2023-12-10 19:41:02
database
HDFS2.x新特性

一、集群间数据拷贝scp实现两个远程主机之间的文件复制scp-rhello.txtroothadoop103:useratguiguhello.txt推pushscp-rr ... [详细]

蜡笔小新 2023-12-13 13:52:40
database
Java项目管理工具及配置教程推荐

本文介绍了一些Java开发项目管理工具及其配置教程，包括团队协同工具worktil，版本管理工具GitLab，自动化构建工具Jenkins，项目管理工具Maven和Maven私服Nexus，以及Mybatis的安装和代码自动生成工具。提供了相关链接供读者参考。 ... [详细]

蜡笔小新 2023-12-13 06:45:16
database
zookeeper_Starting zookeeper ... FAILED TO START

本文由编程笔记#小编为大家整理，主要介绍了StartingzookeeperFAILEDTOSTART相关的知识，希望对你有一定的参考价值。下载路径：https://ar ... [详细]

蜡笔小新 2023-12-13 01:31:19
database
Linux下Kafka单机安装配置方法（实操成功）

本文介绍了在Linux下安装和配置Kafka的方法，包括安装JDK、下载和解压Kafka、配置Kafka的参数，以及配置Kafka的日志目录、服务器IP和日志存放路径等。同时还提供了单机配置部署的方法和zookeeper地址和端口的配置。通过实操成功的案例，帮助读者快速完成Kafka的安装和配置。 ... [详细]

蜡笔小新 2023-12-12 18:14:32
database
SAP羞辱国产软件商：技术停在10年前

SAP中国研究院总裁芮祥麟表示，国产软件厂商过于热衷概念炒作，技术水平停留在10年前的客户端架构水平。他认为，国内厂商推出基于SOA的产品或转型SAAS模式是不可能的，研发新架构需要时间。当前最热门的概念是云计算，芮祥麟呼吁国产厂商应该潜心研发底层架构。 ... [详细]

蜡笔小新 2023-12-12 18:07:09
数据库
[导入]IT从业人员必看的10个论坛

IT方面的论坛太多了，有综合，有专业，有行业，在各个论坛里混了几年，体会颇深，以前是论坛哪里人多 ... [详细]

蜡笔小新 2023-12-12 11:32:26
数据库
CEPH LIO iSCSI Gateway及其使用参考文档

本文介绍了CEPH LIO iSCSI Gateway以及使用该网关的参考文档，包括Ceph Block Device、CEPH ISCSI GATEWAY、USING AN ISCSI GATEWAY等。同时提供了多个参考链接，详细介绍了CEPH LIO iSCSI Gateway的配置和使用方法。 ... [详细]

蜡笔小新 2023-12-12 10:10:14
数据库
孙悟空与白骨精的信件引发的思考和反省

本文讲述了孙悟空写给白骨精的信件引发的思考和反省。孙悟空在信中对自己的行为进行了反思，认识到自己胡闹的行为并没有给他带来实际的收获。他也揭示了西天取经的真相，认为这是玉皇、菩萨设下的一场陷阱。他还提到了师傅的虚伪和对自己的实心话，以及自己作为师傅准备提拔的对象而被派下来锻炼的经历。他认为路上的九九八十一难也都是菩萨算计好的，唐僧并没有真正的危险。最后，他提到了观音菩萨在关键时刻的指导。这封信件引发了孙悟空对自己行为的思考和反省，对西天取经的目的和自己的角色有了更深入的认识。 ... [详细]

蜡笔小新 2023-12-12 09:55:55
数据库
Windows2003 IIS上设置301定向，实现不带www域名跳转带www域名的方法

打开IIS,建一个网站，主机头用不带www的域名，随便指向一个目录。然后在这个网站上点右键，属性--主目录--重定向到URL如图ÿ ... [详细]

蜡笔小新 2023-12-11 16:03:54
数据库
Ubuntu下创建deb安装包及离线安装包制作的方法

本文介绍了在Ubuntu下制作deb安装包及离线安装包的方法，通过备份/var/cache/apt/archives文件夹中的安装包，并建立包列表及依赖信息文件，添加本地源，更新源列表，可以在没有网络的情况下更新系统。同时提供了命令示例和资源下载链接。 ... [详细]

蜡笔小新 2023-12-10 21:32:50
数据库
读书的目的及学习算法的重要性

本文讨论了读书的目的以及学习算法的重要性，并介绍了两个算法：除法速算和约瑟夫环的数学算法。同时，通过具体的例子和推理，解释了为什么x=x+k序列中的第一个人的位置为k，以及序列2和序列3的关系。通过学习算法，可以提高思维能力和解决问题的能力。 ... [详细]

蜡笔小新 2023-12-10 20:15:26

青岛大学MBA校友件_176

这个家伙很懒，什么也没留下！

Tags | 热门标签

RankList | 热门文章