Oracle10g：数据的导入导出

Oracle10g：数据的导入导出

给数据泵加压

oracle 数据库 10g 中的新的适用步调使其本能和多功效性到达了新的程度。

oracle 数据库 10g 中减少的叫作 oracle data pump （数据泵）的新的导出和导出个性，完全变换了数据库用户仍旧风气的往日几代 oracle 数据库的存户 / 效劳器处事办法。此刻效劳器不妨运转导出和导出工作。你不妨经过并行办法赶快装入或卸载洪量数据，并且你不妨在运转进程中安排并行的水平。导出和导出工作此刻不妨从新启用，以是爆发妨碍不确定表示着要从新发端。 api 是公诸于众的，而且容易运用；用 pl/sql 创造一个导出和导出工作特殊大略。一旦启用，那些工作就在后盾运转，但你不妨经过存户端适用步调从任何场合查看工作的状况和举行窜改。

体制构造

在 oracle 数据库 10g 之前（从 oracle7 到 oracle9i ），导出和导出适用步调都动作存户端步调运转，而且实行洪量处事。导出的数据由数据库范例读出，经过贯穿传输到导出存户步调，而后写到磁盘上。一切数据在所有导出过程下经过单线程操纵。即日的数据量比这个体制构造首先沿用的功夫要大得多，使得简单导出过程成了一个瓶颈，由于导出工作的本能受限于导出适用步调所能扶助的含糊量。

在 oracle 数据库 10g 和崭新的数据泵（ data pump ）体制构造下，此刻一切的处事都由数据库范例来实行。数据库范例不妨用两种本领来并行处置那些处事：经过创造多个数据泵处事过程来读 / 写正在被导出 / 导出的数据，以及创造并行 i/o 效劳器过程以更快地采用（ select ）或插入（ insert ）那些数据。如许，单过程瓶颈再也就不生存了。

数据泵工作用新的 dbms_datapump pl/sql api 来创造、监测和安排。新的导出和导出适用步调（辨别为 impdp 和 expdp ）对于这个 api 来说不过吩咐行接口。你不妨运用数据泵导出适用步调初始化一个工作，比方一个导出工作。而后你就不妨封闭你的存户端，还家留宿和享受晚餐，而你的工作会从来运转。到了更阑，你不妨从新贯穿到谁人工作，查看其状况，以至不妨普及并路途度，再不在更阑体例没有效户在用的情景下多实行少许处事。第二天早晨，你不妨贬低并行度以至挂起该工作，为白昼在线的用户开释资源。

从新启用工作的功效是数据泵体制构造的一个要害个性。你不妨随时遏止和重启用一个数据泵工作，比方为在线用户开释资源。你还不妨从文献体例的空间题目中轻快地回复。即使一个 12 钟点的导出工作在举行了 11 钟点后因磁盘空间不够而波折，那么你再也不必从新发端从新启用该工作，反复前方 11 钟点的处事。而是你不妨贯穿到这个波折的工作，减少一个或多个新的转储（ dump ）文献，从波折的场合从新启用，如许只需一个钟点你就不妨实行工作了。这在你处置很大数据量时特殊有效。

对文献体例的考察

由效劳器处置一切的文献 i/o 对于长途实行导出和导出工作的数据库处置员来说特殊利于。此刻，用户不妨很轻快地在一致 unix 的体例 ( 如 linux) 上 telnet 或 ssh 到一个效劳器，在吩咐行办法下初始化一个运转在效劳器上的导出或导出工作。但是，在其余操纵体例上就不那么简单， windows 是最鲜明的例子。在推出数据泵之前，要从一个 windows 体例下的 oracle 数据库中程导弹出洪量数据，你很大概必需坐在效劳器遏制台前发出吩咐。经过 tcp/ip 贯穿导出数据只对少量据量是可行的。数据泵变换了这十足，由于纵然你经过在你的存户端上运转该导出和导出适用步调来初始化一个导出或导出工作，该工作本来也运转在效劳器上，一切的 i/o 也都爆发在该效劳器上。

出于安定性商量，数据泵诉求你经过 oracle 的目次东西来指定个中寄存着你要创造或读取的转储文献的目的目次。比方：

create directory export_dumps

as 'c:\a';

grant read, write

on directory export_dumps

to gennick;

我以 system 身份登录到我的试验室数据库上，并实行之上语句来创造一个目次东西，这个目次东西指向了我磁盘上的一个偶尔目次，以用来寄存导出的转储文献。 grant 语句为用户 gennick- 即是我 - 调配了考察该目次的权力。我给本人调配读 / 写权力，由于我将导出和导出数据。你不妨为一个用户调配读权力，控制他只能导出数据。

启用一个导出工作

你不妨运用新的 expdp 适用步调来启用一个导出工作。由于参数与老的 exp 适用步调各别，以是你得熟习那些新的参数。你不妨在吩咐行中指定参数，但在正文中我运用了参数文献。我想导出我的所有形式（ schema ），运用了以次参数：

dumpfile=gnis%u.dmp

directory=export_dumps

logfile=gnis_export.log

job_name=gnis_export

dumpfile 指定我将向个中写入被导出数据的文献。 %u 语法给出了一个增量计数器，获得文献名 gnis01.dmp 、 gnis02.dmp 等。 directory 指定了我的目的目次。

我的 logfile 参数指定了日记文献的名字，这个文献是为每个导出工作默许创造的。 job_name 给工作指定了一个名字。我采用了一个容易回顾（和输出）的名字，由于我大概须要在反面才贯穿这个工作。要提防在指定工作称呼时不要与你登录形式（ schema ）中的形式东西称呼辩论。数据泵在你的登录形式中创造一个被称为工作主表的数据表，该表的名字与工作的名字相配合。这个数据表盯梢该工作的状况，并最后被写入转储文献中，动作该文献所含实质的一个记载。

清单 1 表露了一个导出工作已被启用。该工作所做的第一件事是估量所需的磁盘空间巨细。当估量值表露出来后，我按 ctrl-c 加入一个交互式的导出提醒窗口，而后运用 exit_client 吩咐回到我操纵体例的吩咐窗口。该导出工作仍旧运转在效劳器上。

提防，即使我要做并行导出而且将我的 i/o 散布在两个磁盘上，那么我不妨对 dumpfile 参数值做出窜改，并如次增添 parallel 参数和值，如次所示：

dumpfile=export_dumps01:gnis%u.dmp,

export_dumps02:gnis%u.dmp

parallel=2

提防，在这个并行导出工作中，目次名动作文献名的一局部来被指定。

查看状况

你不妨随时贯穿到一个运转中的工作来查看其状况。要贯穿到一个导出工作，必需实行一条 expdp 吩咐，运用 attach 参数来指定工作称呼。 清单 2 表露了到 gnis_export 工作的贯穿。当你贯穿到一个工作， expdp 表露该工作的关系消息和暂时状况，并为你供给一个 export> 提醒符。

当你贯穿到了一个工作后，你不妨随时实行 status 吩咐察看暂时状况，如 清单 3 所示。你还不妨实行 continue_client 吩咐归来到表露工作进度的日记输入状况，该吩咐不妨被缩写成如 清单 4 所示的 continue 。

你不妨经过查问 dba_datapump_jobs 视图赶快察看一切数据泵工作的状况。你不许赢得 status 吩咐所给出的精细消息，但你不妨赶快察看到哪些工作在实行、哪些居于清闲状况等。另一个须要领会的视图是 dba_datapump_sessions ，它列出了一切活泼的数据泵处事过程。

从妨碍中回复

重启用工作的本领使你不妨从某些典型的妨碍中回复过来。比方， 清单 5 表露了一个用结束转储文献空间的导出工作的日记文献的结果局部。但是，什么也没有丧失。该工作不过加入了一个清闲状况，当你贯穿到该工作并察看状况输入时就不妨看到这一点。这个状况不表露工作清闲的因为。要决定这是由于转储文献的空间不够了，则你须要察看日记文献。

贯穿到因转储文献空间不够用了而遏止的工作后，你不妨在两个操纵中采用其一：你不妨运用 kill_job 吩咐来遏止该工作，大概减少一个和多个转储文献来连接该工作的运转。即使空间不够的题目是由于磁盘空间不及，则固然你要保证你减少的文献是在另一个有可用空间的磁盘上。你大概须要创造一个新的 oracle 目次东西来指向这一新场所。

清单 6 运用 add_files 吩咐为我的清闲工作减少两个文献。这两个文献坐落各别的目次中，它们都各别于为该工作的第一个转储文献所指定的目次。我运用 start_job 吩咐来从新启用该工作，而后运用 continue 察看屏幕上震动的其他日记输入。

导出工作不会遭到卸载（ dump ）文献空间不及的感化。然而，它们大概会遭到数据表空间不及或没辙扩充表空间的感化。导出的回复进程和导出工作的基础上沟通。开始，经过向表空间减少一个数据文献、扩充一个数据文献或其余本领来供给可用空间。而后贯穿到该工作，实行 start_job 吩咐。导出工作将从它阻碍的场合连接实行。

导当选定的数据

正文中的例子到暂时为止表露的是对用户 gennick 具有的一切东西举行形式（ schema ）数据库级其余导出。为了展现数据泵的少许新的功效，我要导出那些数据，并且为了使题目更有道理，我列出了以次诉求：

仅导出 gnis 数据表 将该数据表导出到 michigan 形式中 仅导出那些与密歇根州关系的数据行 不导出原始的保存参数 一发端，我不妨在我的导出参数文献中写出以次四行：

dumpfile=gnis%u.dmp

directory=export_dumps

logfile=gnis_import.log

job_name=gnis_import

这四行没有什么新意。她们指定了转储文献、目次、日记文献和该工作的称呼。按照咱们的四个诉求，我不妨运用 include 参数将导出操纵控制在咱们感爱好的一个数据表上：

include=table:"= 'gnis'"

include 是个很有道理的参数。当你须要导出一个转储文献的局部实质时，你不妨有两个本领：

你不妨运用一个或多个 include 参数列出你要导出的那些东西。 你不妨运用 exclude 参数列出那些你不须要的实质，而后导出其他的实质。 由于我只须要一个东西，精确包括该东西比起精确不囊括其它东西要简单得多。我的 include 参数值的第一局部是要害字 table ，表白我要导出的东西是一个数据表（其它的大概是一个因变量或一个进程）。 接下来是一个冒号，而后是一个 where 子句的谓词。我精确蓄意数据表名为 gnis ，以是这个谓词是 "= 'gnis'" 。即使需要，则你不妨写出多个精细的谓词。经过 include 和 exclude 参数，你不妨真实地指出以怎么办的粒度导出或导出。我倡导你提防地观赏对于这两个参数的文书档案。它们的功效之宏大和多功效性是我在正文中所没辙刻画的。

我不妨很轻快地实行该形式的变换，未来自 gnis 形式的数据表从新映照到 michigan 形式：

remap_schema=gennick: michigan

我只须要对于密歇根州的数据行。为此，我不妨运用 query 参数来指定一个 where 子句：

query="where gnis_state_abbr='mi'"

query 在老的适用步调中也有，但只能用来导出操纵。数据泵使 query 也能用来导出操纵，由于数据泵运用了 oracle 较新的外部数据表功效。只有大概，数据泵会采用径直路途来导出或导出数据，囊括从数据库数据文献中读取数据而后径直写到一个导出转储文献中，或读取转储文献而后径直写入数据库数据文献中。然而，当你指定了 query 参数时，数据泵将运用一个外部数据表。对于一个导出工作，数据泵将运用 oracle_datapump 存取启动步调创造一个外部数据表，并实行一条 insert...select...from 语句。

我的结果一个诉求是制止导出与已被导出的数据表关系的保存参数。我蓄意 michigan 形式中的新 gnis 表采用该形式的默许表空间的默许保存参数。因为是 michigan 的默许表空间不及以包含该数据表的从来巨细，然而是以只是包含与密歇根相关的数据行。经过 transform 参数，我不妨报告导出工作不要包括与原始表关系的任何数据段属性：

transform=segment_attributes:n

这看上去是件小事，但往日有很屡次我都蓄意老的导出适用步调的 transform 参数有如许的功效。我在试图将小批消费数据导出到尝试体例中时常常波折，由于纵然保存消费数据的各个区段傍边很多是空的，其数据量也比我尝试体例所能扶助的大得多。对于只导出一张数据表的情景，预先创造数据表是处置这个题目的一个方法。但是，跟着数据表的增加，预先建表会很烦恼。而 transform 如许的大略电门不妨轻快地将转储文献中一切数据段的属性理想忽视掉。

将我上头刻画的一切选项放到一个参数文献中后，我不妨挪用导出适用步调，如次所示：

impdp michigan/password

parfile=gnis_import.par

当动作一个没被受权的用户举行导时髦，你须要贯穿到目的形式。即使你具有 imp_full_database 脚色，那么你不妨用本人的身份登录，而后导出就任何目的形式。

本能和多功效性

oracle 数据泵比起往日的导出和导出适用步调在本能上有很大的普及。这种本能普及大局部来自于读写转储文献的并行操纵。你不妨指定并路途度来到达你所诉求的速率与资源耗费的折衷。

下一步

载入正文所运用的示例数据  数据泵还很好地运用了 oracle 数据库其余最新开拓的革新个性。 flashback （回闪）用来保证导出数据的普遍性，而 flashback_scn 和 flashback_time 参数使你不妨实足遏制这一功效。径直路途（ direct-path ） api 用来在任何大概的功夫普及本能，当径直路途 api 不许运用时，用外部数据表和新的 oracle_datapump 外部数据表存取启动步调来传输数据。

数据泵除去供给崭新的本能外还为你供给精巧性。这表此刻 include 和 exclude 参数、 query 参数、 transform 参数和其余参数的实行中，那些参数使你不妨精致地遏制被加载和卸载的数据和东西。

人们从来在连接地对 " 大数据 ?quot; 的含意举行从新设置，这种数据库含量之大在十年前还只能是理想。在如许的寰球里，数据泵对于你的数据库处置员所用的东西库是个不错的弥补，使你不妨以空前绝后的速率对数据库举行数据导出和导出。

jonathan gennick ( jonathan@gennick.com ) 是一名体味充分的 oracle 数据库处置员和 oracle 认证的大师，寓居在密歇根州的上部半岛。他在处置着 oracle 作品电子邮件列表，你不妨考察 gennick.com 来领会个中的相关实质。 gennick 迩来介入编写了《 oracle regular expressions pocket reference ， oracle 正则表白式小型画册》 (o'reilly & associates, 2003 出书 ) 一书。