时间:2021-07-01 10:21:17 帮助过:59人阅读
前言 这次,我们将在Linux下来动手完成Oracle数据库的安装与使用。 Oracle本身是可以免费下载的包括 它的企业版以及被它收购的Weblogic和Sun中的几乎任何东西你都可以拿来下载和使用,不像IBM和Tibco一些其它厂商,只有“试用版”给你下载,Oracle的东西没有
这次,我们将在Linux下来动手完成Oracle数据库的安装与使用。
Oracle本身是可以免费下载的包括 它的企业版以及被它收购的Weblogic和Sun中的几乎任何东西你都可以拿来下载和使用,不像IBM和Tibco一些其它厂商,只有“试用版”给你下载,Oracle的东西没有时间限制,你拿来做练习,搭实验环境都是没有任何的问题的。
但是,如果你出了问题,需要用到Oracle的补丁或者是Oracle的技术支持,这就开始收费。
Oracle就是这种“卖Service”的模式。
还有就是你安装了Oracle后,你的应用是给另一家企业用的或者是带有商业用途,那对不起Oracle也会问你来收费。
在linux下安装oracle是一件令人生畏的事情,其复杂程度远远超过安装linux操作系统本身。如果能够进行成功的安装oracle,那么同时也就顺便掌握了linux一些技术。
本文介绍在redhat linux 下安装oracle 10g 的方法。在这里说明一下,Oracle 10g的g是grid 的缩写,意为网格,目前较为前沿的网络计算技术。
这次我们将在Linux环境下安装Oracle,对Oracle支持最好的莫过于SuSe Linux,但是随着后来RedHat走向了商业化后,RedHat与Oracle公司开始形成一种密切的关系,因此如果你手上有RedHat As 5.5x及以下版本或者是Fedora14及以上版本话那是最好不过了。
Oracle下载地址:进入下载
下载jdk1.6 for Linux,请注意32位与64位的区分,需要和你的操作系统对应上哦!
打开一个Terminal窗口
进入到你的jdk下载的目录下并输入:
./jdk-6u19-linux-i586-rpm.bin
我们默认将jdk安装于“/usr/java/jdk1.6.0_19”目录吧。
接下来我们需要修改系统环境变量,在terminal窗口中键入“vi /etc/profile”
在这个profile文件内加入两行:
export JAVA_HOME=/usr/java/jdk1.6.0_19
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH
打开一个terminal窗口并输入
看到正确的jdk版本信息后即代表我们的jdk在linux下安装正确了
还是编辑那个profile文件并加入如下几行:
[plain] view plaincopyprint?
export JAVA_HOME=/usr/java/jdk1.6.0_19
export PATH=$PATH:$JAVA_HOME/bin:$JAVA_HOME/jre/bin
export ORACLE_BASE=/opt/oracle
export ORACLE_HOME=$ORACLE_BASE/product/10
export ORACLE_SID=ktdb
export ORACLE_TERM=xterm
export NLS_LANG=AMERICAN_AMERICA.UTF8
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME/lib:/lib:/usr/lib:/usr/local/lib
通过上述环境变量我们可以得知,我们的oracle装安装在/opt/oracle/product/10目录下,所以
这些变量是Oracle在安装过程中需要读取的,在windows下安装oracle是不需要设这些东西的。
打开一个Terminal窗口输入下列命令
[plain] view plaincopyprint?
groupadd oinstall groupadd dba useradd -g oinstall -G dba oracle passwd oracle
我们安装Oracle时一般是不会用root用户的,因此我们需要增加一个角色(group),并在这个角色中增加一个用户(oracle)然后用这个用户登录我们的Linux并且执行安装。
[plain] view plaincopyprint?
mkdir -p /opt/oracle/ product/10 chown -R oracle.oinstall /opt/oracle/
[plain] view plaincopyprint?
xhost +
[plain] view plaincopyprint?
DISPLAY=它代表使得所有的用户可以使用图形化界面来运行相关的图形化应用程序,因为Linux的安全机制相当的严格,root是最高权限,除去root以外的其它用户如果需要拥有root才能执行的权限就需要授予权:0.0; export DISPLAY
一般来讲,Oracle主要需要下面的这些Lib库
[plain] view plaincopyprint?
gcc-3.2.3-2 make-3.79 binutils-2.11 openmotif-2.2.2-16 setarch-1.3-1 compat-gcc-7.3-2.96.122 compat-gcc-c++-7.3-2.96.122 compat-libstdc++-7.3-2.96.122 compat-libstdc++-devel-7.3-2.96.122
Oracle10g在Linux下有版本检查的限制,如果你的Linux RedHat的版本低于5,那么你可以在Oracle的安装盘disk1下,直接运行如下命令调出图形化安装界面
[plain] view plaincopyprint?
./runInstaller
[plain] view plaincopyprint?
/runInstaller –ignoreSysPrereqs
主安装界面出现
按照上述步骤一步步把Oracle装上,注意安装时字符集永远选用AL32UTF-8,这样你的Oracle才能支持多语言。
编辑 /etc/rc.local/文件
以下是dbstart.sh文件的内容
存盘后每次你重启Linux,Oracle就会随着你的Linux的开机而自动运行起来了(还有更专业的设置,将在以后的教程中传授,对于初学者想自己搭个环境的选用这个,嘿嘿)。
其们在使用sys用户连上Oracle后可以使用这条命令来显示这三个兄弟
[plain] view plaincopyprint?
show parameter processes;
session与processes是绑定的,用下面的公式:
sessions=1.1*processes + 5
所以你只有改这个processes,session才会自动调整,我们可以使用下面这条命令去改变系统中的processes
[plain] view plaincopyprint?
alter system set processes=500 scope = spfile;这个processes不是乱设的,是要和你系统的内核设置去绑定的。
我们的Oracle性能调优主要用围绕上述几个章节来做介绍,我们不介绍太高深的莫明奇妙的理论,在这边我们对这几个方面做一个统用的解释和实际应用场景,如果是新手,你在看过这篇教程后应该知道一个oracle的性能主要从几个方面(Common)去着手,对一个熟手来说上述每个小节的具体内容都是可以在Oracle的DBA手册中找到更详细的内容。
Oracle的连接服务是基于主机名的,我们需要设置装Oracle这台主机的唯一主机名,这样客户端才能通过TNS来连上Oracle的服务
请更改Oracle所在服务器上的 /etc/hosts文件
[plain] view plaincopyprint?
# Do not remove the following line, or various programs # that require network functionality will fail. 192.168.1.3 myoracleserver 127.0.0.1 localhost.localdomain localhost
一个客户端如果需要连接Oracle必须安装Oracle Client,可以去Oracle网站上下载进入下载。
Oracle11g开始后不再提供图形化的Oracle客户端下载,但尽管是这样你也必须在客户机上尤其是那些支持TNS连接的第三方客户端时都是必须安装Oracle客户端的。
、
我们选择“管理员"模式进行安装。
安装完后,你会在你的”启动“菜单里找到这样的一个菜单项
编辑注册表
把这个NLS_LANG改成上图中所示,这样你的Oracle的客户端上可以直接通过客户端工具或者是第三方客户端工具进行中文的正常录入了而不是乱码了。
使用system帐号登录
一般我们创建一个表空间和一个临时表空间
然后我们就可以开始创建用户了
对于一个j2ee的应用连接Oracle来说,这个连接用户的角色只需要具有上述两个权限就够用了,有些人喜欢给这个用户DBA权限是太绝对了,当然这样给角色使用起来方便,什么权限都有了,不需要我在开发时再进行细化的设置了。
可是,你有没有想到过,一旦你的应用被人sql injection后,而你的应用上连接着oracle的用户是dba权限,那么你连整个数据库是不是都会被泄密啊?
分配完角色后不是说等于结束了,还有一个”系统“角色要你分配,给下图所列的一项就够用了。
一个Oracle内的用户默认可以让你重复登录10次,10次的限制一到,这个用户就会被锁住。
可以用下列语句查看一个Oracle用户重复几次后会被锁住的设置参数
[plain] view plaincopyprint?
SELECT * FROM dba_profiles s WHERE s.profile='DEFAULT' AND resource_name='FAILED_LOGIN_ATTEMPTS';
当然这样做是为了安全考虑。
可是,在我们的开发环境中,有时往往因为一个循环,一个登录器,一个线程写错而导致Oracle连接用户重复需要连接Oracle 数次,因此经常开发人员会向DBA抱怨说 “我的用户又被锁住了”。
因此,在开发环境我建议你把这个“重复连接次数”去掉,设成下面这样
[plain] view plaincopyprint?
ALTER PROFILE DEFAULT LIMIT FAILED_LOGIN_ATTEMPTS UNLIMITED
关于SGA这块的调整,网上有太多优秀的文章。
一般可以通过修改$ORACLE_HOME/dbs目录下的init.ora文件来自行调整,但是。。。。。。
如果你要调整一个init.ora文件,请使用下面的步骤可确保你的修改不会造成Oracle启动不了
在Linux下使用下面这条命令
[plain] view plaincopyprint?
strings spfilektdb.ora > init.ora.bak
一个init*.ora对应一个spfile*.ora
[plain] view plaincopyprint?
sqlplus sys/password@databaseSID as sysdba登录成功后运行下面两条命令
[plain] view plaincopyprint?
shutdown immediate startup pfile='/opt/oracle/product/10/dbs/init.ora.bak‘
[plain] view plaincopyprint?
create spfile from pfile='/opt/oracle/product/10/dbs/init.ora.bak'; startup force
Oracle的表空间文件都放在$ORACLE_HOME/oradata如/opt/oracle/product/10/oradata这样的目录中的
即在Oracle运行时发觉表空间不够时可以直接打开Oracle的管理界面来动态给它划一块硬盘空间,或者甚至你又装了一块硬盘进服务后,Oracle可以把表空间在运行时扩展到新插入的磁盘中。
ORACLE的表空间划分将影响ORACLE的数据访问速度。
对于表空间来说,最重要的是如何把要连续访问的段放在一起,但是由于oracle 不能提供基于段的统计信息,所以对数据的物理模型设计和访问模式的详细了解对表空间的规划有非常大的好处。然后基于这些原则,我们就可以制定我们的表空间划分原则了:
段大小 | 区片大小 |
128M | 128K |
128M-4G | 4M |
4G及以上 | 128M |
当传统的导入导出遇到了海量数据时~
我在以前一个工程碰到过一个真实的案例,48-50张左右的表,每张表最大数据量为1200万,最小的在280-300万左右的数据,占用硬盘空间在14-16GB左右的一个.dmp包。不定期会进行导入导出操作。
于是我们的数据库负责人员就使用传统的imp/exp命令了。
每一次imp都需要耗费达4-6个小时,有时一旦出错。。。完蛋了,这个效率太低,大家不要看1200万这个数量,大家会说:哟,都是几百万的数据,可是这点数据其实还不算是真正的大数据量,imp一次要4-6小时,这是绝对不合理的。
传统的imp命令在导入时,如果只是仅处理数据,千万条数据对Oracle的处理来说根本就是”毛毛雨“啦,关键是在它导入了数据后,而要对每个表重新做一次索引。
一边导一边索引,一边一条条commit,就好比你用一个循环来insert 1万条数据和你改用statemenet.addBatch(query);的效率的对比一样,一定是后者更快更高效。
因此,在碰到这种情况下我们建议对imp导入命令做下面的折分:
这样,我们原来的imp命令就变成下面这样的样子了:
[plain] view plaincopyprint?
imp user2/pwd fromuser=user1 touser=user2 file=file commit=y feedback=10000 buffer=10240000 ignore=y rows=y indexes=n imp user2/pwd fromuser=user1 touser=user2 file=file commit=y feedback=10000 buffer=10240000 ignore=y rows=n indexes=y
这两条命令是先后发起的,在只导数据时对于上述的14gb左右的一个.dmp包在同样软硬件环境中只用了15-20分钟,后一条建索引语句只用了25-27分钟。
这其中,提高了几倍?大家想想。
编辑这个 /etc/security/limits.conf
[plain] view plaincopyprint?
* soft nofile 1024 * hard nofile 1024
它代表Linux系统下最大打开文件数,如java里面的jdbc connection操作,new File操作都是一个文件打开操作,1024这个值是很少的。
所以我们把它改成
[plain] view plaincopyprint?
* soft nofile 300000 * hard nofile 300000
[plain] view plaincopyprint?
oracle soft memlock 1048576 oracle hard memlock 1048576
memlock’s value=Oracle share_pool_size (gb)*1024*1024
所以你的Oracle中的SGA里的share_pool_size的大小是受到这个值的限制的。
改完后重启Linux系统,然后我们可以使用下面的命令来看我们修改的效果。
[plain] view plaincopyprint?
ulimit –a
使用Oracle用户登录
[plain] view plaincopyprint?
su – oracle然后键入
[plain] view plaincopyprint?
ulimit -l
就可以看到oracle soft memlock的相关修改效果了。
主要是在/etc/sysctl.conf文件中
[plain] view plaincopyprint?
kernel.shmall = 2097152 kernel.shmmax = 2147483648 kernel.shmmni = 4096 kernel.sem = 250 32000 100 128 #SEMMSL SEMMNS SEMOPM SEMMNI
其中最后一行带”#“是我加的,代表这几个数值的”含义“,那么光有含义,没有解释?下面给出解释
SEMMSL=max processes+10
SEMMNS=SEMMSL*SEMMNI
看到没有。。。。。。所以说Oracle中这个processes不是乱设的,是要和你系统的内核设置去绑定的。
我去年写过篇博文,那篇博文是用于记录如何在实际的一个项目中在32位Linux操作系统下让Oracle的SGA突破2GB内存这个限制,详细可见:oracle在32位的Linux环境下SGA如何突破2GB内存限制的最终解决方案
在这边,我再做一下补充。
一些客户,这主要是客户关系,如果换成我我一定要买支持64位操作系统的服务器。
一些使用32位操作系统的客户安装Oracle,大家知道Oracle自从8.0后开始全面转成Java,因此它也受到JAVA虚拟机在32位操作系统下最多只能使用到2GB物理内存这个限制。
因此,当你的机器物理内存有32GB时,但因为你用了32位的操作系统,因此你的Oracle在创建Database时即customer(定义)这个数据库内存分匹时你的SGA是超不过2048MB的。
SGA中有一个很重要的指标即:shared_pool_size,这个值的大小会直接影响性能,关于shared_pool_size有很多更深入的理论性的探讨,这边告诉初学者或者新手,这个值相当于”游戏推荐配置“,不满足,游戏运行暴卡,超过这个值,游戏运行流畅。
但是,我现在有台服务器,物理内存32GB,用的是32位的Linux,我Oracle的SGA想要突破这个2GB大小的限制,又不能重装(客户环境不是你说要重装就要重装的)怎么办?只有想办法:
具体做法还是请见我那篇oracle在32位的Linux环境下SGA如何突破2GB内存限制的最终解决方案的博文吧。
这是我在32位的RedHat 5.5上把Oracle的SGA突破了2GB这个限制后的真实内存分布图,大家看看现在我的SGA是多少了?
查询效率一下提升20多倍,其实一点不值得骄傲,为什么?废话,谁让客户不懂没来事先问我的意见,在64位操作系统下,你机器这么多内存根本就不用这么麻烦
一般我喜欢用第三方工具如:PLSQL Developer,它可以图形化的展现你的Oracle的执行计划,关于执行计划怎么看,大家可以参考这篇博文oracle 执行计划(explain plan)说明
Oracle Hints是一种机制,用来告诉优化器按照我们的告诉它的方式生成执行计划。我们可以用Oracle Hints来实现:
[plain] view plaincopyprint?
{DELETE|INSERT|SELECT|UPDATE} /*+ hint [text] [hint[text]]... */ or {DELETE|INSERT|SELECT|UPDATE} --+ hint [text] [hint[text]]...
[plain] view plaincopyprint?
/*+ALL_ROWS*/ /*+FIRST_ROWS*/ /*+CHOOSE*/ /*+RULE*/ /*+FULL(TABLE)*/ /*+ROWID(TABLE)*/ /*+USE_HASH(BSEMPMS,BSDPTMS)*/
这些常用的hits可以供大家参考,还有更多的hints可以参考oracle dba相关手册
什么是表分析,为什么需要表分析?
这要从Oracle的优化器谈起。Oracle的优化器有两种优化方式:
Oracle的优化器有两种优化方式:
CBO方式:CBO是在ORACLE7 引入,但到ORACLE8i 中才成熟。ORACLE 已经声明在ORACLE9i之后的版本中,RBO将不再支持。它是看语句的代价(Cost),这里的代价主要指Cpu和内存。CPU Costing的计算方式现在默认为CPU+I/O两者之和.可通过DBMS_XPLAN.DISPLAY_CURSOR观察更为详细的执行计划。优化器在判断是否用这种方式时,主要参照的是表及索引的统计信息。统计信息给出表的大小、有少行、每行的长度等信息。这些统计信息起初在库内是没有的,是做analyze后才出现的,很多的时侯过期统计信息会令优化器做出一个错误的执行计划,因些应及时更新这些信息。按理,CBO应该自动收集,实际却不然,有时候在CBO情况下,还必须定期对大表进行分析。
[plain] view plaincopyprint?
ANALYZE TABLE ktdb.T_CD_CODE COMPUTE STATISTICS; ANALYZE TABLE ktdb.T_CD_CODE COMPUTE STATISTICS for all indexed columns;
对一个表进行全表分析,就必须对这个表运行上述两条语句。
比如说,你的数据库每天有几十万条数据进进出出,过了1周,数据库里原先一些查询已经不走Oracle默认的优化引擎了,本来是该走索引的,结果你用SQL分析器看出来它走的是full scan,这时就要做表分析了,一旦表分析做完后,你的数据库又会按照你原有的计划去走最优的路线了,这无疑中会提高你的数据库访问性能。
但是。。。如果我有100,200个表,我岂不是每一个表都要写这么两条语句?也真有这样的傻子写了几百条这样的重复语句,下面传授给大家一个用程序一次性生成所有的表的分析语句吧。
我们使用oracle的sql语句来做:
先生成所有的表分析语句
[plain] view plaincopyprint?
spool 'd:\analyzetable.txt‘ select * from user_tables; spool off
再生成所有的表的索引分析语句
[plain] view plaincopyprint?
spool 'd:\analyzeindex.txt‘ select * from user_indexes ; spool off
最后使用批处理脚本来执行当前连接数据库中所有的表的分析语句,比如说我们创建一个dbAnalyze.sh文件。
[plain] view plaincopyprint?
export ORACLE_BASE=/opt/oracle export ORACLE_HOME=$ORACLE_BASE/product/10 export ORACLE_SID=ktdb $ORACLE_HOME/bin/sqlplus "sys/sys@ktdb as sysdba" <
这边说一个真实的CASE,3年前一个项目,项目刚开始导入了80GB的数据,开发了一段时间大概3-4个月时,第一阶段进入到性能测试,发觉这个报表的一些sql很慢,30秒,40秒。然后我过去后问了一下情况,先不分析这个SQL和JAVA代码先运行一下表分析器,直接所有的报表的SQL从原来的平均35秒一下变成了2.93秒。那剩下来的事呢,再来排摸这个SQL语句写的是否最优和再来看JAVA代码等等等问题。
在这边提这个CASE的目的在于告诉大家,有表分析这么一个事存在,碰到数据库经常数据做迁移或者是进进出出的次数多时,定期执行你的table analyze是非常有必要的,而且能够帮助你提升性能。
Oracle的表分区功能通过改善可管理性、性能和可用性,从而为各式应用程序带来了极大的好处。通常,分区可以使某些查询以及维护操作的性能大大提高。此外,分区还可以极大简化常见的管理任务,分区是构建千兆字节数据系统或超高可用性系统的关键工具。
分区功能能够将表、索引或索引组织表进一步细分为段,这些数据库对象的段叫做分区。每个分区有自己的名称,还可以选择自己的存储特性。从数据库管理员的角度来看,一个分区后的对象具有多个段,这些段既可进行集体管理,也可单独管理,这就使数据库管理员在管理分区后的对象时有相当大的灵活性。但是,从应用程序的角度来看,分区后的表与非分区表完全相同,使用 SQL DML 命令访问分区后的表时,无需任何修改。
什么时候使用分区表:
表分区有以下优点:
缺点:
分区表相关:已经存在的表没有方法可以直接转化为分区表。不过 Oracle 提供了在线重定义表的功能。
它的数据库是怎么存的?不是一个table里有几个主键来区分一下就完了的,想一下电信的日用场景:
某客户来到电信营业厅,说:我查3天内的通话记录
客服人员:请稍侯
过了一会,客服人员告诉客户近3天的通话记录。
过几天,又来了一个客户说:我要查近3年内的通话记录
客服人员:你过几天来
为什么,为什么这边客服人员要让客户过几天来查而不是马上把结果告诉客户?因为这的这个数据库里的表名就是按照年月日来进行物理分区的,当客户要查询过大的数据时,由于已经物理分区了,所以这个数据库就可以存到磁带机上,当客户需要知道一个历史较长时间的记录时,电信的IT人员需要把历史的磁带机如:1997年XXX上海市杨浦区XXX的XXX客户的存档.dat文件所属的这卷磁带装上电脑再查询,这是需要时间的。
那为什么不直接把这些数据都存在一张表用一个DATE字段区分来查询一下不就完了?想想上亿的数据都存在一张表,你再怎么优化也优不到哪里去,此时就要引入反范式了。
比如说我按照时间来分区,本来是1亿条记录,按照时间分成10万条记录一个物理区,这样当我要查询的内容正好落在1区或者是2区时,我需要查询的结果的”分母“只有20万,而原本我不分区时的查询时的分母是”一亿“,是不是这个查询速度会得到显著的提高啊?
下面来看几种Oracle中分区的用法吧
[plain] view plaincopyprint?
PARTITION BY RANGE (CUSTOMER_ID) ( PARTITION CUS_PART1 VALUES LESS THAN (100000) TABLESPACE CUS_TS01, PARTITION CUS_PART2 VALUES LESS THAN (200000) TABLESPACE CUS_TS02 )
[plain] view plaincopyprint?
CREATE TABLE emp ( empno NUMBER (4),ename VARCHAR2 (30),sal NUMBER )PARTITION BY HASH (empno) PARTITIONS 8 STORE IN (emp1,emp2,emp3,emp4,emp5,emp6,emp7,emp8);
[plain] view plaincopyprint?
create table dinya_test ( transaction_id number primary key,item_id number(8) not null,transaction_date date ) partition by range(transaction_date)subpartition by hash(transaction_id) subpartitions 3 store in (dinya_space01,dinya_space02,dinya_space03) ( partition part_01 values less than(to_date(‘2006-01-01’,’yyyy-mm-dd’)), partition part_02 values less than(to_date(‘2010-01-01’,’yyyy-mm-dd’)), partition part_03 values less than(maxvalue) );
它就是:DBMS_REDEFINITION包
即:
以下是Oracle 中使用在线重定义的例子。
[plain] view plaincopyprint?
EXEC DBMS_REDEFINITION.CAN_REDEF_TABLE('schema名', '你将要被切换的表名', DBMS_REDEFINITION.CONS_USE_PK); EXEC DBMS_REDEFINITION.START_REDEF_TABLE('schema名','你将要被切换的表名', '拥分区结构的新表'); EXEC DBMS_REDEFINITION.sync_interim_table('schema名', '你将要被切换的表名', '拥分区结构的新表'); EXEC DBMS_REDEFINITION.FINISH_REDEF_TABLE('schema名', '你将要被切换的表名', '拥分区结构的新表');
如果在上述执行过程中出现了错误,你的原表照样还是被保护的好好的,因为你这时会得到Oracle的错误提示,坏也是坏在NEW表上,所以把NEW表剁掉并且和原表间的”在线“关系断开即可,使用下列语句:
[plain] view plaincopyprint?
exec DBMS_REDEFINITION.ABORT_REDEF_TABLE('schema名','你将要被切换的表名','拥分区结构的新表');
Oracle的客户端中的Oracle Enterprise Manager Console已经可以完成基本的监控任务。
Oracle11g后的客户端中不再提供Oracle Enterprise Manager Console,因此你要么安装11g的客户端后使用如第三方的Oracle客户:toad或者是PL SQL Developer要么就在Oracle11g的服务端打开dbconsole这个服务,然后在前台用:https://localhost:1158/em/console这个地址在客户端进行基于网页的Oracle客户端图形化管理吧。
如果你的服务端的Oracle是10G,那么请在服务端开启dbconsole这个服务时,客户端需要连接时使用这个地址:http://ip:1158
http://blog.csdn.net/lifetragedy/article/details/8215312