分类目录归档：内部机制

Exadata的磁盘自动管理-1-教你读懂cell alert中的磁盘相关信息 Exadata的磁盘自动管理-2-Cell上各种磁盘相关的概念 Exadata的磁盘自动管理-3-磁盘自动管理的操作规则 首先明确一些Cell上各种磁盘相关的概念： 每个cell上有12块Physicaldisk，每个盘的容量相同，目前，X2的可以有600GB, 2TB和3TB（2T盘已经停产了），X3的只能有600GB和3TB，X4可以有1.2T和4T盘。 每块物理盘对应一个LUN（前面的2块盘，分别会划去一部分空间用来管理OS。后面的10块盘分别直接对应一个LUN），每个LUN对应一个CELLDISK。 每个cell上前两块盘的前面42G左右的空间做成软RAID1，后面的557G空间和其他10块盘使用方法一样，都是作为一个独立的celldisk的。 注意，celldisk是一个逻辑盘的概念。 这个信息在cell的配置文件中有明确说明 ： 还可以使用下面的命令查看celldisk的容量： [root@dm01cel11 ~]# cellcli -e list griddisk where celldisk=CD_02_dm01cel11 attributes name,size,offset 每个cell上有16个Flashdisk（每个cell上4个PCI闪存卡，每个卡上集成4块flashdisk），X2是每个24G，X3是每个100G，X4是每个200G。 每一个Flashdisk对应一个Flash LUN，每个Flash LUN对应一个Cell Disk。 普通硬盘，即disktype=HardDisk的盘上创建的Celldisk缺省命名为CD_00_cellname,CD_01_cellname, …CD_11_cellname 基于FlashDisk的盘，即disktype=flashdisk的盘上创建的Celldisk缺省命名为FD_00_cellname, FD_01_cellname … FD_15_cellname. GridDisk是一些创建在一个或者多个celldisk上的逻辑盘。在Exadata的标准安装流程中，Griddisk只是使用基于硬盘创建的celldisk，而不使用基于Flashdisk创建的celldisk。 一般我们使用基于flashdisk创建的celldisk来做flashcache和flashlog。 在Exadata环境中，ASM DISK其实就是一个的griddisk。 在Exadata的标准安装中，一般会创建3个磁盘组，其中DATA DG和RECO … 继续阅读 →

Exadata的磁盘自动管理-1-教你读懂cell alert中的磁盘相关信息 Exadata的磁盘自动管理-2-Cell上各种磁盘相关的概念 Exadata的磁盘自动管理-3-磁盘自动管理的操作规则 从11.2.3.2.x开始，系统可以自动识别磁盘性能下降，并自动从当前配置中移除。 出现性能下降的磁盘会影响系统整体的性能表现，因为所有的工作负载是平均的分布到所有的磁盘的。 举个例子，如果一个磁盘有相对于其他的磁盘有30%的性能下降，那么整体的系统IO能力就会下降30%。 当检测到磁盘性能下降时，系统自动从当前配置将该盘移除。Exadata会执行一些列性能测试，如果这个磁盘的问题是临时问题，那么系统会自动将其放回原来的配置中。如果这个磁盘不能通过测试，那么就会被标记为性能不佳（pool performance），并自动开启一个ASR(Automatic Service Request)来请求更换磁盘。 这一特性对于硬盘和flash盘同样有效。 说到Exadata的IO能力和管理，必要要提到众所周知的CELLSRV。 CELLSRV是Exadata上存储服务器的主要组成部件，它是一个多线程服务器，主要针对简单的块请求和智能扫描请求（如投影和筛选的表扫描等）提供服务，另外，CELLSRV也与DBRM协同工作来计量各种数据库和客户组在发送IO时所用IO带宽。 CELLSRV收集与操作相关的大力统计信息。Oracle数据库和ASM进程使用LIBCELL和CELLSRV通信，LIBCELL使用iDB协议将IO请求转换为要发送给CELLSRV的消息。 CELL上跟IO相关的主要进程还有MS和RS。 MS(管理服务器)，MS提供Exadata cell管理和配置的功能。它与命令行界面CELLCLI协同工作，每个CELL有CELLCLI进行单独管理。 CELLCLI是一个本地化的管理工具，也就是说他需要在某个特定CELL中管理该CELL。 不过，在Exadata上，可以用dcli实现远程地对多个CELL运行同一个CELLCLI命令来达到集成管理或者统一管理。dcli是一套集成的工具包，本质是通过SSH进行集成管理，可以单独配置（比如你自己有很多非Exadata的linux环境，可以根据需要配置dcli）。 另外，在CELL上，除了CELLSRV负责收集主要的统计信息外，MS也负责发送警报和收集其它统计信息。 RS（重启服务器），RS用于启动和关闭CELLSRV和MS服务，并监控这些服务进程的状态，在必要时负责重新启动cellsrv和ms。 前面说到CELLSRV会自动检测磁盘的性能，并自动更改配置。当CELLSRV检测到磁盘性能下降时，cell disk的状态就会更改为’normal – confinedOnline’，物理盘的状态更改为’warning – confinedOnline’。 这意味着磁盘已经进入了性能表现不佳的第一个阶段，这个阶段是个过渡阶段，磁盘状态不会停留在这个阶段很长时间。 通常磁盘的常见状态会有4种： HEALTH_BAD_ONLINE HEALTH_BAD_OFFLINE HEALTH_GOOD HEALTH_FAIL 这些检测和状态的变化，会有CELLSRV记录到alert中，例如： 同样的信息，在alerthistroy总也有可以观察到： 我猜测，上述信息是通过类似：下面这样的命令完成的： list griddisk attributes … 继续阅读 →