salvage 数据块打捞工具】的更多相关文章

基本上所有数据库都是按块存储数据的,每种数据库的块都有自己有特征,我们可以找出特征,当数据库文件丢失,甚至文件系统完全损坏时,从硬盘扇区中把数据页打捞出来,从页从数据页中恢复出行数据.根据这个原理,开发了salvage通用数据块打捞程序支持windows和linux,支持本地文件保存数据也支持网络压缩传输异地保存,这样可以最大限度防止数据二次覆盖.程序还内部集成了一个小型http服务器,可以用网页直接操作程序,解决命令行界面不友好的缺点. 目前只是初期版本,只支持oracle数据库数据页的打捞,…
实验:某个分区数据块损坏,不完全恢复此分区表数据 背景:数据库没有有效备份,某个分区中有数据块损坏. 要求:最大限度恢复此分区数据. 环境:RHEL 6.4 + Oracle 11.2.0.4 1. 初始化实验环境 2. 模拟分区中有数据块损坏情景 3. 尝试使用Oracle内部事件10231进行不完全恢复 Reference 1. 初始化实验环境 初始化创建模拟实验环境用到的表空间.业务用户.表,并导入测试数据. 本次实验用到表空间DBS_D_JINGYU, 业务用户JINGYU, 分区表T_…
数据块概述Oracle对数据库数据文件(datafile)中的存储空间进行管理的单位是数据块(data block).数据块是数据库中最小的(逻辑)数据单位.与数据块对应的,所有数据在操作系统级的最小物理存储单位是字节(byte).每种操作系统都有一个被称为块容量(block size)的参数.Oracle每次获取数据时,总是访问整个数(Oracle)数据块,而不是按照操作系统块的容量访问数据. 数据库中标准的数据块(data block)容量是由初始化参数 DB_BLOCK_SIZE 指定的.…
最近工作需要,看了HDFS读写数据块这部分.不过可能跟网上大部分帖子不一样,本文主要写了${dfs.data.dir}的选择策略,也就是block在DataNode上的放置策略.我主要是从我们工作需要的角度来读这部分代码的. hdfs-site.xml <property> <name>dfs.data.dir</name> <value>/mnt/datadir1/data,/mnt/datadir2/data,/mnt/datadir3/data<…
在Node中,http响应头信息中Transfer-Encoding默认是chunked. Transfer-Encoding:chunked Node天生的异步机制,让响应可以逐步产生. 这种发送数据块的方式在涉及到io操作的情况下非常高效.Node允许以数据块的形式往响应中写数据,也允许以数据块的形式读取文件. 这样可以有高效的内存分配,不需要把文件全部读取到内存中再全部响应给客户,在处理大量请求时可以节省内存. var http = require('http'); var fs = re…
1. rdba(Tablespace relative database block address) 是相对数据块地址,是数据所在的地址,rdba可就是rowid 中rfile#+block#. 根据rdba获取file#和block#,使用10进制的rdba ), dbms_utility.data_block_address_block() FROM dual; Block dump from disk: buffer tsn: --表示表空间 rdba: )--相对地址,文件号+块号 s…
分为物理损坏和逻辑损坏-物理损坏一般指数据块头部不可以访问.数据块校验值不合法,数据块格式不再是oracle承认的格式-逻辑损坏一般是在物理性结构完整的情况下,数据的内容在含义上不正确,比如保存了不允许的字段值 interblock corruption: 块损坏发生在块之间,而不是块自身内部.interblock corruption都是逻辑损坏. intrablock corruption: 块自身内部发生的损坏.intrablock corruption可能是物理损坏,也可能是逻辑损坏.…
Offset 0 1 2 3 4 5 6 7 8 9 A B C D E F 00018000h 6 A2 0 0 0c 0 80 3 8b 61 15 0 0 0 3 4 type frmt spare1/2 rdba bas wrp seq flg   The Cache Header The Cache Header :   注:@符号后数字表示块内偏移字节数 Struct  kcbh  20 bytes @0   :此结构体共20字节,块内偏移为0字节,即块首. ub1 type_kcb…
数据块重分布sbin/start-balancer.sh -threshold <percentage of disk capacity>percentage of disk capacityHDFS达到平衡状态的磁盘使用率偏差值值越低各节点越平衡,但消耗时间也更长…
对于开源的东东,尤其是刚出来不久,我认为最好的学习方式就是能够看源代码和doc,測试它的样例 为了方便查看源代码,关联导入源代码的项目 先前的项目导入源代码是关联了源代码文件 block数据块,在配置文件hdfs-default.xml中能够查看到,记住要改动不是在这里 block文件存储块是最主要的单位 查看block存放位置,配置文件里查看 假设文件大于64M会占两个块,meta文件是校验文件,第二个文件大于64M,删除文件后,则相应block不在 datanode存放文件,一个文件能够存放…