adsas 数据库是用于广告买量数据分析;在17年由 Oracle 迁移到 PostgreSQL.现把之前的迁移笔记整理下.本次迁移表91个:存储过程21个:数据库大小2G. 1. 准备PostgreSQL数据库 安装PostgreSQL数据库 参考PostgreSQL简单安装手册 : 在安装PostgreSQL数据库之前:首先要对数据库硬件要做基准评测:会影响是否能取代Oracle服务器.安装完成之后:需要创建同名 数据库/用户/schema. 2. 配置Ora2Pg迁移工具 Ora2Pg是一…

前言 昨晚救火到两三点,早上七点多醒来,朦胧中醒来发现电脑还开着,赶紧爬起来看昨晚执行的SQL命令结果.由于昨晚升级了阿里云的RDS,等了将近两个小时 还在 升降级中,早上阿里云那边回复升级过程中出现异常,正在加紧处理...有点蛋疼 项目介绍 这个项目主要分为WEB.WEB-Manager.WEB-API.APP(ANDROID.IOS) . 开发语言主要是ASP.NET 数据库MySql 架构采用了ASP.NET +EF+ORM   Unity依赖注入 采用了DDD的部分实践 ORM使用的是A…

前言 很多时候数据库的TempDB.日志等文件的暴增可能导致磁盘空间被占满,如果日常配置不到位,往往会导致数据库故障,业务被迫中断. 这种文件暴增很难排查,经验不足的一些运维人员可能更是无法排查具体原因,导致问题不能彻底解决. 场景描述 客户系统比较稳定,用了5台机器做了AlwaysOn高可用组,完全实现了读写分离.磁盘也做了规划,主库日常操作TempDB需求在20G以下,所以TempDB所在的磁盘只配置了100个G的空间. 本案例是客户突然接到监控报警,显示TempDB磁盘空间不足,可用空间不…

参考:http://www.cnblogs.com/duanjie/archive/2011/08/13/2136862.html 说到去重复,感觉逻辑很简单.但动手写起来却并不是那么容易.面试的时候让写sql语句,然后没完整的写出来,然后面试官说你这没结果啊! 去重复首先要把要留下的选出来,然后删除其他重复项.distinct虽然好用,但规则不明显.这里采用:select max(id) from user group by 重复依据. 1.取出要留下的数据,本次依据重复项的最大id为保留项.…

1.虚拟机上centos镜像的获取.这里推荐网易镜像站中的CentOS7版本(其他开源镜像站亦可).这里给出链接: http://mirrors.163.com/centos/7.3.1611/isos/x86_64/CentOS-7-x86_64-DVD-1611.iso ps:这是64位的,现在也很少人使用32位系统了吧.安装CentOS系统(网上教程很多,这里不再赘述) ps:最好留着10G左右的空留空间(安装包就有2G,再加上最后安装的体积,多留点,笔者安装时就不够用了,到时候虚拟机中扩…

今天又搞了一个pgsql 的备份还原,差一点没有成功,以前总是想当然的用,没认真想背后的东西,也没对过程中的疑问做记录,所以后面也没什么印象,常见常新,这次既然又遇到就总结一下. 之前操作pgsql数据库多是用navicat工具,但前两次用它备份还原一个库花了1个多小时还没好,数据传输也总是各种问题,后来用字段的pgAdmin3工具,备份还原几分钟就好了,并且简单不易出错.但用pgAdmin3一直有个疑问,备份是数据格式选项如下:其中自定义和tar格式是可以用恢复命令pg_restore恢复的,…

delete from 表名 a where rowid !=(select max(rowid) from 表名 b where a.ORDER_ID=b.ORDER_ID) 例:如果重复的数据表是:test_table delete from test_table a where rowid !=(select max(rowid) from test_table b where a.ORDER_ID=b.ORDER_ID)…

1 update bd_prod_cate c set c.cate_name = replace(c.cate_name,chr(9),'')//去掉tab符号的 2 update bd_prod_cate c set c.cate_name = replace(c.cate_name,chr(10),'')//去掉回车符号的 3 update bd_prod_cate c set c.cate_name = trim(c.cate_name)//去掉空格符号的 delete from tab…

你有没有遇到过这种情况? 数据库,各种表结构已经创建好了,甚至连数据都有了,此时,我要用Django管理这个数据库,ORM映射怎么办??? Django是最适合所谓的green-field开发,即从头开始一个新的项目 但是呢,Django也支持和以前遗留的数据库和应用相结合的. Django的数据库层从Python代码生成SQL schemas.但是对于遗留的数据库,你已经用于SQL schemas,这种情况下你需要为你已经存在的数据库表写模型(为了使用数据库的API),幸运的是,Django自…

“去O”,是近些年来一直很火的一个话题,随之也产生了各种疑惑,包括现有数据库评估.技术选型等.去O是项系统工程,需要做好充分的评估.本文通过自研工具,生成数据库画像,为去O评估提供一手数据,希望给大家带来借鉴. 一.常见疑惑 很多公司在考虑去O的时候,经常面临这样的问题—"对自己的数据库不够了解",也不免有这样一些疑惑: [管理者] 数据库去O成本高嘛? 工作量大不大? 工期长吗? 是否存在什么风险? [架构师] 使用MySQL能承载现有业务规模嘛? 是否有什么技术风险? 是否需要引入…