在执行sh script/create-dolphinscheduler.sh初始化数据库时报错: 07:05:03.070 [main] ERROR com.alibaba.druid.pool.DruidDataSource - init datasource error, url: jdbc:postgresql://localhost:5432/dolphinscheduler org.postgresql.util.PSQLException: FATAL: Ident authent…
实验环境>>>>>>>>>>>>>>>>>>操作系统:CentOS release 6.3 (Final)数据库版本:PostgreSQL 9.3.5 安装postgresql的依赖有 a.需要一个ISO/ANSIC编译器(至少兼容C89). b.需要GNU make: 不能使用其它make程序. c.缺省时将自动使用GNU Readline库.需要readline和readline-devel 两…
迁移方法有两种:(1)重新初始化postgresql数据库,初始化时指定新的数据路径---PGDATA,然后在新的环境下将原有的数据库备份恢复一下.不过这个方法有点麻烦(2)直接将现有的数据库文件全部拷贝到新的数据库路径下,然后重起数据库服务第二种方法比较简单,因此,就详细描述一下第二种方法:1.postgresql安装后,默认的数据库路径是/var/lib/pgsql/9.x/data2.新建一个路径作为新的数据库数据路径,假如是/home/datasudo mkdir /home/datas…
42.1 initdb:初始化PostgreSQL数据库 42.2 pg_ctl:控制PostgreSQL服务 42.3 psql:PostgreSQL交互式客户端工具 42.4 createdb:创建PostgreSQL数据库 42.5 dropdb:删除PostgreSQL数据库 42.6 dropdb:删除PostgreSQL数据库 42.7 createuser:创建PostgreSQL用户 42.8 dropuser:删除PostgreSQL用户 42.9 pg_dump:备份数据库…
背景 由于项目的需要,使用PostgreSQL数据库,因此在Windows上安装PostgreSQL数据库.但是在安装后,无法访问本地数据库,这个时候查看/data目录,没有任何文件.而且安装过程中,弹出提示框 Problem running post-install step.Installation may not complete correctly the database cluster initialisation failed. 意思是:安装过程中,初始化数据库集群失败 系统环境…
PostgreSQL Drop DATABASE删除数据库失败,需要结束掉占用的连接 登录PostgreSQL后,执行: SELECT pg_terminate_backend(pg_stat_activity.pid) FROM pg_stat_activity WHERE datname='数据库名字' AND pid<>pg_backend_pid();…
Apache DolphinScheduler 是一个分布式去中心化,易扩展的可视化 DAG 工作流任务调度系统.简称 DS,包括 Web 及若干服务,它依赖 PostgreSQL 和 Zookeeper,自身的服务模块包括:api, alert, master, worker(有一个 logger 服务,运行在 worker 中)等.详细部署可以参考:Docker 部署 Dolphin Scheduler 官方提供了构建 Docker 镜像的 Dockerfile,位于项目的 docker/b…
Apache DolphinScheduler 是一个分布式去中心化,易扩展的可视化 DAG 工作流任务调度系统.简称 DS,包括 Web 及若干服务,它依赖 PostgreSQL 和 Zookeeper,自身的服务模块包括:api, alert, master, worker(有一个 logger 服务,运行在 worker 中)等.详细部署可以参考:Docker 部署 Dolphin Scheduler 官方提供了 docker-compose.yml,位于项目的 docker/docker…
点击蓝色字关注! 本篇文章大概8440字,阅读时间大约20分钟 本文记录了在CDH5.16.2集群上集成Dolphin Scheduler 1.3.1的详细流程,特别注意一下MySQL数据库的连接串! 1 文档编写目的 详细记录CDH5上Dolphin Scheduler 1.3.1的部署流程 分布式部署Dolphin Scheduler 2 部署环境和依赖组件 为了适配CDH5上的Hive版本, 需要对DS进行源码编译部署,最后会提供编译好的CDH5版本供各位老铁下载 集群环境 CDH 5.1…
注意下载的是二进制版,不是带Windows Installer的,即绿色版本 http://www.enterprisedb.com/products-services-training/pgbindownload x86下载http://get.enterprisedb.com/postgresql/postgresql-9.2.4-1-windows-binaries.zipx64下载http://get.enterprisedb.com/postgresql/postgresql-9.2.…
pg_upgrade官网介绍:https://www.postgresql.org/docs/10/pgupgrade.html 1.查看老版本数据库编译参数值并记录 select name,setting,unit from pg_catalog.pg_settings where context='internal' 或者在postgres用户下执行如下命令 $ pg_config 重点关注一下四个参数,block_size,segment_size,wal_block_size,wal_s…
本文章经授权转载 1 组件介绍 Apache Dolphin Scheduler是一个分布式易扩展的可视化DAG工作流任务调度系统.致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用. 官网 https://dolphinscheduler.apache.org/en-us/ github https://github.com/apache/incubator-dolphinscheduler 2 ds-1.2.0 目录解读 (讲解配置文件的作用,具体配置在insta…
本文章经授权转载 组件介绍 Apache Dolphin Scheduler是一个分布式易扩展的可视化DAG工作流任务调度系统.致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用. 官网 https://dolphinscheduler.apache.org/en-us/ github https://github.com/apache/incubator-dolphinscheduler Dolphin Scheduler 1.2.0是ds发布的第一个Apache版…
最近准备下PostgreSQL数据库开发的相关知识,本文把总结的PPT内容通过博客记录分享,本随笔的主要内容是介绍PostgreSQL数据库的基础信息,以及如何在我们的开发框架中使用PostgreSQL数据库,希望大家多多提意见. 1.PostgreSQL数据库介绍 PostgreSQL是以加州大学伯克利分校计算机系开发的 POSTGRES,现在已经更名为PostgreSQL.它具有很多不错的特点: 开源:PostgreSQL 是一个自由的对象-关系数据库服务器(数据库管理系统),它在灵活的 B…
数据库project好好的不用主流的MySQL和Microsoft server而要求用听都没听过的postgresql (当然,可能你三个都没听过) 这里的坑主要是把生成的那八张.tbl的表导入pgAdmin中,而网上搜到的有关的资料大部分都是针对Linux的,而没有顾及我们用Windows的宝宝的苦啊/(ㄒoㄒ)/~ 下面是超级详细的过程 首先是postgresql数据库的下载 官网: http://www.postgresql.org/ 点击Download…
Enterprise Architect有一个很实用的共享,在设计UML图的时候,可以连接到一个数据库服务器,将所有的画图数据共享在上面,所有连到这个server的人,都可以看到 别人的图,图中的元素也可以共享,跟svn的效果差不多, 花了点时间研究了一下,设置好了这个respository. Postgresql数据库比较轻型,项目中也在用,就是用这个了. 先建好postgresql数据库,建个新的DB及用户,并开放postgresql的远程访问设置,具体就是编辑pg_hba文件,0.0.0.…
在最近的数据库跨机房迁移中,由于硬件的限制,需要滚动式地将数据库一台台迁移到新机房,先在新机房搭建一个新环境,将数据迁移过去,再将旧机房的机器下架搬到新机房,重新配置后用于下一轮的升级,重新配置过程中,有以下几个问题: 1:由于机房和IP已经发生变化,因此需要按照命名规则修改服务器名称. 2:原数据库上的数据如登录账号/作业/链接服务器等等需要删除 3:部分服务器因磁盘变动,仅保留系统盘,部分SQL Server文件(如果系统数据库文件)已经丢失 对于问题1和问题2,可以进行手动删除或者写个脚本…
实验环境>>>>>>>>>>>>>>>>>>操作系统:CentOS release 6.3 (Final)数据库版本:PostgreSQL-9.3.5 一.安装postgresql数据库,先到官网下载Yum-Repository的rpm包安装到系统,然后直接yum安装postgresql即可. 安装postgresql只需要安装postgresql-server即可,yum安装过程中会自己解决所需的…
0.编译环境 Linux: CentOS 5.5 gcc: 4.1.2 1. 安装PostgreSQL 1) 解压postgresql-9.1.7.tar.bz2 #tar jxvf postgresql-9.1.7.tar.bz2 2) 进入解压后的postgresql-9.1.7目录 #cd postgresql-9.1.7 3) 编译postgresql源码 #./configure --prefix=/opt/pgsql-9.1.7 #make #make install 至此,完成po…
一.pg_dump的用法:数据库的导入导出是最常用的功能之一,每种数据库都提供有这方面的工具,例如Oracle的exp/imp,Informix的dbexp/dbimp,MySQL的mysqldump,而PostgreSQL提供的对应工具为pg_dump和pg_restore.pg_dump是用于备份PostgreSQL数据库的工具.它可以在数据库正在使用的时候进行完整一致的备份,并不阻塞其它用户对数据库的访问.转储格式可以是一个脚本或者归档文件.转储脚本的格式是纯文本,包含许多SQL命令,这些…
 #安装python pip  (在物理环境中安装) sudo apt-get install python-pip       sudo apt-get install python3-pipsudo pip install --upgrade pipsudo pip3 install --upgrade pip 备注说明: python-pip 是python2版本的包管理工具   , python3-pip是python3版本的包管理工具 ,  如果你创建了一个python2的虚拟环境 ,…
Abp.NHibernate动态库连接PostgreSQl数据库 初次接触Abp框架,其框架中封装的操作各类数据的方法还是很好用的,本人还在进一步的学习当中,并将利用abp.NHibernate类库操作PostgreSQL数据的相关方法做一记录,不足之处让评论指点扔砖. 话不多说,直接开干: 1.vs 新建一个项目,(窗体或者控制台程序或者测试程序) 2.NuGet 获取类库(adp.NHibernate) 还需安装一个pgSQl 对应的驱动 3.新建一个继承AbpModule的类,用于配置数据…
PS. 查询\nebula_boh\logs\BOHInterfaceLog.log 日志, 一般数据库文件损坏的日志 有 “UncategorizedSQLException” 或 “zero page at block”  或 “invalid page header” 关键字ERROR 说明postgresql数据库文件存在损坏,根据日志建议的修复方法 , 修复损坏的表或者索引,如果修复失败 则考虑重装数据库了 1.表损坏修复(分开一个一个的执行)set zero_damaged_page…
数据库命令行或者管理工具中执行删除数据库的命令, DROP DATABASE testdb; 的时候,可能会提示: ERROR: database "testdb" is being accessed by other users DETAIL: There are other sessions using the database. 这个意思是说,删除数据库失败,因为这里还有3个链接连接到该数据库上,PostgreSQL在有进程连接到数据库时,对应的数据库是不运行被删除的. 那么怎么…
一般情况下,postgresql由非root用户启动. 1.创建postgres用户 groupadd postgres useradd -g postgres postgres 下面的操作都在postgres用户下完成 su postgres 2.解压源码包 tar -xvzf postgres-9.4.tar.gz cd postgres-9.4 3.配置 ./configure --prefix=/usr/local/postgres --enable-debug (打开debug选项,用…
1 总体规划 操作系统 CentOS Linux release 7.5.1804 处理器 1 内存 4G 硬盘 38G 主机名称 chenzx IP地址 192.168.56.8 1.1 用户组和用户规划 PostgreSQL数据库建议运行在特定的用户与用户组下.对于同一主机安装不同PostgreSQL数据库的场景,建议使用不同的用户管理不同的数据库. 用户ID 用户名称 用户组ID 用户组名称 备注 1002 postgres 1002 postgres 数据库操作系统用户 表-用户组规划…
一.启动PostgreSQL服务######################################################################?root@root:~# service postgresql start    ###启动PostgreSQL服务?root@root:~# service postgresql status    ###查看状态?root@root:~# ss -ant    ###执行成功后,可以通过ss -ant命令查看端口5432…
0.编译环境 Linux: CentOS 5.5 gcc: 4.1.2 1. 安装PostgreSQL 1) 解压postgresql-9.1.7.tar.bz2 #tar jxvf postgresql-9.1.7.tar.bz2 2) 进入解压后的postgresql-9.1.7目录 #cd postgresql-9.1.7 3) 编译postgresql源码 #./configure --prefix=/opt/pgsql-9.1.7 #make #make install 至此,完成po…
对Oracle .SQL Server.MySQL.PostgreSQL数据库优缺点分析 Oracle Database Oracle Database,又名Oracle RDBMS,或简称Oracle.是甲骨文公司的一款关系数据库管理系统.它是在数据库领域一直处于领先地位的产品.可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好.使用方便.功能强,适用于各类大.中.小.微机环境.它是一种高效率.可靠性好的 适应高吞吐量的数据库解决方案. 优点 1. Oracle …
运维开发技术交流群欢迎大家加入一起学习(QQ:722381733) 一.postgresql数据库部署 1.前往postgresql安装包的目录(这里我部署的是10.5的版本) [root@web1 ~]# cd /package/ [root@web1 package]# ls apache-tomcat-.tar.gz jdk-8u131-linux-x64.tar.gz postgresql-.tar.gz [root@web1 package]# 2.解压缩包 [root@web1 pa…