SSISDB6:参数和环境变量
SSISDB 系列随笔汇总:
- SSISDB1:使用SSISDB管理Package
- SSISDB2:SSIS工程的操作实例
- SSISDB3:Package的执行实例
- SSISDB4:当前正在运行的Package及其Executable
- SSISDB5:使用TSQL脚本执行Package
- SSISDB6:参数和环境变量
参数(Parameter)是Package暴露给外界的接口,通过传递不同的参数值,能够控制 Package 的执行流程,执行不同的任务(Task)。参数分为Package级别的参数(Package Parameter)和工程级别的参数(Project Parameter),Package参数只能作用于当前的Package,而Project参数能够作用于当前Project中包含的所有Package。参数的值只能引用,不能修改。
参数除了直接赋值之外,还能通过环境变量来赋值。环境是变量的集合,参数引用不同环境中的变量,能够快速切换Package引用的参数值,例如,在测试环境和产品环境之间快速切换,这是参数化编程带来的便利。
一,参数的值
参数有三种类型的值:design_default_value,Default_Value 和 Execution_Value:
- design_default_value:在设计SSIS Project时,设置parameter的默认值。
- Default_Value:在project 部署到SSISDB后,如果不对Parameters value进行修改,那么 Default_Value 和 design_default_value 相同;也可以修改Parameter的default value。
- Execution_Value:Package 在执行时,parameters的值是Execution Value。默认情况下,Package在执行时,使用default value作为execution value;也可以在启动Execution时,设置Parameter的值,修改Execution Value不会修改Default value。
用户可以创建参数和环境之间的映射,Package在执行时,引用环境(Environment)中的变量(Variables)为参数赋值。
1,查看参数的设计值(design_default_value) 和默认值(Default_Value)
select f.name as folder_name,
p.name as project_name,
op.parameter_id,
op.parameter_name,
case op.object_type
when 20 then 'Project'
when 30 then 'Package'
else ''
end as object_type,
op.object_name,
op.data_type,
op.required,
op.sensitive,
op.design_default_value,
op.default_value,
case op.value_type
when 'V' then 'parameter_value is a literal value'
when 'R' then 'referencing an environment variable'
else ''
end as value_type,
op.value_set,
op.referenced_variable_name
from catalog.object_parameters op
inner join catalog.projects p
on op.project_id=p.project_id
inner join catalog.folders f
on p.folder_id=f.folder_id
where op.object_type in(20,30)
2,查看参数的执行值(Execution_Value)
select epv.execution_parameter_id,
case epv.object_type
when 20 then 'Project'
when 30 then 'Package'
when 50 then 'Special'
else ''
end as object_type,
epv.parameter_data_type,
epv.parameter_name,
epv.parameter_value,
epv.sensitive,
epv.required,
epv.value_set,
epv.runtime_override
from catalog.execution_parameter_values epv
where execution_id=104627
3,通过TSQL来设置参数的执行值(Execution value)
declare @Execution_ID bigint
exec catalog.create_execution @package_name=N'Test.dtsx',
@Execution_ID=@Execution_ID output,
@folder_name=N'MyProjectFloder',
@project_name=N'MyProject',
@use32bitruntime=FALSE,
@reference_id=null declare @var0 sql_variant=N'Package_Parameter_value';
exec catalog.set_execution_parameter_value
@Execution_ID=@Execution_ID,
@object_type=30, --Package
@parameter_name=N'Package_Parameter_Name',
@parameter_value=@var0 exec catalog.start_execution @Execution_ID=@Execution_ID
二,参数的属性
参数有两种作用域:Project Scope 和 Package Scope。Project Scope用于Project中的所有package,而Package Scope只能用于当前Package,package只能引用 Parameter的值,不能修改。
Sensitive:敏感性,对于敏感参数,SSIS对值进行加密。
Required:必需性,对于必需参数,在执行时,必须设置值;在Create Agent时,必须显式为必需参数赋值。
三,特殊参数
SSISDB的特殊参数,用于控制Package执行时的特殊行为,这些参数的值,通过 catalog.set_execution_parameter_value 来设置,参数 @object_type必须为50.
- LOGGING_LEVEL
- CUSTOMIZED_LOGGING_LEVEL
- DUMP_ON_ERROR
- DUMP_ON_EVENT
- DUMP_EVENT_CODE
- CALLER_INFO
- SYNCHRONIZED
1,记录日志的级别
LOGGING_LEVEL:设置执行实例的日志级别,有效值是0、1、2、3,数值越大,日志记录的越详细,分别是:不记录(no Logging),基本(Basic),性能(Performance)和详细(verbose )。
2,Package执行的同步性
默认情况下,当使用 catalog.start_execution 执行一个Package的执行实例(Execution Instance)时,该sp会立即返回结果值(0,表示调用Package成功),而不会等待Package执行完成,如果将参数 SYNCHRONIZED 设置为1,那么该SP不会立即返回,而是等到Package执行完成之后,才返回结果。
exec catalog.set_execution_parameter_value
@execution_id,
@object_type= 50,
@parameter_name = N'Synchronized',
@parameter_value = 1;
3,创建用于调试的转存文件
- DUMP_ON_ERROR:在Package发生错误时创建转存文件
- DUMP_ON_EVENT:在触发事件时创建转存文件
- DUMP_EVENT_CODE:转存事件代码
4,查看特殊参数的执行值(Execution value)
select epv.execution_parameter_id,
case epv.object_type
when 20 then 'Project'
when 30 then 'Package'
when 50 then 'Special'
else ''
end as object_type,
epv.parameter_data_type,
epv.parameter_name,
epv.parameter_value,
epv.sensitive,
epv.required,
epv.value_set,
epv.runtime_override
from catalog.execution_parameter_values epv
where execution_id=104627
and epv.object_type=50
四,环境和环境变量
环境(Environment)是变量的集合,创建环境的目的是为了向环境中添加变量。在开发Package时,为了保证开发包的质量,需要把产品环境和测试环境独立开来,包只有在测试环境中执行通过时,才能部署到产品环境中。这可以简单的通过修改链接管理器(Connection Manager)来实现。但是,当链接比较多时,或参数比较多时,在修改参数时,很容易出现错误。如果把Project和环境关联起来,把环境中的变量和参数关联起来。这样,只需要修改Project引用的环境,就可以很容易地切换Package运行的环境。
1,创建环境
通过向导来创建环境,右击“Environments”,点击“Create Environment”,打开创建环境的向导,输入环境名称,点击“OK”按钮,创建环境:
2,向环境中添加变量
右击新建的环境,点击“Properties”,选择“variables”页,输入变量的名称,选择变量的类型,输入变量值,勾选变量的敏感(Sensitive)属性:
3,设置Project引用环境
右击工程名称,点击“Configure”,在“Parameters” Tab中查看工程的参数。
选择“References” Tab,选择project 引用的环境:
回到“Parameters”Tab,点击value列后面的“...”,逐个设置工程参数应用的环境变量:
4,查看Project引用的环境
通过 catalog.environment_references 查看Project应用的环境,引用类型reference_type,当reference_type为A,表示使用绝对应用(absolute reference);当reference_type为A,表示使用相对引用(relative reference)。相对引用表示环境和Project必须处于相同的Folder中;绝对引用表示环境和Project可以位于不同的Folder中,当然也可以位于相同的Folder中。
五,查看环境变量
1,参看参数 和环境变量的对应关系
--object_type : 20 (project parameter), 30 (package parameter)
--value_type: V (parameter_value is a literal value),R(referencing an environment variable)
--value_set:1(the parameter value has been assigned), 0 (the parameter value has not been assigned) select op.project_id,
p.name as ProjectName,
op.object_type,
op.object_name,
op.parameter_name,
op.data_type,
op.required,
op.sensitive,
op.design_default_value,
op.default_value,
op.value_type,
op.referenced_variable_name,
op.value_set
from [catalog].[object_parameters] op with(NOLOCK)
inner join catalog.projects p with(nolock)
on op.project_id=p.project_id
where object_type in(20,30)
2,查看SSISDB的环境变量
select f.name as Folder_Name,e.name as Environment_Name,
ev.variable_id,ev.name as Environment_Variable_Name,
ev.sensitive,ev.type,ev.value
from catalog.environments e
inner join catalog.environment_variables ev
on e.environment_id=ev.environment_id
inner join catalog.folders f
on e.folder_id=f.folder_id
3,查看Package 的参数和环境变量的映射关系
select er.environment_folder_name,er.environment_name,p.name as Project_Name,
er.reference_type,
ev.variable_id,ev.name as Environment_Variable_Name,
ev.sensitive,ev.type,ev.value,
op.parameter_id,op.object_type,op.object_name,op.parameter_name,
op.data_type as Parameter_Data_Type,op.required,op.sensitive,
op.default_value,op.design_default_value,op.value_set,op.value_type
from catalog.environment_references er
inner join catalog.projects p
on er.project_id=p.project_id
inner join catalog.environments e
on er.environment_name= er.environment_name
inner join catalog.environment_variables ev
on e.environment_id=ev.environment_id
inner join catalog.object_parameters op
on op.project_id=p.project_id and op.value_type=N'R' and op.referenced_variable_name=ev.name
参考文档:
catalog.object_parameters (SSISDB Database)
catalog.environment_references (SSISDB Database)
catalog.set_execution_parameter_value (SSISDB Database)
Quick Tip – Run SSIS 2012 packages synchronously and other execution parameters
SSISDB6:参数和环境变量的更多相关文章
- 34.Docker安装Mysql参数及环境变量使用
容器安装好后,通过exec进去到容器的内部, 容器安装的时候两种容器配置参数 直接在镜像的后面加配置 第二种方式 把这段代码拷贝过来.参数我们可以写在镜像的后面 我们把参数写在镜像的后面 然后我们需要 ...
- idea指定启动参数、环境变量
1. 点击Edit Configurations 2 # VM Arguments 是设置的虚拟机的属性 # VM options # 环境变量参数 这里需要指定-D参数 -server -XX:M ...
- 解决 Flask 项目无法用 .env 文件中解析的参数设置环境变量的错误
在 Windows 上启动 Flask 项目时,工作目录有 UTF-8 编码的 .env 文件,里面配置的环境变量在 Python2 中识别为 Unicode 类型,导致下述错误: * Serving ...
- SpringBoot 启动参数设置环境变量、JVM参数、tomcat远程调试
java命令的模版:java [-options] -jar jarfile [args...] 先贴一下我的简单的启动命令: java -Xms128m -Xmx256m -Xdebug -Xrun ...
- .NET Core采用的全新配置系统[5]: 聊聊默认支持的各种配置源[内存变量,环境变量和命令行参数]
较之传统通过App.config和Web.config这两个XML文件承载的配置系统,.NET Core采用的这个全新的配置模型的最大一个优势就是针对多种不同配置源的支持.我们可以将内存变量.命令行参 ...
- [译]SSIS 通过环境变量配置数据源连接参数
场景 希望在包执行的时候可以随意选择参数,这时候我们可以用环境变量 . 另外所有包都可以用环境变量,有大量包的时候就比较方便. Step 1: 创建SSIS包 在Data Flow Task里面创建 ...
- 【linux草鞋应用编程系列】_2_ 环境变量和进程控制
一. 环境变量 应用程序在执行的时候,可能需要获取系统的环境变量,从而执行一些相应的操作. 在linux中有两种方法获取环境变量,分述如下. 1.通过main函数的参数获取环境变量 ...
- Unix/Linux环境C编程入门教程(32) 环境变量那些事儿
1. getenv() putenv()setenv()函数介绍 getenv(取得环境变量内容) 相关函数 putenv,setenv,unsetenv 表头文件 #include<stdli ...
- linux 学习:环境变量设置
一.临时环境变量 临时环境变量,只对当前打开的shell生效,shell关闭后,环境变量失效. 设置方法一: 分两步 MYPARA=hello export MYPARA 设置方法二:一步完成 exp ...
随机推荐
- __MySQL 5.7 Replication 相关新功能说明
背景: MySQL5.7在主从复制上面相对之前版本多了一些新特性,包括多源复制.基于组提交的并行复制.在线修改Replication Filter.GTID增强.半同步复制增强等.因为都是和复制相 ...
- MySQL crash-safe replication(1)
MySQL 5.6 对复制功能提供了新特性:slave 支持 crash-safe,可以解决之前版本中系统异常断电可能导致的 SQL thread 信息不准确的问题. 原文:Enabling cras ...
- HTML5学习资料
HTML5 的一些经典demo收集 Animated Books with CSS 3D Transforms 这是一个3D书本,CSS3完成 =========HTML5特效聚集网站======== ...
- python基础学习21----进程
python中的多线程其实并不是真正的多线程,如果想要充分地使用多核CPU的资源,在python中大部分情况需要使用多进程. 进程与线程的使用有很多相似之处,有关线程方面的知识请参考https://w ...
- vuejs安装篇
1.安装nodejs,自带npm环境. 地址:https://nodejs.org/en/download/,Node.js 历史版本下载地址:https://nodejs.org/dist/ 可自 ...
- 模拟的confirm
<!DOCTYPE html> <html> <head> <meta charset="utf-8"/> <title> ...
- 团队作业——Alpha冲刺 12/12
团队作业--Alpha冲刺 冲刺任务安排 杨光海天 今日任务:自定义保存界面布局以及交互接口函数的实现 明日任务:总结项目中的问题,为什么没能按照预期推进项目 郭剑南 今日任务:继续解决Python编 ...
- Fedora 中多显示器环境下的工作区切换
[Dual monitor workspaces] 默认情况下,fedora中 Gnome 桌面环境在切换工作去的时候,只会在 Primary display 上切换, 其他显示器保持不变.如果要实现 ...
- 2.python数据结构的性能分析
一.引言 - 现在大家对 大O 算法和不同函数之间的差异有了了解.本节的目标是告诉你 Python 列表和字典操作的 大O 性能.然后我们将做一些基于时间的实验来说明每个数据结构的花销和使用这些数据结 ...
- kafka服务无法启动的原因
kafka集群中一台服务器kill掉后再启动时报错. java.io.IOException: Map failed Caused by: java.lang.OutOfMemoryError: Ma ...