company_base_info_staff_job
"company_base_info_staff_job": {
"engine": "python script", # datax or python script
"update_priority": 2,
"insert_priority": 1,
"insert_schedule_time": [
{"hou": "", "min": "*", "sec": "*",
"end_time": "2019-03-14 10:00"}],
"update_schedule_time": [
{"day_of_week": "*", "start_date": "2019-03-18 11:40:00",
"hou": "", "min": "", "sec": ""}],
"mongo_read": {
"address": [mongo_cfg["raw_data"]["addr"]],
"dbName": mongo_cfg["raw_data"]["db_name"],
"collectionName": "company_base_info",
"userName": mongo_cfg["raw_data"]["user"],
"userPassword": mongo_cfg["raw_data"]["pwd"],
"query": '',
"column": [('string', 'company_name'),
('string', 'main_staff.position'),
('string', 'main_staff.name'),
]
},
"mysql_write": {
"host": mysql_cfg["seeyiidatabase"]["host"],
"port": mysql_cfg["seeyiidatabase"]["port"],
"username": mysql_cfg["seeyiidatabase"]["user"],
"password": mysql_cfg["seeyiidatabase"]["pwd"],
"dbName": mysql_cfg["seeyiidatabase"]["db_name"],
"table": ["company_base_info_staff"],
"session": [],
"preSql": [],
"postSql": [],
"column": [
"company_name",
"staff_position",
"staff_name",
],
},
"setting": {},
"create_table_column": [
{"name": "company_name", "type": "varchar", "size": 2555,
"unique": False, "default_null": True, "COMMENT": "公司名称"},
{"name": "staff_position", "type": "varchar", "size": 200,
"unique": False, "default_null": True, "COMMENT": "职位名称"},
{"name": "staff_name", "type": "varchar", "size": 2555,
"unique": False, "default_null": True, "COMMENT": "高管人员名"},
],
"query_cfg": { },
"reader_type": "mongodb_read"
}
company_base_info_staff_job的更多相关文章
随机推荐
- http升级https的时候,遇到一个问题
问题: Mixed Content: The page at 'https://api.xxxx.com/test' was loaded over HTTPS, but requested an i ...
- lillietest 正态分布的拟合优度测试
函数 lillietest格式 H = lillietest(X) %对输入向量X进行Lilliefors测试,显著性水平为0.05.H = lillietest(X,alpha) %在水平alpha ...
- spring对bean的管理细节
<?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.spr ...
- LeetCode 解题总结
1. 最长合法括号串 给定只包含'('和')'的字符串,找出最长合法括号串的长度. Example 1: Input: "(()" Output: 2 Explanatio ...
- 虎牙直播弹幕转换字幕格式 基于Node.js 的 huya-danmu
1 首先安装nodejs运行环境, 从 http://nodejs.cn/download/ 下载对应的版本 2 安装 huya-danmu 模块, https://github.com/BacooT ...
- Elasticsearch一些使用笔记(持续更新)
这篇博客记录这一些运维ES的一些经验. 1.节点磁盘使用率过高,导致ES集群shard无法分配,丢失数据? 有两个配置,分配副本的时候 参数名称 默认值 含义 cluster.routing.allo ...
- Jenkins构建自动化脚本执行无界面解决方法
场景: jenkins构建selenium自动化用例的时候,会有jenkins自带服务后台运行自动化脚本,可无界面运行IE.Chrome.Firefox. 然而运行IE浏览器时候(IE比较特殊),Je ...
- loj题目总览
--DavidJing提供技术支持 现将今年7月份之前必须刷完的题目列举 完成度[23/34] [178/250] 第 1 章 贪心算法 √ [11/11] #10000 「一本通 1.1 例 1」活 ...
- JS监听浏览器的返回、后退、上一页按钮的事件方法
在实际的应用中,我们常常需要实现在移动app和浏览器中点击返回.后退.上一页等按钮实现自己的关闭页面.调整到指定页面或执行一些其它操作的需求,那在代码中怎样监听当点击微信.支付宝.百度糯米.百度钱包等 ...
- php配置文件参数设置
pm.max_children 设置多大合适? 一.pm.max_children 多大合适? 这个值原则上是越大越好,php-cgi的进程多了就会处理的很快,排队的请求就会很少. 设置”max_ch ...