Informatica基础系列(三)——表达式、筛选、查找组件

目录:

Informatica基础系列(零)——前言

Informatica基础系列(一)——Helloworld

Informatica基础系列(二)——更新策略转换组件

Informatica基础系列(三)——表达式、筛选、查找组件

Informatica基础系列(四)——联结组件、路由组件

Informatica基础系列(五)——参数与变量

Informatica基础系列(六)——发布环境、迁移知识库

Informatica基础系列(七)——常见问题、注意事项

Informatica基础系列(外)——不支持 MySQL Community 版本的解决方案

正文:

继续分享 Infa,这次介绍三个组件的用法:表达式组件(Expression Transformation,以下简称 ET)、筛选组件(Filter Transformation,以下简称 FT)、查找组件(Lookup Transformation,以下简称 LT)。

1. 概念介绍

第一,表达式组件,用于对字段进行公式计算,或者简单的逻辑判断表达式,进而做一些简单的转换操作。第二,筛选组件,很明显是对数据的筛选,过滤掉不传输的记录。第三,查找组件,是根据字段查找对应的表记录,得到想要的字段值。这么描述,也许不太容易理解,下面我们做一个 demo,很快就能理解了。

2. demo 描述

先给出 Source 数据,如下图所示:

可以看到,我在 Source 加了一个 Gender 字段,保存的是 Int 类型。最上面的Dictionary 是一个字典表,保存的是枚举字段(Gender)的映射关系,比如 Gender = 0,代表“女”。我们的需求是把 Source 数据 Upset 到 Target,其中 Source.Gender 要转换为文本保存到 Target.GenderText,并且 Source.Id = 1 的记录不做处理(过滤掉)。

3. 开发步骤

首先要重新导入 Source、Target,因为表结构发生了变化(如果变化较小,可以直接在 Source、Target 上调整)。另外,导入我们新建的 Dictionary 表,作为 Source 导入(也可作为 Target),后续用于 Lookup,如下图所示:

导入后可以看到,Source、Target 的新增字段 Gender、GenderText 已经上去了,Dictionary 也有了,如下图所示:


接下来设计 Mapping,SQ 后面拖一个 ET ,将 SQ 的 Gender 拖到 ET,并按下图所示添加 2 个常量字段 TableName、ColumnName,为 LT 的传入做准备。

再拖一个 LT 进来,如下图所示:


LT 的目的是从 Dictionary 表中查找 Source.Gender 对应的 ItemValue,并连入 Target.GenderText,LT 中多余的字段可以删除,如下图所示:

然后将事先准备好的 ET 的字段连入到 LT 作为判断条件,如下图所示:

为了语义清晰,我们对着三个字段重命名,以表示是传入的字段,如下图所示:

接着就可以添加 LT 的条件了,点击 “Condition” tab,编辑如下:

这样就可以了,LT 的 ItemValue 出来就是我们想要的 Gender 文本值了。但是还有一种情况我们没有考虑,假如 Gender 的值不是 0 也不是 1,这个值在 Dictionary 是找不到对应的文本值的,我们需要得到一个“未知”的结果,比如 Source 有一条“观世音菩萨”的 Gender = -1。为了处理这种情况,我们再加一个 ET 加以判断,如下图所示:

上图编辑框内的代码表示:如果 ItemValue 为空,则等于“未知”,否则就等于 ItemValue。接下来是最后一个 FT,拖一个 FT 进来,编辑 FT 的条件:Id <> 1 的记录被抽取,如下图所示:

最后将线连接到 Target,Mapping 就完成了。切换到 Workflow 界面 Refresh Mapping 后,将传输模式改为 Update,并将 Target 处理模式改为 Update else Insert,如下图所示:


需要注意的是,添加的 LT 需要在 Session Task 上指定一下 DB 连接,如下图所示:

4. 验证结果

最后运行一下,并看下 Target 拿到的数据是否如我们预期的那样,如下图所示:


可以看到,Id = 1 的“李海波”没抽取,GenderText 也如预期转换成功了,“观世音菩萨”的性别是“未知”,都按照我们的需求实现了!感谢关注,希望对您有益!

At 2017.10.11

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,684评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,143评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,214评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,788评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,796评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,665评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,027评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,679评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,346评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,664评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,766评论 1 331
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,412评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,015评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,974评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,073评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,501评论 2 343

推荐阅读更多精彩内容

  • 目录: Informatica基础系列(零)——前言Informatica基础系列(一)——HelloworldI...
    野鸟阅读 1,733评论 0 6
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,596评论 18 139
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,443评论 25 707
  • 太阳 你为什么和我捣乱 早晨 你露出笑脸 欢迎我的被子与你相见 临近中午 你忽然就阴沉着脸 告诉我你不开心 我的被...
    cloud18阅读 184评论 0 1
  • 1、思路 通过最底层的ViewController依次向上寻找,直到找到最顶层的ViewController,也就...
    JC_Wang阅读 273评论 0 0