ETL

昨天跟人吃午饭聊天,那个人问我感兴趣做什么

我说我一直在弄后端数据输入输出,处理的工作

她说我们那边主要是data pipe的工作

后来回头想一想,其实自己做的一直就是data pipe的事情

来g之前,在dol,这个词叫ETL,市面上流行的一个词

今天早上再想这个词,感觉ETL这个名字其实很好,基本上是一个pattern

我之前做的几乎所有工作包括现在的工作基本上都需要这三部或者就是这三步中的一步

所有问题归根结底就是准备数据

第一步是Extract,细分的话就是export with filter

第二步是Transform,改数据,计算属性,改格式等等

第三部是Load,也可以叫import。

当然data pipe这个词更加general一些,听着其实也不错,也许更好。一个词就概括了所有的操作。

看来多跟人聊很有好处。

Advertisements

Leave a Reply

Fill in your details below or click an icon to log in:

WordPress.com Logo

You are commenting using your WordPress.com account. Log Out / Change )

Twitter picture

You are commenting using your Twitter account. Log Out / Change )

Facebook photo

You are commenting using your Facebook account. Log Out / Change )

Google+ photo

You are commenting using your Google+ account. Log Out / Change )

Connecting to %s