有没有做数据仓库（数据分析）的工程师

Luckyhan

给钱不干活或者干活不给钱,偶就搞DW

innovate511

汗，　做资深后，哪个方向不累呢？

tiegan

LZ的头像和签名不错，呵呵！你找的是那家公司的BI,IBM还是Oracle还是。。。。。。。。。。。

niegc

我也是说说数据仓库,从我在这个领域也有3年多的历史,从事过的行业也算多了, bank, ivestement bank, tax ,crm,telecom and so on. 在这领域主要的还是业务的理解.但是说技术,如果你是一个新手可能觉得技术很新鲜,但一段时间(半年左右)之后,我相信只有你有心,什么ETL工具啊,OLAP工具,前端展示,你可能算不上专家,起码是个高手. 等你熟悉了这些技术之后,你就会每天跟客户扯皮,因为没办法,客户说业务变,如果你又不懂业务的话,那你只有乖乖的改了, 如果你懂业务的,那你还是要跟他扯,最后还是要改,首先是ETL,然后是OLAP了,然后就是报表了.这东西不难,就是烦, 你想想变一个东东要改那么多地方. 那些人说数据仓库要二年才入门,简直扯蛋.如果说业务要弄懂起码要二年,这个我相信, 比如银行来说,要理解的业务真的很多,而且很多核心系统业务客户本身也不懂.如果谁跟我做项目,我包他半年之后,自己可以设计一个简单底层模型, ETL 工具一定很熟,其实ETL 只是一个概念, 根本不用工具也可以的,直接oracle package + shell script is very good. 所以请不要乱说数据仓库以为是什么高深的东西,什么数据挖掘啊,其实也就这么一回事. 要相成为专家还是要在某个行业下功,把这个行业吃透(这个比较难). 所以专家也不容易当啊.

niegc

谁要找数据仓库人材的,我周围全部都这做这个的.

raullew

原帖由 niegc 于 2006-9-23 01:17 发表
我也是说说数据仓库,从我在这个领域也有3年多的历史,从事过的行业也算多了, bank, ivestement bank, tax ,crm,telecom and so on. 在这领域主要的还是业务的理解.但是说技术,如果你是一个新手可能觉得技术很新鲜, ...

数据仓库，本来就是，是个人都能做，是个摆弄过数据库的都能做数据仓库设计和etl，目前国内就是这个现状
olap，olap，看看市面上的普通技术书籍确实平淡无奇，不就是个star model嘛
但做出来的东西千差万别，一张报表可以15分钟，也可以3分钟，还可以死在那里
半年时间，那是不够的，在一个高水平的团队也得待两年才行
综合能力比数据库技术更重要我认同

[ 本帖最后由 raullew 于 2006-9-23 08:55 编辑 ]

dlms

到底是干啥阿！

innovate511

原帖由 niegc 于 2006-9-23 01:17 发表
我也是说说数据仓库,从我在这个领域也有3年多的历史,从事过的行业也算多了, bank, ivestement bank, tax ,crm,telecom and so on. 在这领域主要的还是业务的理解.但是说技术,如果你是一个新手可能觉得技术很新鲜, ...

老大, 你做过上亿的项目没有, 那才叫真正的数据仓库. 一般所谓的数据仓库项目, 仅仅不过是报表项目或者数据集市项目, 这些项目只需要3年就可以很熟悉了, 但始终拿不出台面, 也发展不上去了.

在数据仓库界如果只有5年以内功底的话, 根本拿不出什么东西出来, 也不能接更大项目了. 要知道在大的项目里, 量变导致质变. 首先超多数据源的数据质量和数据一致的保证, 其次ETL效率在周期内的顺利保证, 包括正常运行和出错处理机制, 然后是保证各个数据集市维度模型设计一致, 多维模型要保证足够的客户的BI需求. 至于在和客户瞎扯的事情, 大家都经历过, 没啥惊讶的. 但首先你们的项目是否是规范的项目, 是不是不讲道理地一切跟随客户的变化, 其次你们的项目设计是否能预见客户未来的需求而保证扩展性.

所以如果说数据仓库项目很简单, 很容易入门的人, 请把那些小项目和真正的数据仓库项目分清楚再说, 如果你始终在一个百万级或者小千万级项目中做事, 是不是眼界太小了?

johnmm

又开始吵了啊.大家眼界不同啊.不过千万别把自己认为的就作为真理了.事情复杂着呢.婆说的公也借鉴.

raullew

原帖由 raullew 于 2006-9-23 08:52 发表


数据仓库，本来就是，是个人都能做，是个摆弄过数据库的都能做数据仓库设计和etl，目前国内就是这个现状
olap，olap，看看市面上的普通技术书籍确实平淡无奇，不就是个star model嘛
但做出来的东西千差万别 ...

前几天的担心变成现实了
我说不要用表连接来做加速展现，用物化视图比较好
不听，现在又得ETL返工
以后为了提高某些聚合或连接查询的性能，还得再改ETL，这么改来改去，何苦呢。。。