迷茫，在统计分析的路上我还能走多远

3057

收藏 2010-08-25

觉得有感触的给个分哈！小弟拜谢！
我不得不面对这个问题了，在命运的安排和我自己稀里糊涂的努力了这么久之后。
我本科和硕士都是学心理学的。虽然统计分析是心理学的骨架和大脑，本科的学习也很重视统计这门课，但是理论基础很薄弱，高数学的是3，勉强及格过关，概率论到现在都想不起来学还是没学了。硕士更是忙着胡混，没有好好学习，到毕业论文的时候，必须用高级的统计分析方法才能过关，临时抱佛脚，自己学了学结构方程和AMOS，蒙混过关。
在这样的背景下，我做了一阵子市场调研。出于对统计分析的喜欢，开始专注做企业的数据分析。
从最基本的做统计报告开始，最初是人家设计好了报告的模版，我只负责往里面填数就可以，也就是最简单的数据处理。在这个过程中，我学习了excel的基本使用方法，vlookup,if,chose,还有像sum，average等这些基本的函数。
但是在企业中混，总会有挑战，很快，就有个机会，我作为一个主要的竞标参与者，帮公司拿到了一个做数据库营销平台软件的项目。在这个项目中，只有我懂得数据库和数据分析的一点皮毛知识，另外一个PM是纯做软件的，其他的几个码农是从外包公司借过来的。就在我没有接受过任何正规培训的基础上，我竟然承担起了数据库架构这个重要的责任。
实际上当时我并不知道我是这样的角色，我负责将客户需要的功能用文字和图形（也就是mockup）的形式告诉技术去实现。在我设计这些功能尤其是报告的时候，就不得不想到后台数据库是什么样的结构（后来知道这叫表结构），都包含哪些数据。于是，我就用EXCEL来设计，一个sheet是一个表，然后把里面的字段列出来，然后设计每个表之间的关键字段，然后我很清楚了，我设计的报告就是从这样的若干个表中出来的，然后说明白，这些报告的数据都如何从这些表中获取。从平台的功能中加入的数据，是如何进入到这些表中的，如何进行更新。然后我又发现，不能让用户随便的输入信息，要给些限制，于是把每个字段的限制都填写清楚。实际上，我确实是做了一个数据库架构的工作，但是我自己并不知道，我只是一步步做下来。没想到的是，PM竟然真的按照我的这些设计，直接做了系统。而且据那几个码农说，这个系统在数据库设计上很好，在出报告方面从来没有出过什么问题。
就这样糊里糊涂的，我开始接触数据库，买了几本SQL开始自学。但是我并没有从此走上数据库设计这条道路。
仍然是做数据分析。
逐渐的，我开始为客户设计报告内容和格式。最初仍然是没有体系，想到哪里设计到哪里，然后再增增删删，做多了，才发现，原来是有规律可寻的。无非就是：1.确定衡量客户所要了解的内容的主要衡量指标，也就是KPI，而且这些KPI一般都是几个总值和几个平均值（比如Revenue，客户数量是总值，那么平均每个客户的Revenue就是平均值，或者叫basket size）2.确定和这些指标交叉的维度 3.确定展现形式：%，环比，同比，排序，top几等。3. 确定图表形式。在我终于得到了这些总结之后，又面临了新的挑战：客户需要比较的维度的值太多，比如城市，如果比较10几个城市，指标又有这么多，如何能简介明了的展示给客户呢？我开始学习EXCEL的动态图表。不得不说，互联网是我最好的学校，网友们贡献的资料，是我最好的老师。于是又在EXCEL的使用上有了长进，更学习了一些比如offset这样，我认为比较有用，但是难理解的函数。
后来的报告越来越多，每个月要出的报告也越来越多，最初我是从SQL server中查询出比较原始的数据，再在EXCEL中处理。但是当报告格式固定后，每个月重复这样的工作，非常无聊。于是我开始学习SQL server的Report模块，在这里把几个客户的月报告都做成了自动实现方式，每个月工作量大量减少。后来又有机会接触了一个BI的项目，了解了BI实现的过程。
客户的需求无穷无尽，然后为了客户细分，我终于弄明白了RFM模型如何使用，如何实现。
客户又提出，需要预测哪些客户在某段时间会产生购买行为。
我查了资料，知道用似然函数求出在某段时间产生购买的频率可以实现。因为我的数学基础较差，最初我甚至不明白，似然函数就是利用已发生的事件，求出以后可能发生这一事件的概率的这样的关系。幸好，我老公的数学非常好，给我解释清楚了，然后我不得不又复习了如何求最大似然函数值，那就是导数如何求。其实这些确实大学已经学过，但是忘记了。
现在对于这个问题，我还有一点不明白，即：有没有现成的统计软件可以实现这个算法？如果没有，我怎么样去实现？我正在学习R，但是还不知道如何用R实现这个。
到现在为止，我觉得在这条路上走的越来越艰难。我需要补充的知识实在太多：数学和数理统计的基础理论，需要重新学习；SQL SERVER需要加强（曾经有一个面试，进行了48分钟后，对我的评价是：分析方面很强，但是IT技术方面顶多是中级水平）；统计工具目前只是SPSS还比较熟悉（也只能算是一般水平吧），如果要在这行混，还得把R或者SAS搞熟。
我觉得我自己一个人，一直是在统计分析的门外徘徊，而且越接近门口，发现自己的差距越大。况且现在年龄也大了，真不知道自己是该彻底的改行，还是继续走下去。
如果您有耐心看完了这篇帖子，而又是统计分析的门内人，请不吝赐教，我到底该怎么办呢？
非常感谢您！
原文：http://cos.name/cn/topic/102300

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

数风代韵

2010-8-25 09:04:16

说实话，看了感觉跟我很像！

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

数风代韵

2010-8-25 11:53:42

没有人关注？？！！

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

crackman

2010-8-27 12:13:45

很好的一片文章
值得后来人去思考和学习

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

babyicry

2010-8-27 12:40:34

我也非常的想成为统计这块的牛人，只可惜只可惜，哎~~我现在是连毕业论文都挺吃力在做着~~

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

laoda_2298

2010-8-27 12:59:09

坚定信心，一路走好

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

点击查看更多内容…

dingo1wm

2010-8-27 13:50:22

跟你的情况差不多不过我还没走上这条路哎~·

我还想找个入口呢~

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

whtclement

2010-8-27 14:14:45

数据挖掘在国外已经非常成熟，但在中国还是启步，数据挖掘师将来必有大用，SPSS和SAS都是顶级的数据挖掘软件厂商，我公司正在招标，如果各位迷惑的家伙有经验有兴趣，而收入要求又不高的话，可以考虑一下。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

snxl

2010-8-30 12:47:01

写的很好！我是搞宏观分析的。但是我知道现在微观分析越来越吃香，坚定不移的走下去，会有好的结果的。
数理统计无非是那么一本书罢了，花上两个月时间啃一遍就成。据楼主介绍的情况来看，主要是做应用工作，并不需要你的理论基础要有多么扎实（做理论工作就不同了）。再学一点多元统计分析和微观计量经济学的知识，加上你在市场营销方面的实践，分析的能力肯定会上去。
软件方面，由于你不负责程序设计，只提出需求，知道大致的东西就可以了，但需要不断跟踪前沿。
分析的软件方面SAS是个比较强大的东西，但不是要求你全部掌握呀，只需掌握自己需要用的部分就可以了，可以说没几个人能掌握全部(SAS公司的人有全掌握的吗？没有）。

做分析我觉得实践很重要，专门统计学毕业的学生，不摸爬滚打个几年，也难说能够做好。所以珍惜你所拥有的，努力争取你所欠缺的，会有牛的那一天。