数据分析师的日常

「XX重要/不重要」实际上是机器学习中的特征筛选问题。方差足够大的特征才对结果有预测意义。对同一个特征，一部分人认为很重要，一部分人认为不重要。大多数分歧来自于不同的人面对的池子的方差的差异。
比如，刘强东可能真的觉得妻子颜值不重要——因为被呈送到他眼前的潜在对象的颜值方差已经很小。但大众面临的情况并非如此，因此产生巨大分歧。
同样地，重点初中的老师可能真心认为「以中考的低难度，成绩几乎跟智商没关系，差别几乎都来自努力程度」。这样的言论面对大众说的话自然是误人子弟。

最近看到 Aloudata 宣传自己的第三代指标平台，我的反应是，第一代、第二代指标平台是啥？

他们用对 ETL 的吐槽来引发大家共鸣，然后宣传 NoETL 的解决方案

不过我觉得NoETL 方案只是另一个烟雾弹，始终没有银弹

因为我亲眼见到，我司分析师用拖拽式 ETL 构建出数据集，但是因为处理节点、算子过多（几百个节点）引发了新问题：创建人过段时间也忘了处理逻辑，得回看想一想才能解释过程和口径

有的事情和逻辑真的很复杂，复杂到哪怕按照不同的层次、过程进行抽象，抽象以后的结果依然十分复杂

方法论大家都说得头头是道了，把大象放进冰箱就三步，可以一执行起来，细节哪哪都是问题，完全依赖智能系统自行处理的场景十分有限，我始终保持谨慎态度

数据产品、数据分析，最终还是要绑定到大的业务平台才有发挥空间

数据产品、数据分析不做业务，完全不知道业务是怎么玩的

没有哪一个业务的需求分析数据，他们的需求从来都是拿到结果

KPI达成了，就万事大吉~害~

在工作里进步的速度大体上还是组织决定的，让你进步才能进步，个人的努力对边际的影响实在不大

IBM 说在公司的成长分成“技能，态度，关系”三个方面，说得直接、露骨。

捷径还是在找对组织，给我机会。
或者让我来组织

碰到好几家客户建了数据中台，其他系统要问他拿数据要通过离线文件的方式。 说是怕系统承接不住。

这是搞了个假中台？还是背后有什么考虑？

我建议问题改个名字——热衷于每天玩杂技是什么体验？

我们都是dbt➕fivetran➕bigquery➕PowerBI（或者其他BI工具），SQL都不用写的情况下（不过AWS lambda可能就要自己写）

这样超长的SQL又容易出错或者遗漏。。。还要像炫技一样在知乎求别人夸奖，理解不能

特别希望能在企业环境里用上 AI 的，私有化部署，然后投喂数据资产，特别希望 AI 能帮我解决数据分析问题

虽然工作里，已经尽量在用 AI 提效了，比如，碰到一些不熟悉的 Excel 处理，问 AI 的结果比搜索引擎搜的结果要好多了

而对于数据分析，有时候有点使不上劲，有时候我在想是不是我司数据太乱了，数据资产暴露不够彻底

下结论之前我回头看看数据系统后台，基于指标体系的即席查询、模板查询系统确实已经服务了不少业务方了（每天的 DAU 算是不错的了）

而且，我觉得有指标体系，尤其是做了技术指标体系的公司，支持让业务随机组合维度和指标然后自生成查询结果，能做到这点的公司在数据资产治理方面，其实不算差了

指标系统、即席系统怎么建怎么用，我之前写过一篇文章，我放链接里

有指标系统，为啥我做风控业务的数据分析也很艰难？

第一，业务不熟悉。不了解业务流程，也没实操过，更不了解多个系统实际的数据流转过程

第二，人员不熟悉。业务不熟就需要调研，前期认识人就花了不少时间

第三，没法大张旗鼓干。出师无名，名不正言不顺，拉人合作也困难

第四，自己菜。作为数据产品，数据分析经验不足、数据敏感度不够、SQL 技能弱。

AI 能帮我弥补第四项，但是前面三项有的时候更加重要，足量的优质的信息（业务、技术、管理）是做数据分析以及后续决策的先决条件

现阶段，我给 AI 描述数据模型的结构、数据现状、数据分析目标，多数时候会踩坑，因为对数据的理解不仅仅是结构层面的，还需要结合数据样本去理解

就好像给你一本菜谱，你是不知道具体菜品的味道的，只有尝一下才能真实体验到。万一，因为某个人员的理解错误，按照菜谱做了一个错的菜呢？

这种基于人脑的经验、感官层面的对事实的理解，AI 是真的做不到，但有的时候小的细节错误会颠覆整合数据分析的结论。

套路性的技能和公式性的东西，按照既定套路进行的运算和推理，人脑不如电脑，但是跟人打交道随时应对变化，电脑不如人脑

厉害的数据分析师，会被 AI 加强，不会被替代

做职场博主我有2个意想不到的收获

1. 温故而知新。

通过总结经验，发现了自己之前工作和求职中的盲点：比如回看自己之前写的简历，其实还有改进的空间；

有了一些新的启发，比如为了给小白讲什么是AB实验，我用了生活中的例子打比方，结果我自己突然顿悟了，原来这个方法论还能用在个人日常决策中，大大降低我的日常内耗

2.有了学习的动力。

去年离职的时候，我对这个职业是一点兴趣都没有了。下了班心里燥得不行，连公司logo都不想看到，更别说去主动学习提升自己。

现在我有了一个做博主的动力之后，反而能静下心来去看相关的专业内容了，并且想着这些东西或者方法我可以尝试下，好了我再写篇笔记分享出来。

有意思。

开大心！
俺滴职场博主 发了5篇笔记 达到1000粉
完成了陪跑小目标✅
并转换了3单咨询

✌️
带数据分析专业的学员就是很轻松
因为两个人都很T
只聊怎么解决问题 然后哗哗执行 迭代

推荐一个手机价格、手机品牌、手机信息汇总数据网站，做数据的同学可能会用到哦