秒建中小型电商BI平台实践(零基础三日速成大法)

版权声明: https://blog.csdn.net/xmfsamsara/article/details/88586427

    今日心情: 离职的上家创业公司竟然没有发工资.难道真的不行了. 问在岗的同事也没有发. 人生第一次被拖欠工资.有点兴奋.这才是创业公司. 在大厂的你绝对没有遇到的情况. 我其实挺喜欢创业公司的,虽然没有人道的加班.没有规划的上线.但是那种从螺丝钉变成电钻的感觉很爽.

    言归正传, 总不能啃老吧.而且发现不干活不舒服. 家附近有家电商公司打算自己起一套BI(商业智能)。和信息部门的负责人聊的挺嗨,直接上岗。从在校期间到工作只是听过,从来没有研究过.但这都不是问题,试试呗。

    入职第一天,了解了下电商公司怎么玩的。一套oms订单管理系统,一套wms仓储管理系统.都是用的别人的平台.暂时没有自己成型的产品.有京东,天猫,拼多多,亚马逊等渠道.日订单数目10w+。还没见过系统.我十分好奇整套的运作流程,如何和天猫对接的,oms和wms两家公司的平台如何对接的。尤其wms上世纪的古董界面风格,系统间怎么做到数据的一致性。第一天我只看了看oms数据库的订单表。在网上学习数据仓库的概念。我可耻的转载了一个系列的数据仓库博文.了解了基本知识。 最重要的两个概念 数据分层ods dw dm等等。和维度建模,事实表维度表的,星型结构,雪花结构等等。这里不做赘述。之后搜索了电商领域的维度建模方法。看了猫眼电影等实时数仓的解决方案,hive,elasticsearch,finlk,hive kafka,巴拉巴拉 不灵不灵的技术框架后,心中有了点数,binlog日志都没有,大数据都不用,暂时没有土壤。采用传统的BI方案,etl ,数据仓库 ,直接出报表。5点按时下班,天亮下班好幸福。

   第二天,和几个同学聊了聊近况. 发现很low,很low的小伙伴.kettle都用过了.我竟然第一次接触.这是一个java做的像工作流引擎一样的数据处理的工具。 这一天. 我将  销售主题.做了几个维度. 然后使用kettle 进行了一次对原始操作数据的 转换。kettle下载好吃力。

  第三天,我有了两天的销售主题数据了.扔在数据库里只是占空间,我要做点什么. 虽然业务层,不需要我这组管。联机分析,下钻,上卷.然后就找联机分析的开源框架.然后找到了嫌麻烦也没用。不经意在开源社区看到了CBoard。本地跑起来。配置数据源,直接写sql配置数据集,然后设计图表。最后根据图表布置你的首页大盘。  第三天就有了一个首页大盘的demo。 就是这么的简单。

   三天时间,这一套已经够满足传统电商企业的需求了。但是看着整套布灵布灵的技术架构,打算尝试一下,下定了两个月的学习时间。

然后今天企业入职文化培训考试没有通过.下周补考.心情很不好,还是最后一名。一批30人入职,硕士学历只占公司总人数的5%.我默默的没有在群里说话.丢人啊,没脸啊。

扫描二维码关注公众号,回复: 5763080 查看本文章

猜你喜欢

转载自blog.csdn.net/xmfsamsara/article/details/88586427