小土刀

新博客地址 -> wdxtub.com

数据科学工程师指南

公司的数据部门通常有三种角色:数据科学家、数据工程师和架构工程师,但许多事实证明这样的分类方法既不科学也不高效。结合工作中的经验,我认为『数据科学工程师』这一角色才是发展方向。这里我们来聊聊什么是,以及如何成为一个优秀的数据科学工程师。

为什么需要数据科学工程师

关于数据科学部门的现状,《工程师要不要写ETL?——教你构建高效的算法/数据科学部门》一文已经把最大的痛点写了出来,

总结归纳一下这部分,简单来说就是『数据科学家』没有工程思维,『数据工程师』没有统计思维,『架构工程师』成了运维人员。大家的目标都不一致,整个部门运作起来摩擦力当然是巨大的。

如何解决这个看似无解的问题呢?上文中提出...

接口、系统、管理与熵

最近无论是写书还是设计系统都攒了不少思考,有(fei)些(chang)凌乱,但是还是想写一写。

写在前面

回国之后,工作强度还是比较大的。好在经过一段时间的适应和磨合,总算慢慢找到了节奏。思考和总结的好处有很多,对我来说最重要的有两个方面:一是能够从实践中萃取最多的养分让自己快速成长;二是针对暴露出的问题进行定向改进,能极大提高工作效率。

原则上我是希望在博客中尽量保持某种意义上的中立的,但是在这里,我依然想感谢公司给予我极高的自由度,职位或者项目并没有成为桎梏,我因此得以把触角伸向各个领域。接触各个项目的好处不言而喻,除培养大局观外,学会以不同的角色站在不同部门不同角度去思考问题,也是极好...

非主流程序员的自我修养

作为一个非主流程序员,实话说,写代码其实是我最擅长的事情里面最不擅长的事情。但是在这个对单身狗伤害很大的日子里,谨以此文承担一点伤害。

非主流程序员自然要走和别人不一样的路,所谓『不一样』,并不一定是大家都学的东西我就不学,而是在怎么学,什么时候学这些问题上『不一定』要按照所谓『最佳』路线,毕竟最高级的教育是『因材施教』。互联网上浩如烟海的资源使得我们甚至都不需要去找某个特定的老师,『因材施教』放到今天,对于非主流程序员来说,更应该是『因材自教』。借着奥运会的东风,就以起跑的口令为例,来写写我这个非主流程序员的自我修养吧。

各就各位

比写代码还重要的事情,需要在写代码之前就做好,或者说,...

汇报后的小思考

工作了一段时间之后,才深深意识到,所谓做事,最重要的不是怎么做,而是到底要做什么。

前两天第一次跟公司研发的 VP 汇报,虽然只有短短二十分钟,但是学到了不少东西,这里简要记录一下自己的一些思考。

汇报工作最重要的是做足准备,和电梯演讲一样,一定要用简单的话语把事情说清楚,也就是说,要概念清晰干货满满,任何一点模棱两可都只能说明准备不充足,恐怕是很难留下好印象的。

因为公司的资源是有限的,所以最重要的就是要说服老板『为什么应该做这个事儿』。为了支撑『应该做这个事儿』,就需要从各个维度找到理由,比方说从竞争对手的角度,从法律法规的角度,从用户体验的角度,从安全性的角度等等。给出的论据也不能...

数据科学家沉思录

最近因为工作缘故,需要承担一部分数据科学家的职责,这里是我的一些思考。作为菜鸟中的菜鸟,希望大家踊跃拍砖指导。

数据科学家(data scientist)是一个非常模糊,游走在工程与研究边缘的职位,不同的公司,不同的业务其实就有不同的重点。能够精确定义的基本都是搬砖活,反而越是前沿的,越会是模糊的,越会是需要全才的。当然,这篇日志不扯具体的技术,主要是对职位和人本身的思考。

特质

先来说说就我自己的观察,一个靠谱的数据科学家需要什么样的特质吧。

首先是强烈的好奇心,以及配得上对应好奇心的观察力和判断力,延伸点就是透过现象看本质的能力,这就需要有一定的阅读量和思考深度。其次是对数据相关领域有...

渡劫

痛苦着挣扎着,终于在倒下的那一瞬间,真正开始渡劫。

前些日子想写没写的话,前些日子想喊没喊的声音,前些日子想跑没跑出的感觉,终于在大梦初醒时,一股脑倾泻了出来。很多疑惑,很多迷茫,很多烦恼,都随着和煦的夏日晚风飘散,在姣好的月色下,找回了自己。

呵,还真庆幸,运气总是在快坚持不住的时候到来。

今天早上原来匹兹堡的室友给我分享了一篇文章,准确的说是回忆录,回忆的是一名才华和心性都一流的留学生,却因探险中的一次意外而身亡。室友说他是我的『高配版』,深以为然,毕竟我没有办法做到『想好了要拿什么,就拿到了』。或者说,我一路的成长,都在和过去的自我和未来的自我抗争。如意的时间极少,幸运的是,懊恼的...

【野心优雅】大,人

真心,真话,真实,真性情;使命大,责任大,口气大;大胸怀,大气魄。老任是个好同志!

真正开始工作了,才慢慢意识到『野心』与『优雅』,于是找来任志强的回忆录,想从中一撇未来的路径。这本书不薄,虽然大部分内容都和房地产、经济等大话题有关,但是因为我本身对这俩事儿的不了解,书评中也就一笔带过,更多想聊的是从中我学到了什么。

前半本书主要着眼于如何从小职员慢慢成为华远掌舵人的历程,如果硬要找一个时间节点,那就是从改革开放起。后半部分才是更加接地气的回忆录,期间涉及多个重大历史阶段,也算是从另一个角度了解了历史。

总体感觉和前言中说得一样:性格决定命运,这种真诚性格、果断态度和巨大勇气,塑造了任大...

写一本书

努力去做好自己想要做的事情,才是通往梦想的捷径。

喜欢音乐,当然想要有一张属于自己的专辑;喜欢摄影,当然想要有一场属于自己的影展;喜欢运动,当然想要有一块属于自己的奖牌;喜欢写作,当然想要有一本属于自己的书。

话是这么说,真的有一天要我写一本书,一本教材的时候,第一感觉是『不真实』。回想自己的写作历程,起初瞎写,后来写写生活写写书评,最后回归本行写写技术,追根溯源一切的开端竟是一个小小的念头,不由感叹生活的奇妙。要是我当初没有在最后一个学期选工作量比较大的两门课,没有因为『想通过日志让更多的人感受美式教育』这个念头而开始写博客,没有顶住压力坚持写下去的话,恐怕现在又是另一番光景。

这次有...

【盖洛普优势识别器 2.0】发现自己

人不可能事事皆行,但可以人尽其才。

测试之前

本书介绍了 34 种不同的主题,通过测试简要了解自己的优势与弱势,并据此制定自我发展方案。书中提到的一个很重要的观念就是:改善劣势是一条最难行的路,发现自己的优势才是最佳出路。

最成功的人都是先从其突出的天赋着手,然后学习技能和知识,再加以练习,以此得到成倍的优势的。预测同时要管理自己的弱势,了解自身在哪些方面先天不足,就能避免走很多弯路。

上面的公式非常有价值,天赋和投入缺一不可,一定要根据自己的实际情况,来制定不同的发展方案。邯郸学步、刻舟求剑都只能是事倍功半。

了解了这些,还没买书的同学,如果只是想体验一下,可以试试看最后给出的链接...

影子猎手

真正的颜色,藏在影子后面。

高铁和飞机恐怕是最适合阅读的交通方式,不停变化的位置与窗外的风景,再配上旅人的心境,虽然没办法进行太多『学术』思考,却更容易在无意间发现从前未曾留意的东西。

来了这么多次加州,变的是公司,不变的是朋友。觥筹交错,不止一次感叹,在执信的三年时光,在执信交到的挚友,不但没有随着时间推移褪色,反而像陈酿般越来越有味道。转眼离开执信已七年,三五好友,异国他乡重聚。我们在各自不同轨道上狂奔,却发现从未走远。我们像从前那样嬉笑怒骂,却不再是十七八岁的少年。我们懂得更多了,看得更远了,能力更强了,意志也更坚定了。能有这样一帮总是能给我太多惊喜的朋友,真的是太幸福了。正因为知道...

———— 1 2 3 4 5 ————
©小土刀 | Powered by LOFTER