1933年,数据科学家在做什么
托马斯·达文波特与DJ·帕蒂尔2012年10月发表的文章《数据科学家:21世纪最性感的工作》,引发了长达十年的企业招聘热潮,也带来了一波新的大学学位项目。 1933年的数据科学家只记「内曼与皮尔逊将假设检验形式化」和数2008。不写成排名、预约或诊断。 1662年,伦敦服饰用品商约翰·格朗特发表了对这座城市教区死亡记录的统计分析,这是已知最早依靠收集数据、而非个别轶闻得出一般性结论的尝试之一。比利时天文学家阿道夫·凯特勒在1830年代以他的“社会物理学”拓展了这一思路,把统计分布应用到人类特征上。弗洛伦斯·南丁格尔在1858年把这一传统带入实用说服领域,用一幅呈现克里米亚战争死亡率数据的极区图,说服英国陆军部相信,杀死大多数士兵的是恶劣的卫生条件,而非战斗本身——她也因此成为第一位当选英国皇家统计学会会士的女性。
这个职位名称比其背后的技艺年轻得多。“ ”一词大约始于2008年,当时DJ·帕蒂尔与杰夫·哈默巴克在分别为与组建数据团队时各自独立敲定了这个称呼,而统计学家威廉·S·克利夫兰直到2001年才提出把“ ”作为一个学术领域。其背后的学科要古老得多,可以经由约翰·图基1960至70年代对探索性数据分析的推动,一路追溯到罗纳德·费舍尔1920年代的统计学,再到约翰·格朗特1662年对伦敦死亡记录的研究。 2012年《哈佛商业评论》一篇文章称其为“21世纪最性感的工作”,引发了长达十年的企业招聘热潮和数百个新设的大学项目。这股热潮如今已趋于成熟:这个泛化的职位名称已分裂为分析工程、机器学习工程和产品分析,而AI工具如今承担了越来越多原本这份工作默认由人工完成的常规查询、清洗与制图任务。
与“搭建AI模型”的刻板印象不同,多数工作日的时间分布在编写SQL查询和代码以提取并清洗数据、运行统计检验或训练模型,以及把结果转化成非技术利益相关者能够采取行动的图表或备忘录上。从业者调查一致表明,数据清洗与准备大约占用了总工作时间的一半甚至更多。 不需要。与医学或法律不同,这个领域没有执业资格证,也没有唯一必需的学位;统计学、计算机科学、数学或相关量化领域的学士或硕士学位是最常见的路径,而一份扎实的真实项目作品集,往往比具体学历更受雇主看重。博士学位在研究密集型或应用机器学习岗位中更为常见。 并不完全是。它大量借鉴统计学——费舍尔的实验设计、图基的探索性分析——但又加入了传统统计学系很少教授的编程、数据库工程与机器学习。威廉·S·克利夫兰在2001年提出这个术语,正是为了描述这个建立在统计学之上、而非取代统计学的、计算密集型的扩大版学科。
常规部分已经暴露在风险之中:工具能够拟合并调优标准模型,AI助手编写SQL查询、初稿探索性图表和样板管道代码的速度都比人快。尚未被自动化的,是构思出正确的问题、判断一个规律究竟有意义还是伪相关,以及为建立在结果之上的决策承担责任。 各国及资历差异很大。美国劳工统计局公布,2023年数据科学家这一职业的年薪中位数约为10.8万美元,初级分析师起薪往往接近7万至9.5万美元,而大型科技公司的资深或首席数据科学家算上股权的总薪酬可达20万至40万美元甚至更高。 数据分析师通常用现有数据和仪表盘回答已界定的业务问题;数据科学家构建新的统计模型和预测分析,处理的数据往往更杂乱;机器学习工程师则把模型从笔记本中取出,让它在生产环境中大规模、可靠地运行。三者的界限一直在模糊,很多人在职业生涯中会在这三者之间不断转换。
手艺先于头衔。2008是事情里的数。 1933年的数据科学家只记「内曼与皮尔逊将假设检验形式化」和数2008。不写成排名、预约或诊断。 20081933年
留下的数字
- 基准年
- 1933年
- 事情里的数
- 2008
- 职业名
- 数据科学家
- 工作的一行
- 内曼与皮尔逊将假设检验形式化