论文部分内容阅读
数据科学家具有区别于其他专业人才的能力要求和岗位职责,培养数据科学家是数据科学与大数据技术专业的主要使命.本文以Indeed、LinkedIn和百度百聘为数据来源,广泛搜集中国、美国、英国、德国、加拿大、日本、澳大利亚和韩国八个国家五种语言的数据科学家招聘公告,挑选出206则具有代表性的招聘公告,对其中的任职资格要求和岗位职责描述进行聚类分析和观点挖掘,提炼出数据科学家的能力要求和岗位职责.经调查发现,数据科学家的主要岗位职责有:以数据为中心提出解决方案,从海量数据中洞察有价值的信息,面向具体业务的算法模型研发,假设检验与试验设计,数据治理与数据质量控制,数据产品的研发及基于数据的传统产品的创新,数据全流程的参与以及跨部门和跨领域合作等;数据故事化、因果分析、实时流式处理、部署/生产模型等新兴业务需求将成为未来数据科学家岗位职责的新增长点;数据科学家与数据科学相关的主要能力要求包括:SQL编程、Python/R/SAS、Hadoop MapReduce/HBase/Hive、Spark/Storm、基于Tableau等的可视化分析、ETL处理、数据仓库/数据湖/BI技术、统计学与机器学习(含深度学习)、自然语言处理及文本分析和机器视觉等.图4.参考文献21.