🔬 Science & Research

📊データサイエンティスト

データからパターンを見つけ予測モデルを構築する職業――2008年生まれの肩書きだが、その土台には数値を数え、検証し、可視化してきた3世紀分の営みがある。

Also called: アプライドサイエンティスト · 機械学習サイエンティスト

Abstract visualization of interconnected data points and charts
Courtesy NASA/JPL-Caltech. · Public domain

基本データ

2008年、LinkedIn/Facebook職名が誕生
HBR、2012年10月「最もセクシーな仕事」記事
2001年、クリーブランド学問分野として命名
約10.8万ドル年収中央値(米国、2023年)
約20%女性比率(米国、推定)
Python、SQL、R主要ツール

データサイエンティストとは、統計学・プログラミング・専門知識を駆使してデータからパターンや予測、提言を導き出し、企業や行政機関、研究チームが実際に行動へ移せる形にまとめる職業である。仕事の内容は、データウェアハウスからSQLでデータを取り出すこと、データを整形すること、統計モデルや機械学習モデルを当てはめること、そしてその結果が何を裏付け、何を裏付けないのかを説明することまで多岐にわたる。

この職名は、その背後にある技術よりもはるかに新しい。「データサイエンティスト」という言葉は2008年頃、DJパティルとジェフ・ハマーバッカーがそれぞれ独自に、LinkedInとFacebookでデータチームを立ち上げる中で行き着いたものであり、統計学者ウィリアム・S・クリーブランドが「データサイエンス」を学問分野として提唱したのはわずか2001年のことだった。しかし基盤となる学問はそれよりずっと古く、ジョン・テューキーが1960~70年代に探索的データ分析を提唱した流れをたどれば、ロナルド・フィッシャーの1920年代の統計学、さらにはジョン・グラントが1662年にロンドンの死亡記録を研究したことにまで遡る。

2012年のハーバード・ビジネス・レビュー誌の記事が「21世紀で最もセクシーな仕事」と呼んだことをきっかけに、企業の採用ブームが10年続き、数百に及ぶ新しい大学プログラムが誕生した。そのブームはすでに成熟期を迎え、この総称的な職名はアナリティクスエンジニアリング、機械学習エンジニアリング、プロダクトアナリティクスへと分化し、かつては人の手作業を前提としていた定型的なクエリ、データ整形、チャート作成の多くをいまやAIツールが担うようになっている。

The profile

387455607866
  • Resists AI38
  • Pay74
  • Barrier to entry55
  • Autonomy60
  • Demand78
  • Impact66

How exposed is it to AI?

62 / 100

高い

SQLクエリ、探索的チャート作成、AutoMLによる標準モデルの当てはめ、定型的なパイプラインコードの記述など、データサイエンスの定型的な仕事の相当な部分は、すでに今日自動化またはAI支援されており、その割合は急速に拡大している。自動化に抵抗するのは、曖昧なビジネス課題を検証可能な問いに落とし込むこと、結果が本物か統計的な偽物かを判断すること、そしてモデルの現実世界での意思決定が誤っていたときに責任を負うことである。

AI & The Future →

Seven ways into this profession

よくある質問

データサイエンティストは日々具体的に何をしているのか
「AIモデルを構築している」というイメージとは裏腹に、実際の日々の多くはSQLクエリやPythonコードを書いてデータを取得・整形すること、統計検定やモデル訓練を行うこと、そしてその結果を非技術者の関係者でも行動に移せるチャートやメモに落とし込むことに費やされる。実務者調査では一貫して、データクリーニングと準備が総労働時間の半分以上を占めるという結果が出ている。
データサイエンティストになるには博士号が必要か
いいえ。医学や法律と異なり免許制度や必須の単一学位は存在せず、統計学・コンピュータサイエンス・数学など定量的分野の学士号か修士号が最も一般的な道であり、実際のプロジェクトを積んだポートフォリオの方が、正確な学位よりも採用側にとって重視されることが多い。博士号は研究色の強い職や応用機械学習の職でより一般的である。
データサイエンスは統計学に新しい名前をつけただけなのか
厳密には違う。フィッシャーの実験計画法やテューキーの探索的分析など統計学に強く依拠しているが、伝統的な統計学部ではほとんど教えられてこなかったプログラミング、データベース工学、機械学習を加えている。ウィリアム・S・クリーブランドは2001年に、統計学を置き換えるのではなく、それを土台とした計算集約型の拡張分野を指す言葉として、この用語を提唱した。
データサイエンスはAIによって代替されるリスクがあるか
定型的な部分はすでにその影響を受けている。AutoMLツールは標準的なモデルの構築・調整を行え、AIアシスタントはSQLクエリの作成、探索的チャートの初稿作成、定型的なパイプラインコードの記述を人より速くこなせる。まだ自動化されていないのは、適切な問いを設定すること、パターンが有意義なのか偶然なのかを判断すること、その結果に基づく意思決定に責任を持つことである。
データサイエンティストの給料はどのくらいか
国や経験年数によって大きく異なる。米国労働統計局によると、2023年時点でデータサイエンティスト職の年収中央値は約10万8000ドルであり、ジュニアアナリストは7万~9万5000ドル程度から始まることが多い一方、大手テック企業のシニアまたはプリンシパルデータサイエンティストは株式報酬を含め総報酬20万~40万ドル以上を得ることもある。
データサイエンティストとデータアナリスト、機械学習エンジニアの違いは何か
データアナリストは通常、既存のデータとダッシュボードを使って明確に定義されたビジネス上の問いに答える。データサイエンティストは、より雑然としたデータから新たな統計モデルや予測分析を構築する。機械学習エンジニアは、ノートブックの中にあるモデルを本番環境で確実に、大規模に稼働させる役割を担う。この境界は常に曖昧で、多くの人がキャリアの中でこの3つを行き来している。
データサイエンスではどのようなツールやプログラミング言語が使われるか
Pythonが主流で、通常はpandasやscikit-learnといったライブラリと組み合わせて使われ、データベースへの問い合わせにはSQLが使われる。Rは学術分野や生物統計学が重視される現場で今も根強く使われている。Jupyterノートブックは探索的作業の標準環境であり、SnowflakeやBigQuery、Databricksといったクラウドデータウェアハウス基盤に、多くのデータサイエンティストが実際に問い合わせるデータが保管されている。
なぜ「データサイエンティスト」は「21世紀で最もセクシーな仕事」と呼ばれたのか
トーマス・ダベンポートとDJパティルが2012年10月のハーバード・ビジネス・レビュー誌の記事タイトルにこの言葉を使い、統計スキル、コーディング能力、ビジネス的判断力という稀な組み合わせがこの職を希少かつ非常に引く手あまたにしていると論じた。このフレーズは定着し、10年続く企業の採用ブームと数十に及ぶ新しい大学の学位プログラムの誕生を後押しした。

More in Science & Research