メインコンテンツへスキップ

データエンジニアリングとかデータ基盤・ツール方面も知識だけは

    このレーダーチャートが好き、ハンターハンターの念能力みたいで(笑)
    まじめに、データ利活用まわりの人材のタイプやスキルの違いがわかりやすい。データ利活用人材・スキルについて議論するなら、この程度の解像度は欲しいところ。

    𝗧𝗼𝗽 𝗖𝗼𝘂𝗿𝘀𝗲𝘀 𝗳𝗼𝗿 𝗗𝗮𝘁𝗮 𝗦𝗰𝗶𝗲𝗻𝘁𝗶𝘀𝘁𝘀 𝗮𝗻𝗱 𝗗𝗮𝘁𝗮 𝗔𝗻𝗮𝗹𝘆𝘀𝘁 𝗶𝗻 𝟮𝟬𝟮𝟰 🚀

    Did you know that data science and analytics are not just trending fields but also highly rewarding career paths?

    ➡ According to the latest Glassdoor report, Data… pic.twitter.com/VvKD460frw

    — Parul Gautam (@Parul_Gautam7) January 21, 2024

    ML Ops(AIシステム運用の視点)の件もあり、データの在り方まで提言することは僕もある。けれど実際のデータベースやデータレイクの設計・構築はデータサイエンティストに無理やりやらせるべきじゃない、別の人材・スキルがいるよ!と言うのを今まで馬〇なITコンサルタントや自称上流SE、研究員崩れに何度説明したことか_| ̄|○

    データエンジニアリング分野、データレイクとかなんとかの話はDataExpert-io/data-engineer-handbook: This is a repo with links to everything you'd ever want to learn about data engineeringを見とくれ、というか私も困ったときは最初にココを見る。最近は生成AIに聞くことが増えたけど。

    もちろん、メタデータ管理とか使えそうなOSSとかは、データサイエンティストも知識としては知っておいて、多少はものが言えた方が良い

    最近は常識になりつつあるGitHubについても勉強になるページがある。あとプロジェクト管理からコードレビューまで、開発プロセス全般で使えるツールを販売するGitHub Marketplaceってのもあるらしく、予算があるなら、ありものを使えば十分かな。

    ちなみに僕は冒頭のレーダーチャートでいうところのデータサイエンティストであり、コンサルタントとしてデリバリーするのでデータアナリストの役割もしていた。機械学習エンジニア的なことも、MLOpsは実際の業務では経験が乏しいので主力として動ける自信はないけど、プロマネまたはイチメンバーとしてなら対応できるはず。

    でもデータエンジニアは厳しい。もちろんデータエンジニア自体は尊敬してる、自分にできないことをしてる人だから。違いの分からん解像度の低い人はバカにするが(笑)
    たぶん既存のIT業界におけるデータベースエンジニア、データマネジメントをするデータアーキテクトやデータスチュワードに担務してもらう方が、市場の単価や需要、ドメイン知識の理解としてもリーズナブルなんだけどなぁ。 

    他の情報を見たい方は、目次ページへ
    仕切り直しで収集情報の整理から|くすぐったがり|note

     
     
    データ利活用まわりでサービス企画してるチーフなんたらサイエンティスト。なおX/twitterもnoteも私個人の意見であり、所属する組織の見解ではありません。 ( 厂˙ω˙ )厂うぇーい …… ○┼ バタッ

    あなたへのおすすめ