如何成为数据工程师

如何成为一名数据工程师

2024年初学者的捷径

照片由Gabriel Vasiliu在Unsplash上提供

本文将介绍一种加快学习所需技能并熟悉数据工程工具和技术的途径,适用于初学者级别的IT从业者和希望转行的中级软件工程师。通过我在英国和中东最成功的初创公司担任数据工程主管多年的经验,我从我的职业生涯中学到了很多,并希望与您分享这些知识和经验。这是我在过去12年中在数据工程领域获得的个人经验的反思。我希望对您有所帮助。

数据工程师——职务

首先,为什么选择数据工程师?

数据工程是一个令人兴奋和非常有回报的领域。这是一份令人着迷的工作,我们有机会与触及数据的一切进行合作——API、数据连接器、数据平台、商业智能以及市场上提供的各种数据工具。数据工程与机器学习(ML)密切相关。您将创建和部署各种数据和ML流程。

这绝对不会无聊,并且薪水很好。

薪水高是因为建立一个良好的数据平台并不容易。它从需求收集和设计开始,需要相当多的经验。这不是一项容易的任务,还需要一些非常出色的编程技巧。这份工作本身很安全,因为只要企业生成数据,这份工作将会大有需求。

公司们总会雇佣会高效处理(ETL)数据的人。

过去五年,数据工程一直是英国增长最快的职业之一,在LinkedIn 2023年最受需求的工作列表中排名13位[1]。加入的另一个原因是稀缺性。在IT领域,现如今很难找到一个优秀的数据工程师。

作为一名“数据工程主管”,我每周在LinkedIn上收到4个工作面试邀请。平均而言,初级数据工程职位有…