一家快速发展的公司正在寻找一名数据工程师,该公司通过使用户能够释放其数据中的潜力来提供智能服务。该工程师将积极参加团队设计、开发、测试和部署软件。该公司的使命是使数据经济民主化,并将控制权还给产生数据的人。这将是一个长期的、全职的职位。
工作职责。
- 使用GCP技术开发、设计和维护可扩展的数据管道,从不同的来源提取、转换和加载数据到BigQuery。
- 调整和优化管道的效率和可靠性
- 保证数据质量,建立数据验证和监测机制
- 创建和维护管道和流程文件
工作要求。
- 工程学、计算机科学的学士/硕士学位(或同等经验)
- 至少有3年以上数据工程师的相关经验
- 可证明的Python、SQL、BigQuery和云存储的工作经验
- 最好熟悉Airflow、Dataproc和Cloud Pub/Sub
- 最好对云数据流和云计算组合器有一定了解
- 卓越的领导力和协作能力
- 流利的英语口语和写作