一家总部设在美国的公司,通过经营乐器连锁店来满足音乐家和音乐爱好者的需求,正在寻找一名云数据架构师。被选中的候选人将在开发该公司不同品牌的数字和零售业务的企业数据架构方面发挥强有力的领导作用。该公司在全美有超过500个零售点,销售新的和二手乐器,并提供乐器租赁/维修,以及为所有年龄和能力的音乐家提供课程。这家企业已经成功地通过债务融资筹集了超过3000万美元。该工作角色需要与IST重合7-8小时,并与PST时区有一些重合。
工作职责。
- 评估和创建新概念和技术的原型
- 开发可以移交给业务开发团队的基本能力
- 分析复杂问题,积极参与企业技术设计决策
- 掌握云数据平台的现代化、迁移和改造的主动权
- 利用领先的隐私和安全技术,通过设计和构建可靠和可扩展的数据基础设施来保障数据安全
- 构建可扩展的、安全的、低延迟的、有弹性的和具有成本效益的解决方案,以实现整个组织的预测性和规范性分析。
- 设计和开发框架,通过无服务器架构有效运作ML模型,同时支持无监督的连续训练模型
- 掌握公司数据模型的扩展,包括Tableau、DynamoDB和Kibana。
- 分析数据,与内部和外部的技术和非技术利益相关者分享有数据支持的结论
- 使用数据建模的最佳实践来建立数据摄取管道的框架--包括实时和批处理,ETL/ELT流程,并有效地将它们交给数据工程师。
- 与同行合作,积极参与关键的技术决策
- 审查代码和代码实现,分享建设性的反馈意见
- 利用你的经验和研究,提出建议,推动技术方向和技术的选择
工作要求。
- 工程学、计算机科学的学士/硕士学位(或同等经验)
- 至少有7年以上的云数据架构的相关经验
- 有直接从事企业数据解决方案的经验(7年以上)
- 实际接触过公共云环境和企业内部基础设施
- 精通柱状数据库,如 - Redshift Spectrum
- 精通时间序列数据存储,如Apache Pinot
- 对AWS云基础设施有深刻的理解
- 对内存、无服务器、流媒体技术和协调工具(如Kubernetes、Airflow、Spark和Kafka)有明显的经验
- 有实施IT平台的实践经验(7年以上)。
- 有大数据方面的AWS认证将是非常可取的
- 有在大型数字和零售环境中实施和设计AWS分析和大数据解决方案的经验者优先。
- 对在线交易处理(OLTP)和在线交易分析处理(OLAP)数据库、数据湖和模式有深入的了解和经验
- 有AWS云数据湖技术的实践经验,以及Kinesis/Kafka、S3、Glue和Athena的操作经验
- 熟悉Parquet、Avro或ORC消息/文件格式
- 有设计和开发流服务、EMS、MQ、Java、XSD、文件适配器和基于ESB的应用的经验
- 对微服务、SOA、RESTful API和数据集成架构等分布式架构有深刻理解
- 有大数据栈的经验--Spark、频谱、Flume、Kafka、Kinesis等
- 了解现代数据流技术,如Kafka、SQS/SNS队列等
- 熟悉柱状数据库,如Redshift、Snowflake、Firebolt等
- 熟悉常用的AWS服务,如S3、Lambda、Redshift、Glue和EC2。
- 精通Python、pySpark或类似的编程语言
- 了解BI工具,如Tableau, Domo, 和MicroStrategy
- 熟悉CI/CD概念
- 优秀的英语沟通能力