Senior Data Engineer (SQL, Python, Kafka, Kubernetes)

Job description

We are looking for a Senior Data Engineer to build and maintain scalable data platforms that support AI, analytics, and backend applications. You will be responsible for designing data architectures, developing ETL pipelines, integrating data from multiple sources, and ensuring high-quality, reliable datasets for downstream systems.

Key Responsibilities

• Design and develop scalable ETL pipelines.
• Integrate, clean, and standardize data from multiple sources (databases, APIs, files, logs, etc.).
• Design and maintain Data Lake, Data Warehouse, and data models.
• Build and optimize data pipeline architecture for scalability and reliability.
• Implement data quality processes, including data validation, duplicate detection, and missing value handling.
• Build Feature Store or Feature Pipelines to support AI and machine learning.
• Implement data versioning to ensure reproducibility and traceability.
• Monitor, troubleshoot, and optimize production data pipelines.
• Collaborate with AI Engineers, Backend Engineers, and Data Analysts to deliver reliable data solutions.

Your skills and experience

Requirements

• Bachelor‘s degree in Computer Science, Information Technology, Information Systems, or a related field.
• Minimum 5 years of experience as a Data Engineer or in a similar role.
• Strong SQL and Python programming skills.
• Proven experience building ETL/ELT pipelines and processing data from multiple sources.
• Hands-on experience designing Data Lake, Data Warehouse, data pipeline architecture, and data models.
• Experience implementing data validation, duplicate detection, and missing value handling.
• Experience building Feature Store or Feature Pipelines for AI/ML applications.
• Experience with data versioning and production pipeline monitoring.
• Basic English reading skills for technical documentation.

Preferred Skills

• Apache Airflow, Spark, Kafka.
• PostgreSQL.
• Microsoft Excel.
• NLP Data for AI.

Why you'll love working here

I. Giá trị cốt lõi

Automation 

Arobid có các quy trình để giúp duy trì hiệu quả công việc cũng như sự hài lòng của nhân viên. “Tự chủ” trong nguồn nhân lực của Arobid cho phép nhân viên minh bạch và tích cực trong việc giải quyết vấn đề.

Responsibility

Nhân viên Arobid chịu trách nhiệm về công việc, hành vi, thái độ cũng như sự phát triển của chính Arobid. Sự thành công của Arobid dựa trên trách nhiệm và nỗ lực của từng cá nhân.

Open-mindedness

Tư duy cởi mở ở nhân viên của chúng tôi là quan trọng để giúp tạo điều kiện cho những thay đổi lớn và nhanh luôn xảy ra trong ngành công nghiệp công nghệ. Cũng như trong việc học hỏi những điều mới và phát triển những cách thức mới, tư duy cởi mở cũng đề cập đến việc chấp nhận sự khác biệt trong đồng nghiệp, không phân biệt giới tính, quốc tịch, tuổi tác.

Boldness

Dũng cảm, cho phép nhân viên của chúng tôi có thể mạo hiểm, thử nghiệm các phương pháp mới và độc đáo trong việc giải quyết vấn đề. Dũng cảm khác với sự liều lĩnh, dũng cảm đề cập đến các kế hoạch đã được suy nghĩ kỹ lưỡng, thử nghiệm và nghiên cứu cẩn thận và sẽ được thực hiện một cách đúng đắn.

Innovation

Sự đổi mới đề cập đến việc thúc đẩy những phương pháp mới, nhân viên tại Arobid luôn phải phát triển khả năng của bản thân, học những cách thức mới và áp dụng chúng vào công việc hàng ngày. Làm cho công việc khó khăn trở nên đơn giản và nhanh chóng hơn.

Devotion

Sự tận tâm, nhân viên Arobid coi Arobid như một nơi họ thuộc về. Tin tưởng vào sự hình thành của Arobid và mục tiêu cũng như sứ mệnh của Arobid. Cùng nhau, điều này tạo ra một mối liên kết giữa cá nhân với công ty cũng như giữa các đồng nghiệp Arobid.

II. Phúc Lợi:

• Cơ hội tiếp xúc với hàng ngàn doanh nghiệp trong nước và quốc tế.
• Thăng tiến trong nghề nghiệp chuyên môn và trong lĩnh vực Thương Mại Điện Tử.
• Cơ hội thử sức trong các lĩnh vực ngoài chuyên môn chính để phát triển bản thân.
• Thu nhập phù hợp và cơ hội tăng thu nhập như thưởng doanh số, thưởng chỉ tiêu cá nhân, thưởng nhóm, điểm thi đua, điểm cống hiến...