Data Engineer

Xây dựng và vận hành kho dữ liệu:
- Xây dựng các tài liệu liên quan đến kiến trúc và định nghĩa dữ liệu.
- Làm việc với các team phân tích để thiết kế những bộ dữ liệu phù hợp cho hệ thống báo cáo/ dashboard.
- Làm việc với các team ERP, software, các đối tác và phòng ban chức năng để xác định luồng đi và ý nghĩa của dữ liệu.
- Thiết kế các phương án thu thập dữ liệu, các tiêu chuẩn thu thập, đảm bảo việc thu thập và ghi nhận dữ liệu đúng và phù hợp cho việc khai thác/ ứng dụng.
- Cập nhật những thay đổi trong các bộ dữ liệu theo quá trình chuyển đổi của business và các nhu cầu khai thác.
- Thiết kế, xây dựng, tối ưu hóa luồng dữ liệu, giải pháp ETL có khả năng mở rộng linh hoạt với độ tin cậy cao, phục vụ cho việc khai thác/ingest các loại dữ liệu vào Data lake, Data Warehouse.
- Xây dựng, phát triển các nền tảng lưu trữ, xử lý, quản lý dữ liệu lớn (Big Data) trên hệ sinh thái Cloud Azure (MS Fabric) ,AWS,…
Cải tiến, nâng cấp hiệu suất của kho dữ liệu:
- Kiểm soát chi phí và khả năng đáp ứng của kho dữ liệu, liên tục theo dõi, cảnh báo và xử lí nhanh nhất có thể khi có sự cố phát sinh để đảm bảo hệ thống báo cáo và các sản phẩm dữ liệu khác hoạt động trơn tru hiệu quả.
- Làm việc với các team kỹ thuật công nghệ để tối ưu hóa chi phí hạ tầng, môi trường kho dữ liệu, tư vấn và xây dựng những giải pháp để dữ liệu có thể được lưu trữ nhiều hơn, đa dạng hơn, truy vấn nhanh hơn với chi phí tối ưu nhất.
- Xây dựng những kiến trúc dữ liệu phù hợp với nhu cầu từ các đội phân tích, khoa học dữ liệu, học máy và người dùng.
Minh bạch và an toàn dữ liệu:
- Data được khai thác & sử dụng đúng đối tượng & phạm vi công việc.
- Theo dõi và cảnh báo nếu có bất kì vấn đề gì khiến dữ liệu có thể bị sai lệch, lấy cắp,dùng sai mục đích.
- Đảm bảo các kết nối được ổn định ,an toàn.
- Quy hoạch & xây dựng cơ chế an toàn dữ liệu của Data Warehouse

• Tốt nghiệp Đại học trở lên chuyên ngành: Công nghệ thông tin hoặc ngành khác liên quan
• Tối thiểu 3 năm kinh nghiệm làm việc trong lĩnh vực Data Engineer.
• Các học vấn khác cần cho ngành nghề: Phân tích kĩ thuật, phân tích chiến lược kinh doanh, cơ sở dữ liệu, phân tích thống kê toán.
• Kỹ năng công việc:
- Có kinh nghiệm làm việc với một trong các hệ sinh thái Hadoop, Spark, Airflow, Kafka,…
- Có kinh nghiệm làm việc với hệ thống ERP.
- Có kinh nghiệm BI Tools (Power BI, SAP BI,…)
- Có kiến thức về Phân tích kĩ thuật, hạ tầng công nghệ thông tin, phần mềm ứng dụng, quản lý dự án
- Có kinh nghiệm làm việc môi trường cloud: Azure Fabric, Azure Synapse, Azure Data Lake, Azure Data Factory, Databrick, AWS Redshift,…
- Sử dụng thành thạo các ngôn ngữ phân tích dữ liệu SQL, Python, NoSQL,...
- Sử dụng thành thạo các ETL Tools : Talend,Airflow, SSIS,Glue,…
• Yêu cầu khác:
- Khả năng phân tích;
- Trung thực, ham học hỏi, chăm chỉ, không ngại khó, dám dấn thân, cầu tiến,..
- Khả năng giải quyết vấn đề;
- Kỹ năng mềm: Có kỹ năng giao tiếp tốt, làm việc nhóm.
- Tư duy logic;

Máy tính xách tay, Phụ cấp, Thưởng, Chế độ nghỉ phép

Cập nhật gần nhất lúc: 2024-09-10 12:35:03