Data Engineer

1. Xây dựng và vận hành kho dữ liệu:

- Làm việc với các team ERP, software, các đối tác và phòng ban chức năng để xác định luồng đi và ý nghĩa của dữ liệu.

- Thiết kế các phương án thu thập dữ liệu, các tiêu chuẩn thu thập, đảm bảo việc thu thập và ghi nhận dữ liệu đúng và phù hợp cho việc khai thác/ ứng dụng.

- Xây dựng, phát triển các nền tảng lưu trữ, xử lý, quản lý dữ liệu lớn (Big Data) trên hệ sinh thái Cloud Azure (MS Fabric) ,AWS,…

- Thiết kế, xây dựng, tối ưu hóa luồng dữ liệu, giải pháp ETL có khả năng mở rộng linh hoạt với độ tin cậy cao, phục vụ cho việc khai thác/ingest các loại dữ liệu vào Data lake, Data Warehouse.

- Làm việc với các team phân tích để thiết kế những bộ dữ liệu phù hợp cho hệ thống báo cáo/ dashboard.

- Cập nhật những thay đổi trong các bộ dữ liệu theo quá trình chuyển đổi của business và các nhu cầu khai thác.

- Xây dựng các tài liệu liên quan đến kiến trúc và định nghĩa dữ liệu.

2. Cải tiến, nâng cấphiệu suất của kho dữ liệu:

- Xây dựng những kiến trúc dữ liệu phù hợp với nhu cầu từ các đội phân tích, khoa học dữ liệu, học máy và người dùng.

- Làm việc với các team kỹ thuật công nghệ để tối ưu hóa chi phí hạ tầng, môi trường kho dữ liệu, tư vấn và xây dựng những giải pháp để dữ liệu có thể được lưu trữ nhiều hơn, đa dạng hơn, truy vấn nhanh hơn với chi phí tối ưu nhất.

- Kiểm soát chi phí và khả năng đáp ứng của kho dữ liệu, liên tục theo dõi, cảnh báo và xử lí nhanh nhất có thể khi có sự cố phát sinh để đảm bảo hệ thống báo cáo và các sản phẩm dữ liệu khác hoạt động trơn tru hiệu quả.

3. Minh bạch và antoàn dữ liệu:

- Đảm bảo các kết nối được ổn định ,an toàn.

- Data được khai thác & sử dụng đúng đối tượng & phạm vi công việc.

- Theo dõi và cảnh báo nếu có bất kì vấn đề gì khiến dữ liệu có thể bị sai lệch, lấy cắp,dùng sai mục đích.

- Quy hoạch & xây dựng cơ chế an toàn dữ liệu của Data Warehouse

• Tốt nghiệp Đại học trở lên chuyên ngành: Công nghệ thông tin hoặc ngành khác liên quan

• Các học vấn khác cần cho ngành nghề: Phân tích kĩ thuật, phân tích chiến lược kinh doanh, cơ sở dữ liệu, phân tích thống kê toán.

• Tối thiểu 3 năm kinh nghiệm làm việc trong lĩnh vực Data Engineer.

• Kỹ năng công việc:

-       Sử dụng thành thạo các ngôn ngữ phân tích dữ liệu SQL, Python, NoSQL,...

-       Sử dụng thành thạo các ETL Tools : Talend,Airflow, SSIS,Glue,…

-       Có kinh nghiệm làm việc môi trường cloud: Azure Fabric, Azure Synapse, Azure Data Lake, Azure Data Factory, Databrick, AWS Redshift,…

-       Có kinh nghiệm BI Tools (Power BI, SAP BI,…)

-       Có kinh nghiệm làm việc với hệ thống ERP.

-       Có kinh nghiệm làm việc với một trong các hệ sinh thái Hadoop, Spark, Airflow, Kafka,…

-       Có kiến thức về Phân tích kĩ thuật, hạ tầng công nghệ thông tin, phần mềm ứng dụng, quản lý dự án

• Yêu cầu khác:

-       Trung thực,ham học hỏi, chăm chỉ, không ngại khó, dám dấn thân, cầu tiến,..

-       Tư duy logic;

-       Khả năng phân tích;

-       Khả năng giải quyết vấn đề;

-       Kỹ năng mềm:  Có kỹ năng giao tiếp tốt ,làm việc nhóm.