Research Engineer,
RL Engineering

Về vai trò

Các researcher của chúng tôi fine-tune mô hình bằng RLHF và những phương pháp liên quan. Bạn chịu trách nhiệm cho lớp thuật toán và hạ tầng họ dùng hằng ngày: làm cho hệ thống nhanh hơn, ổn định hơn, dễ sử dụng hơn và thích nghi được với kiến trúc hay thuật toán mới. Thành công của vai trò được đo bằng khả năng mở khóa tiến bộ nghiên cứu, không chỉ bằng số dòng code.

• Xây dựng, duy trì và cải tiến các thuật toán cùng hệ thống mà đội ngũ nghiên cứu sử dụng để huấn luyện, fine-tune các mô hình nghiên cứu và mô hình đưa vào sản phẩm.
• Tăng tốc độ, độ tin cậy và tính dễ sử dụng của pipeline reinforcement learning để các vòng lặp nghiên cứu diễn ra nhanh và an toàn hơn.
• Profiling pipeline huấn luyện reinforcement learning, xác định điểm nghẽn và triển khai các cải tiến có tác động đo lường được.
• Xây dựng cơ chế tự động chạy training job trong môi trường kiểm thử nhằm phát hiện sớm lỗi và suy giảm hiệu năng.
• Điều chỉnh hệ thống fine-tuning để hỗ trợ kiến trúc mô hình mới.
• Thiết kế instrumentation giúp quan sát hệ thống, bao gồm phát hiện và xử lý tranh chấp Python GIL trong mã huấn luyện.
• Chẩn đoán hiện tượng training run chậm dần sau một số bước và xử lý nguyên nhân gốc.
• Phối hợp chặt chẽ với researcher để chuyển thuật toán huấn luyện mới thành phiên bản ổn định, nhanh và có thể vận hành.

• Có từ 4 năm kinh nghiệm software engineering hoặc kinh nghiệm tương đương thể hiện năng lực xây dựng hệ thống.
• Tốt nghiệp đại học trong lĩnh vực phù hợp, hoặc có tổ hợp đào tạo và kinh nghiệm thực tế tương đương.
• Thích xây dựng hệ thống và công cụ giúp đồng đội làm việc hiệu quả hơn.
• Hướng đến kết quả, linh hoạt và ưu tiên tác động thực tế.
• Chủ động nhận trách nhiệm khi công việc cần, kể cả khi vượt ra ngoài mô tả vai trò.
• Thoải mái cộng tác sâu, review code và pair programming.
• Muốn hiểu sâu hơn về nghiên cứu machine learning và quan tâm đến tác động xã hội của hệ thống AI.

• Từng xây dựng hệ thống phân tán hiệu năng cao ở quy mô lớn.
• Có kinh nghiệm huấn luyện LLM ở quy mô lớn.
• Sử dụng Python thành thạo trong hệ thống production hoặc research engineering.
• Từng triển khai thuật toán fine-tuning LLM như RLHF hoặc các phương pháp reinforcement learning liên quan.
• Có kinh nghiệm với profiling, observability, tối ưu hiệu năng và độ tin cậy của training infrastructure.

Nếu công việc này khiến bạn hứng thú nhưng hồ sơ chưa khớp mọi tiêu chí, chúng tôi vẫn khuyến khích bạn ứng tuyển. Những góc nhìn và trải nghiệm khác nhau giúp đội ngũ đặt câu hỏi tốt hơn và xây dựng hệ thống AI có trách nhiệm hơn.