Kỹ sư nghiên cứu học máy thuộc đội ngũ sáng lập
San Francisco, CA · Toàn thời gian, làm việc trực tiếp
Chào bạn 👋, chúng mình là Haz và Wyatt, những người sáng lập Pally.
Pally là trợ lý cá nhân ngay trong tin nhắn của bạn. Bạn nhắn cho Pally như nhắn cho một người bạn. Pally trả lời những tin nhắn bạn vẫn né tránh, đặt bàn ăn tối, nhắc thanh toán hóa đơn và xử lý cả trăm việc nhỏ dồn lại trong tuần.
Đọc triết lý làm việc của chúng mình
Chúng mình là một đội ngũ nhỏ tại Vùng Vịnh San Francisco, đang tìm những người sẽ đưa Pally trở thành tác nhân AI cho người dùng cá nhân số 1 thế giới.
Vai trò
Bạn sẽ giúp các mô hình đứng sau Pally làm trợ lý cá nhân tốt hơn. Toàn bộ sản phẩm nằm trong một cuộc trò chuyện qua tin nhắn, nên mỗi câu trả lời đều là đầu ra của mô hình, và mỗi đầu ra đều tốn thời gian xử lý lẫn chi phí. Mô hình nào trả lời, biết những gì, dùng trình duyệt ra sao và có hành động đúng khi ai đó cố đánh lừa hay không — tất cả đều là bài toán nghiên cứu. Bạn sẽ chịu trách nhiệm giải quyết và đưa kết quả đến tay người dùng thực mỗi tuần.
Đây là vai trò trực tiếp nghiên cứu và phát triển kỹ thuật. Bạn sẽ làm việc với bộ khung đánh giá, mã huấn luyện và chính tác nhân. Cụ thể là:
- Đánh giá. Xây dựng bộ khung biến câu hỏi “câu trả lời đó có ổn không?” thành con số: bộ chấm điểm từng lượt, dữ liệu về lựa chọn ưa thích của con người, chạy lại hội thoại thực tế và bộ kiểm thử hồi quy chạy trước mỗi lần triển khai. Tạo ra các phép đánh giá mà cả đội tin tưởng để quyết định phát hành.
- Tinh chỉnh. Biến hội thoại thực tế thành dữ liệu huấn luyện và dữ liệu về lựa chọn ưa thích, đồng thời hậu huấn luyện mô hình (SFT, tinh chỉnh theo lựa chọn ưa thích, chưng cất) để các mô hình nhỏ, nhanh làm tốt những việc mà các mô hình tiên tiến nhất làm được.
- Định tuyến mô hình. Huấn luyện và đánh giá bộ định tuyến để các mô hình nhỏ xử lý phần lớn lượt tương tác, còn các mô hình tiên tiến nhất xử lý những lượt quan trọng. Chịu trách nhiệm cân đối độ trễ, chi phí và chất lượng ở từng lượt.
- Tác nhân trình duyệt. Giúp Pally hoạt động đáng tin cậy trên các trang không có API: điều hướng, đăng nhập, thanh toán và biết khi nào cần dừng lại để hỏi. Đo lường rồi cải thiện.
- Kiểm thử tấn công. Tìm những cách khiến Pally bị đánh lừa, làm lộ thông tin hoặc thực hiện hành động không ai yêu cầu, từ chèn chỉ dẫn độc hại trong email đến trang web ác ý. Xây dựng biện pháp phòng vệ và các phép đánh giá để đảm bảo chúng luôn hiệu quả.
- Trải nghiệm với tác nhân. Ứng dụng học máy trên toàn bộ tác nhân: trí nhớ và truy xuất, lựa chọn công cụ, khi nào nên hành động hay hỏi lại, khi nào nên chủ động liên hệ. Đọc bản ghi hội thoại hằng ngày và chuyển những gì quan sát được thành phép đánh giá và thay đổi mô hình.
Chúng mình sẽ đánh giá bạn qua một điều: mỗi tuần Pally làm trợ lý cá nhân tốt hơn đến đâu, và các phép đánh giá có chứng minh được điều đó không.
Yêu cầu
Đây là vị trí kỹ sư cấp cao đến cấp chuyên gia. Chúng mình tìm người đã làm công việc này tại một phòng nghiên cứu AI hàng đầu hoặc một đội ngũ có năng lực tương đương.
- 4+ năm làm kỹ thuật học máy hoặc phần mềm, có kinh nghiệm tại phòng nghiên cứu AI, công ty sản phẩm AI hoặc nơi tương tự.
- Có kinh nghiệm trực tiếp hậu huấn luyện hoặc tinh chỉnh LLM (SFT, tinh chỉnh theo lựa chọn ưa thích, chưng cất) và đưa kết quả vào vận hành thực tế.
- Có kinh nghiệm thiết kế các phép đánh giá mà đội ngũ tin tưởng để quyết định phát hành, như bộ chấm điểm bằng LLM, dữ liệu về lựa chọn ưa thích của con người hoặc chạy lại lưu lượng thực tế.
- Có kinh nghiệm trong ít nhất một lĩnh vực: kiểm thử tấn công hoặc kiểm thử đối kháng cho LLM; tác nhân trình duyệt hoặc tác nhân sử dụng máy tính; định tuyến mô hình hoặc chuỗi mô hình nối tầng; tác nhân vận hành thực tế có sử dụng công cụ và trí nhớ dài hạn.
- Vững Python và bộ công nghệ học máy phục vụ huấn luyện, đánh giá; làm việc thành thạo với TypeScript trong mã nguồn sản phẩm.
- Thành thạo quy trình phát triển có AI hỗ trợ, với kiến thức nền tảng vững để kiểm chứng, sửa lỗi và chịu trách nhiệm về mọi thứ bạn đưa đến người dùng.
- Bạn muốn đảm nhận phạm vi trách nhiệm của đội ngũ sáng lập. Bạn sẽ đặt chuẩn nghiên cứu cho Pally và góp phần tuyển những kỹ sư gia nhập sau mình.
Thông tin thực tế
Lương cơ bản $200–300k + cổ phần đáng kể, chương trình hưu trí 401(k) và bảo hiểm sức khỏe. Toàn thời gian, làm việc trực tiếp tại San Francisco, CA.
Chúng mình làm việc cực kỳ chăm chỉ. Nếu công việc không phải ưu tiên hàng đầu của bạn, đây không phải nơi dành cho bạn. Tuy vậy, bạn có toàn quyền chủ động về lịch làm việc. Chúng mình không quan tâm bạn dốc sức vào lúc nào, chỉ cần bạn thực sự dốc sức.
Nếu thấy mình phù hợp, hãy ứng tuyển bên dưới. Chia sẻ với chúng mình cách bạn hình dung tương lai của AI cá nhân và lý do bạn hào hứng làm việc tại Pally.
Cảm ơn bạn đã đọc,
Haz + Wyatt