창립 멤버 ML 리서치 엔지니어
미국 캘리포니아주 샌프란시스코 · 정규직, 사무실 근무
안녕하세요 👋, 저희는 Pally의 공동 창업자 Haz와 Wyatt예요.
Pally는 문자 속에 있는 개인 비서예요. 친구에게 하듯 문자를 보내면 돼요. 미뤄둔 메시지에 답장하고, 저녁 식사를 예약하고, 청구서 결제를 독촉하고, 1주일 동안 쌓이는 100가지 자잘한 일을 처리해 줘요.
저희는 베이 에어리어에 기반을 둔 작은 팀이에요. Pally를 세계 #1 소비자용 에이전트로 만들 분들을 찾고 있어요.
맡을 일
Pally의 기반 모델이 누군가의 비서 역할을 더 잘하도록 만들어요. 제품 전체가 문자 대화이므로 모든 답장이 모델 출력이고, 모든 모델 출력에는 시간과 비용이 들어요. 어떤 모델이 답할지, 무엇을 알고 있을지, 브라우저를 어떻게 사용할지, 누군가 속이려 할 때 올바르게 행동할지는 모두 연구 과제예요. 이 과제들을 책임지고, 매주 실제 사용자에게 해결책을 출시해요.
직접 연구하고 개발하는 직무예요. 평가 체계, 학습 코드, 에이전트 자체를 다뤄요. 구체적으로는 이런 일을 해요.
- 평가. “이 답장이 적절하게 느껴졌나?”를 수치로 바꾸는 평가 체계를 만들어요. 턴별 평가기, 사람의 선호도 데이터, 실제 대화 재생, 배포 전마다 실행하는 회귀 테스트 모음을 구축해요. 팀이 출시 여부를 결정할 때 신뢰할 수 있는 평가예요.
- 파인튜닝. 실제 대화를 학습 및 선호도 데이터로 바꾸고, 모델을 사후 학습해요(SFT, 선호도 튜닝, 지식 증류). 작고 빠른 모델도 최첨단 모델이 잘하는 일을 해내도록 만들어요.
- 모델 라우팅. 작은 모델이 대부분의 턴을, 최첨단 모델이 중요한 턴을 맡도록 라우터를 학습하고 평가해요. 턴마다 지연 시간, 비용, 품질 사이의 균형을 책임져요.
- 브라우저 에이전트. API가 없는 사이트에서도 Pally가 안정적으로 작동하게 해요. 탐색, 로그인, 결제, 멈추고 물어봐야 할 때를 판단하는 능력을 다뤄요. 측정하고, 개선해요.
- 레드팀 테스트. 이메일의 프롬프트 인젝션부터 악성 웹페이지까지, Pally가 속거나 정보를 유출하거나 아무도 요청하지 않은 행동을 할 수 있는 경로를 찾아요. 방어책을 만들고, 계속 제대로 작동하도록 평가도 구축해요.
- 에이전트 경험. 기억과 검색, 도구 선택, 행동할지 질문할지, 언제 먼저 연락할지 등 에이전트 전반에 ML을 적용해요. 매일 대화 기록을 읽고, 발견한 점을 평가와 모델 개선으로 이어가요.
평가 기준은 1가지예요. Pally가 누군가의 비서로서 매주 얼마나 더 나아지는지, 평가가 이를 입증하는지 봐요.
찾는 분
시니어부터 스태프급에 해당하는 직무예요. 최첨단 AI 연구소나 그 수준으로 일하는 팀에서 이미 이런 일을 해본 분을 찾아요.
- ML 또는 소프트웨어 엔지니어링 경력 4년 이상이며, AI 연구소, AI 제품 회사 또는 유사한 곳에서 일한 경험이 있는 분.
- LLM 사후 학습이나 파인튜닝(SFT, 선호도 튜닝, 지식 증류)을 직접 수행하고 결과를 실서비스에 배포해 본 분.
- LLM 평가기, 사람의 선호도 데이터, 실제 트래픽 재생 등 팀이 출시 여부를 결정할 때 신뢰한 평가를 설계해 본 분.
- 다음 중 최소 1가지 경험이 있는 분: LLM 레드팀 테스트 또는 적대적 테스트, 브라우저 또는 컴퓨터 사용 에이전트, 모델 라우팅 또는 캐스케이드, 도구 사용과 장기 기억을 갖춘 실서비스 에이전트.
- Python과 학습·평가용 ML 기술 스택에 강하고, 제품 코드베이스에서 TypeScript로 작업하는 데 익숙한 분.
- AI를 활용한 개발 흐름에 능숙하고, 출시하는 모든 것을 검증하고 수정하며 책임질 수 있는 탄탄한 기본기를 갖춘 분.
- 창립 팀 수준의 역할 범위를 원하는 분. Pally 연구의 기준을 세우고, 이후 합류할 엔지니어 채용도 함께해요.
근무 조건
기본급 $200–300k + 상당한 규모의 지분, 401(k), 건강보험을 제공해요. California주 San Francisco에서 대면으로 근무하는 정규직이에요.
저희는 남다르게 열심히 일해요. 일이 최우선이 아니라면 이곳은 맞지 않아요. 대신 일정을 정하는 데는 완전한 자율성을 드려요. 언제 열심히 일하는지는 중요하지 않아요. 열심히 한다는 것만 중요해요.
본인과 잘 맞는다고 느끼셨다면 아래에서 지원해 주세요. 개인용 AI의 미래를 어떻게 보는지, Pally에서 일하고 싶은 이유는 무엇인지 알려 주세요.
읽어 주셔서 감사해요,
Haz + Wyatt