Ingénieur de recherche en apprentissage automatique de l’équipe fondatrice
San Francisco, CA · Temps plein, en présentiel
Salut 👋, nous sommes Haz et Wyatt, les fondateurs de Pally.
Pally est un assistant personnel qui vit dans votre messagerie. Vous lui écrivez comme à un ami. Il répond aux messages que vous repoussez, réserve une table pour le dîner, relance pour une facture impayée et s’occupe des cent petites choses qui s’accumulent en une semaine.
Découvrez notre philosophie du travail
Nous sommes une petite équipe basée dans la baie de San Francisco et nous recrutons les personnes qui feront de Pally l’agent grand public #1 au monde.
Le poste
Vous améliorerez la capacité des modèles de Pally à servir d’assistant personnel. Tout le produit tient dans un fil de messages : chaque réponse est donc une sortie de modèle, et chaque sortie coûte du temps de latence et de l’argent. Quel modèle répond, ce qu’il sait, comment il utilise un navigateur et s’il agit correctement quand quelqu’un essaie de le piéger : autant de problèmes de recherche. Vous les prendrez en charge et mettrez vos solutions entre les mains de vrais utilisateurs chaque semaine.
C’est un poste de recherche et d’ingénierie très concret. Vous travaillerez sur le banc d’évaluation, le code d’entraînement et l’agent lui-même. En pratique :
- Évaluations. Construire le banc d’essai qui transforme « cette réponse semblait-elle juste ? » en chiffre : juges à chaque tour de conversation, données de préférences humaines, rejeu de conversations réelles et suites de tests de non-régression avant chaque déploiement. Des évaluations auxquelles l’équipe se fie pour décider des mises en production.
- Ajustement fin. Transformer les conversations réelles en données d’entraînement et de préférences, puis post-entraîner les modèles (SFT, ajustement par préférences, distillation) pour que de petits modèles rapides réussissent ce que les modèles de pointe font bien.
- Routage des modèles. Entraîner et évaluer un routeur pour que les petits modèles gèrent la plupart des tours de conversation et les modèles de pointe ceux qui comptent. Assumer l’arbitrage entre latence, coût et qualité à chaque tour.
- Agents de navigation web. Rendre Pally fiable sur les sites sans API : navigation, connexion, paiement et capacité à savoir quand s’arrêter pour demander quoi faire. Mesurer, puis améliorer.
- Tests offensifs. Trouver comment Pally pourrait être piégé, divulguer des informations ou agir sans qu’on le lui ait demandé, de l’injection d’instructions dans un e-mail à une page web malveillante. Construire les défenses et les évaluations qui garantissent leur efficacité.
- Expérience de l’agent. Intégrer l’apprentissage automatique dans tout l’agent : mémoire et recherche d’informations, choix des outils, décision d’agir ou de demander, et moment où prendre l’initiative du contact. Lire des transcriptions chaque jour et traduire vos observations en évaluations et en modifications des modèles.
Nous vous évaluerons sur une chose : les progrès de Pally comme assistant personnel, semaine après semaine, et les évaluations qui les prouvent.
Profil
Ce poste va du niveau senior au niveau expert. Nous recherchons quelqu’un qui a déjà fait ce travail dans un laboratoire d’IA de pointe ou une équipe de ce niveau.
- 4+ années en apprentissage automatique ou en ingénierie logicielle, avec une expérience dans un laboratoire d’IA, une entreprise de produits d’IA ou une structure similaire.
- Une expérience concrète du post-entraînement ou de l’ajustement fin de LLM (SFT, ajustement par préférences, distillation), avec mise en production des résultats.
- Une expérience de la conception d’évaluations auxquelles une équipe s’est fiée pour décider des mises en production : juges LLM, données de préférences humaines ou rejeu de trafic réel, par exemple.
- Une expérience dans au moins un de ces domaines : tests offensifs ou adversariaux de LLM ; agents utilisant un navigateur ou un ordinateur ; routage ou cascades de modèles ; agents en production utilisant des outils et une mémoire persistante.
- Une solide maîtrise de Python et des outils d’apprentissage automatique pour l’entraînement et l’évaluation, ainsi qu’une aisance avec TypeScript dans le code du produit.
- Une maîtrise des méthodes de développement assisté par IA, appuyée sur des bases solides pour vérifier, corriger et assumer tout ce que vous livrez.
- Vous voulez les responsabilités d’une équipe fondatrice. Vous fixerez le niveau d’exigence de la recherche chez Pally et participerez au recrutement des ingénieurs qui vous rejoindront.
Informations pratiques
$200–300k de salaire fixe + participation significative au capital, 401(k) et assurance santé. À temps plein, en présentiel à San Francisco, CA.
Nous travaillons avec une intensité exceptionnelle. Si le travail n’est pas votre priorité, ce poste n’est pas pour vous. En revanche, vous gérez vos horaires en toute autonomie. Peu importe quand vous vous investissez à fond, tant que vous le faites.
Vous vous reconnaissez ? Postulez ci-dessous. Dites-nous comment vous voyez l’avenir de l’IA personnelle et pourquoi vous avez envie de travailler chez Pally.
Merci de nous avoir lus,
Haz + Wyatt