Állás

UX kutató, AI-kiértékelések

Egyéb • Remote • Teljes munkaidő Amerikai Egyesült Államok USA

Notion UX kutatójaként azt fogod meghatározni és skálázni, hogyan mérjük a Notion AI-alapú funkcióinak minőségét — nemcsak a modell kimenetére, hanem a teljes felhasználói élményre fókuszálva.

Feladatok

  • Egyértelmű, újrahasználható kiértékelési kereteket és rubrikákat állítasz fel (hasznosság, bizalom, hangnem, kontroll, átláthatóság)
  • Rendszeres, longitudinális és funkció-specifikus kutatásokat vezetsz a felhasználói élmény minőségének mérésére
  • Kvalitatív tanulmányokat, side-by-side összehasonlításokat és human-in-the-loop kiértékeléseket vezetsz
  • A kiértékeléseket valós munkafolyamatokba (cél kitűzése, delegálás, felülvizsgálat, iteráció) ágyazod, nem elszigetelt visszajelzésekbe
  • Feltárod a hibamódokat és a felhasználók helyreállítási viselkedését, és ezekből konkrét útmutatást készítesz
  • Együttműködsz termék-, dizájn-, mérnöki és data science csapatokkal skálázható kiértékelési folyamatok kialakításában (human-in-the-loop, longitudinális tanulmányok, automatizált/LLM-judge módszerek kalibrálása)

Elvárások

  • Képesség a "puha" felhasználói elvárások (bizalom, hangnem, hasznosság, érthetőség) konkrét rubrikákká, mérőszámokká alakítására
  • AI-jártasság és rendszerszemlélet: tapasztalat AI-alapú termékek (LLM-ek, ügynökök, generatív UI/workflow-automatizáció) kiértékelésében
  • Tiszta kommunikáció, képesség a kutatási eredmények üzleti hatássá fordítására
  • Erős UX-kutatói szaktudás (kvantitatív és kvalitatív módszerek: interjúk, benchmarkolás, felmérések, kísérletek)
  • Pragmatizmus, ambiguitás kezelésének képessége
  • 5+ év UX-kutatói tapasztalat iparági környezetben

Előny

  • Ismeretek LLM-as-judge módszerekről, kiértékelő promptok tervezéséről vagy "golden dataset" készítéséről
  • Tapasztalat AI-kutatási eszközökkel (pl. Dovetail, Listen Labs, Maze, Outset) és AI-megfigyelhetőségi eszközökkel (pl. Braintrust)
  • Adatlekérdező nyelvek (pl. SQL), szkriptnyelvek (pl. Python) vagy statisztikai szoftverek (pl. R, SAS, Matlab) ismerete
  • Mesterfokozat vagy PhD HCI, pszichológia, viselkedéstudomány, antropológia vagy szociológia területén

Soft skillek

Storytelling, célközönséghez igazított kommunikációPriorizálási képesség, ambiguitás kezeléseKereszt-funkcionális együttműködés

Amit kínálunk

  • Versenyképes készpénz-kompenzáció, részvényjuttatás és egyéb juttatások
  • Irodai együttműködés hetente 3 napon (San Francisco vagy New York, anchor days)

A munkáltatóról

A Notion egy kollaboratív AI-munkaterület, ahol csapatok és AI-ügynökök együtt gondolkodnak — egy helyen érhető el a tudás, a projektek, a megbeszélések és az AI-eszközök.

Nyelvtudás: Angol: Felsőfok

Hasonló állások