EN / RU / 🤖
← К эссе
· Эссе · 1 мин

Судьба авторов "Attention is all you need"

Интересно пронаблюдать судьбу авторов работы “Attention is all you need”, которая стала отправной точкой к GPT.

Интересно пронаблюдать судьбу авторов работы “Attention is all you need” которая была опубликована аж в 2017 году и фактическия стала отправной точкой к GPT который получил такой огромный эффект.

Авторы в научных статьях обычно указываются в порядке внесенного вклада, люди с самым большим вкладом указываются вначале (кстати это хороший хак как подписываться на толковых людей в Twitter. Видите хорошая научная работа - подпишись на первых 2-3 людей).

Так вот, что же стало с этими людьми сейчас:

1️⃣ Ashish Vaswani: основал Adept (оценка >$1B), затем таинственный стартап.
2️⃣ Noam Shazeer: основал Character.ai (оценка ~$1B) с 20+ сотрудниками.
3️⃣ Niki Parmar: перешла из Google в Adept, а потом в новый проект Ashish'a.
4️⃣ Jakob Uszkoreit: основал Inceptive Life (моделирует мРНК с помощью ИИ).
5️⃣ Llion Jones: остался в Google, придумал мемное название статьи.
6️⃣ Aidan Gomez: основал Cohere.ai (оценка >$400m), 200+ сотрудников.
7️⃣ Lukasz Kaiser: перешел из Google в OpenAI, соавтор TensorFlow.
8️⃣ Illia Polosukhin: основал Near (блокчейн-протокол, оценка ~$2B).

Легендарный paper: https://arxiv.org/abs/1706.03762