Эйдан Гомес
13 цитат из наших статей · нажмите, чтобы открыть статью-источник
Сооснователь и генеральный директор компании Cohere, соавтор фундаментальной архитектуры Transformer.
Реальность такова, что на рынке нет места для прошлогодней модели.
Если вы просто занимаетесь масштабированием, вы должны быть одним из облачных гигантов или их эффективной дочерней компанией.
В ИИ-моделях сейчас нет понятия решения проблем, хотя это и есть рассуждение.
Мы здесь не для того, чтобы строить AGI. Мы здесь для того, чтобы создавать ценность для мира.
Предыдущие поколения моделей были слабыми в рассуждениях, но они рассуждают.
Я — вокальный критик X-рисков и идеи, что языковые модели захватят мир и убьют всех.
Мы с Ашишем Васвани сидели на диване в офисе Google Brain, и он повернулся ко мне со словами: "Эйдан, это будет нечто огромное". Моя реакция тогда была скептичной: "Ну, мы же просто подняли метрику BLEU на один пункт."
Базовые нейросети обучаются на сырых данных из интернета, и нет никаких объективных причин ожидать от них осмысленного поведения — нам просто повезло, что они работают в режиме few-shot подсказок.
Я искренне надеюсь, что трансформеры — это не последняя архитектура. Было бы крайне разочаровывающе, если бы это было пределом наших возможностей.
Я считаю, что реальная ценность ИИ-моделей заключается в форме творческого взаимодействия между человеческим мозгом и моделью.
Модель начала понимать язык таким образом, что, по моему личному мнению, нас отделяли от этого десятилетия.
Архитектура Transformer — это просто многослойные перцептроны, сложенные друг на друга, плюс внимание.
Я не придаю человечеству божественного статуса. Думаю, сознание находится в мозге и является физическим процессом.