Рама Рамакришнан

Фильтр — это специалист. Один специализируется на вертикальных линиях, другой на кругах. Вы позволяете системе самой решить, кем быть.

Трансферное обучение — это идея: возьмите сеть, созданную кем-то другим, и адаптируйте её, вместо того чтобы строить с нуля.

Они захватили всё. Трансформеры трансформировали перевод, поиск Google, извлечение информации, распознавание речи, преобразование текста в речь и даже компьютерное зрение.

Поскольку мы проявили чрезвычайную осторожность, чтобы вещи, которые входят и выходят, имели одинаковый размер, мы можем складывать их друг на друга, как блины.

Поскольку на входе и выходе соблюдается идеальное равенство размеров, blocks трансформеров можно собирать в глубокие стопки, как блины.

Предсказание следующего слова — это частный случай маскировки, который оказывается странным образом более интересным и мощным.

Когда вы видите, как чат-бот печатает ответ, это часто намеренно замедленный процесс, чтобы имитировать человека.

LLM занимаются субтрактивной скульптурой: каждое слово отсекает лишнее от глыбы мрамора, пока не проявится фигура Давида.

Если вы понимаете глубокое обучение, для вас становятся возможными многие интересные вещи.

Никаких долгосрочных монопольных окон в мире нет. Есть только краткосрочные окна.

Ты познаешь слово по компании, которую оно держит.

Человеческая биология, сведенная к одному предложению.

Когда вы думаете, что принимаете ad hoc решение, остановитесь и спросите: можно ли это изучить из данных через обратное распространение ошибки?

Если вы не уверены, кто является продуктом, то продукт — это вы.

Retrieval Augmented Generation — это, на мой взгляд, самое распространенное бизнес-приложение LLM на сегодняшний день.

Я занимаюсь бразильским джиу-джитсу.

Я часто лгу людям ради шутки, но не со зла.

Я не из тех, кто много знает о сленге, это уж точно.

Это как Uber, только ты сам за собой приезжаешь.