Архивы distillation - AI Founder

Илон Маск признал, что xAI частично обучала Grok на моделях OpenAI

На заседании суда в Калифорнии Илон Маск подтвердил, что xAI хотя бы частично использовала distillation на моделях OpenAI для обучения Grok. По его словам, это в целом обычная практика для AI-компаний. Это важное признание, потому что OpenAI и Anthropic в последнее время как раз активно выступают против такого подхода. Они считают, что через массовые запросы … Читать далее

OpenAI, Anthropic и Google начали вместе бороться с копированием AI-моделей в Китае

OpenAI, Anthropic и Google начали обмениваться данными о попытках вытаскивать результаты из их моделей для дальнейшего копирования. Делают это через Frontier Model Forum — организацию, которую они раньше запустили вместе с Microsoft. Речь идет о так называемой adversarial distillation — когда чужую модель пытаются использовать как “учителя”, чтобы собрать более дешевый аналог без полноценной собственной … Читать далее