StepFun пусна Step 5 Preview на 20 септември 2026 г. като следващия си водещ базов модел за дългосрочна работа с агенти, според Tencent Tech, картите с модели на DataLearner и фирмените материали, сочещи към stepfun.com. Официалната английска марка е StepFun / Step 5. Проверка на състоянието преди всяка рекламация: ID на модела step-5-preview вече се обслужва чрез продукта на StepFun и API на отворена платформа; Отворените тегла на BF16 са планирани за 15 октомври 2026 г. и все още не са пуснати при пускането – така че наличността на API и отвореността на теглото трябва да останат отделни.
Архитектурата е рядка смес от експерти с около 600 милиарда общи параметри и приблизително 27 милиарда активни на токен в 92-слоен „тесен и дълбок“ трансформатор. Изборът на дълбочина е в рамка за предварително попълване на агента: дългите връщания на инструмента и имплицитното разсъждение с множество скокове се възползват от по-дългите информационни пътища през стека. Контекстната поддръжка е един милион токени с въвеждане на текст и изображение (видео въвеждането също се появява на карти на трети страни), насочени към AI кодиране, софтуерно инженерство, финансов анализ и агенти с професионални познания. Sparse GQA плюс блоково сливане на токени се описва като намаляване на разходите за избор на индексатор и top-k до около една осма, с цел да се запази вниманието на милиони токени практично.
Бележките за обучение наблягат на побитово подравняване на влакове по правилата за стабилност на маршрута на MoE, планиране с съзнание за натоварване, спекулативно декодиране и FP8 пътища, които според StepFun ускоряват RL с дълъг хоризонт от край до край с повече от 3 пъти. Индексът на композитния интелект на Artificial Analysis е цитиран на 44; Материалите на компанията поставят това сред водещите отворени ориентирани модели, докато цените на API около $1,00 вход / $2,70 изход за милион токени се появяват в картите на агрегатора – третирайте сравненията на резултата и разходите като заявени от трета страна или доставчик.
До 15 октомври Прегледът на стъпка 5 е най-добре да се чете като API на агент с дълъг хоризонт на живо с датиран ангажимент за отворени тежести – все още не е намаляване на теглото на Hugging Face и не е взаимозаменяемо с историите на Meituan LongCat, MiniMax Code Flash или NaiveAI OSS MoE в тази група.
Source link