Планы

#1
by shpinog - opened

Есть ли планы выпустить что-то подобное 22b ?

Есть ли планы выпустить что-то подобное 22b ?

Может быть. Но я хз что можно замерджить среди 22б моделей. А что касается 12б моделей, то на мой взгляд уже потолок. Дальше только файнтюн

Можно и модели 30b, если есть на примете. Я никак не могу найти что-то хорошее с русским языком около 30-40b.

Планируется ли модель на основе gemma 3 12b?
Уже есть РП модели, вроде https://huggingface.co/SicariusSicariiStuff/Oni_Mitsubishi_12B
Однако там русский язык хромает. Но в целом модель обучаема на РП и цензура там убираема.
Хотелось бы аналог NekoMix на основе gemma 3 12b.

Не думаю, gemma 3 12b оказалсь очень прожорливой на память и там, где Nemo можно было ужать с большим контекстом и хорошей скоростью Gemma 3 не влезает совершенно

Your need to confirm your account before you can post a new comment.

Sign up or log in to comment