<bgdev />free

Вход Регистрация

Лаптоп за Deep Learning и Large Language модели
0

0 1 2 3 4 ...42 43 44 45 46 ...84 85 86 87 88

#173140 (ツ) Последният акаунт на Единия
Създадено на 27.04.2026 , видяно: 295 пъти.

РЪБинка - плащай на Delegate, мама ти козоебска... >:-( трее разбера как да си генерирам книжката...

#173149 (ツ) Реконструктор
Създадено на 27.04.2026 , видяно: 284 пъти.
waldorf

Kimi 2.6 май и той е с 1Т параметъра.

Тва може ли да се даде некъв естимейт кво джилезу му тряя за да бичи?

#173150 (ツ) |
Създадено на 27.04.2026 , видяно: 261 пъти.
Реконструктор

Тва може ли да се даде некъв естимейт кво джилезу му тряя за да бичи?

Питай ChatGPT.

#173152 (ツ) waldorf
Създадено на 27.04.2026 , видяно: 256 пъти.

МоЕ може да се търкаля и на по слаба машина - е, не е толкова умно като пълния модел ама като за бедни хора толкова.

Аз обаче се целя да видя какво може да се подкара на съвсем достъпна машина в диапазона до 5-10к и не е като да няма и модели и хардуер.

#173153 (ツ) |
Създадено на 27.04.2026 , видяно: 253 пъти.
waldorf

МоЕ може да се търкаля и на по слаба машина - е, не е толкова умно като пълния модел ама като за бедни хора толкова.

Аз обаче се целя да видя какво може да се подкара на съвсем достъпна машина в диапазона до 5-10к и не е като да няма и модели и хардуер.

Дори МОЕ иска да зареди всички параметри в паметта. Иска по-малко compute, но не по-малко памет.

#173155 (ツ) |
Създадено на 28.04.2026 , видяно: 244 пъти.
|

А, много добре. Май е първия публичен модел с над трилион параметъра. Ще го пусна да се сваля като кацна.

Нямам на какво да го пускам, но ми трябват размерите на тензорите с които смята.

Трябва да си купя по-голям диск. Pro модела не се събира на свободните 4 TB на NAS-a.

#173156 (ツ) Delegate
Създадено на 28.04.2026 , видяно: 234 пъти.
|

Дори МОЕ иска да зареди всички параметри в паметта. Иска по-малко compute, но не по-малко памет.

Имал съм случаи в които MoE ми е от ползва, като например един лаптоп на който добавих още 16 рам за да подкарвам основно такива модели, понеже процесора му не става за модели дето влизат в 32 рам и са dense, но ако са активни около 4б се справя сравнително добре.

#173185 (ツ) waldorf
Създадено на 28.04.2026 , видяно: 218 пъти.

#173187 (ツ) Rabin
Последно редактирано на 28.04.2026 от Rabin, видяно: 215 пъти.
Последният акаунт на Единия

РЪБинка - плащай на Delegate, мама ти козоебска... >:-( трее разбера как да си генерирам книжката...

Малко да се проветри край мене, бутаме проект след проект. Няма да те оставя без пари, само да мине тоя зор.

п.с. Макя ти проста!

#173190 (ツ) gat3way
Създадено на 28.04.2026 , видяно: 208 пъти.

Рабине, гледай кво става като си бавиш дълговете, препродават те като добитък.

#173200 (ツ) Rabin
Последно редактирано на 28.04.2026 от Rabin, видяно: 192 пъти.
gat3way

Рабине, гледай кво става като си бавиш дълговете, препродават те като добитък.

Delegate има ненакърнен имидж, виж са как му носи пари. Евгени е клеветник, налага се да гo псувам редовно, и после "Негъре, де са ми парите"?

#173201 (ツ) gat3way
Създадено на 28.04.2026 , видяно: 186 пъти.

Според мене Delegate върти некаква схема като ония у америката две и осма, държи по-нискорискови задължения, сега ще ги миксира с твоите и ще ги препродаде изгодно на някой офис за бързи кредити.

#173206 (ツ) Delegate
Създадено на 28.04.2026 , видяно: 173 пъти.

Точно така стана 2008-ма, да.

#176887 (ツ) |
Създадено на 22:30 , видяно: 81 пъти.
#176958 (ツ) BIGBUGEX
Създадено на 12:10 , видяно: 50 пъти.
#176960 (ツ) |
Създадено на 12:25 , видяно: 46 пъти.
BIGBUGEX

Аз съм изненадан че все още х86 къртят мивки. Явно амд не се дават още.

Мда. Аз от поне 3 години нямам никакви x86 машини вкъщи, пък и на работа май няма много такива.

Един колега иска да се забавлява да конвертира байнърита директно от една архитектура в друга в помощта на AI. Ако това е успешно, съвсем ще се освободят нещата. И не е ясно кой ще победи, може и RISCV да се окаже най-отгоре.

#176978 (ツ) waldorf
Създадено на 18:15 , видяно: 23 пъти.
BIGBUGEX

Аз съм изненадан че все още х86 къртят мивки. Явно амд не се дават още.

То и 8051 ядрото при всичките му малоумия го водят най ергономично почти 50 години откак е направено.

#176979 (ツ) waldorf
Създадено на 18:15 , видяно: 22 пъти.
|

Мда. Аз от поне 3 години нямам никакви x86 машини вкъщи, пък и на работа май няма много такива.

Един колега иска да се забавлява да конвертира байнърита директно от една архитектура в друга в помощта на AI. Ако това е успешно, съвсем ще се освободят нещата. И не е ясно кой ще победи, може и RISCV да се окаже най-отгоре.

Розета!

#176980 (ツ) |
Създадено на 18:24 , видяно: 14 пъти.
waldorf

Розета!

Розета има малко забавяне. Колегата се надява да получи 100% същата производителност дори при ръчно оптимизирани кърнъли като gemm.

0 1 2 3 4 ...42 43 44 45 46 ...84 85 86 87 88

Лаптоп за Deep Learning и Large Language модели
0

AsmBB v3.0 (check-in: 2fb30f0a060190b0); SQLite v3.53.0 (check-in: 4525003a53a7fc63);
©2016..2024 John Found; Licensed under EUPL. Powered by Assembly language Created with Fresh IDE