- sziku69: Fűzzük össze a szavakat :)
- ubyegon2: Airfryer XL XXL forrólevegős sütő gyakorlati tanácsok, ötletek, receptek
- Elektromos rásegítésű kerékpárok
- btz: Internet fejlesztés országosan!
- Hieronymus: A DNS cache törlése Windowsban és böngészőben.
- Luck Dragon: Asszociációs játék. :)
- Meggyi001: Séta Európa egyik legikonikusabb falujában - Hallstatt
- eBay-es kütyük kis pénzért
- Brogyi: CTEK akkumulátor töltő és másolatai
- bitpork: Balcsis tali 2026
-
Fórumok
LOGOUT - lépj ki, lépj be!
LOGOUT reakciók Monologoszféra FototrendGAMEPOD - játék fórumok
PC játékok Konzol játékok MobiljátékokPROHARDVER! - hardver fórumok
Notebookok TV & Audió Digitális fényképezés Alaplapok, chipsetek, memóriák Processzorok, tuning Hűtés, házak, tápok, modding Videokártyák Monitorok Adattárolás Multimédia, életmód, 3D nyomtatás Nyomtatók, szkennerek Tabletek, E-bookok PC, mini PC, barebone, szerver Beviteli eszközök Egyéb hardverek PROHARDVER! BlogokMobilarena - mobil fórumok
Okostelefonok Mobiltelefonok Okosórák Autó+mobil Üzlet és Szolgáltatások Mobilalkalmazások Tartozékok, egyebek Mobilarena blogokIT café - infotech fórumok
Infotech Hálózat, szolgáltatók OS, alkalmazások SzoftverfejlesztésFÁRADT GŐZ - közösségi tér szinte bármiről
Tudomány, oktatás Sport, életmód, utazás, egészség Kultúra, művészet, média Gazdaság, jog Technika, hobbi, otthon Társadalom, közélet Egyéb Lokál PROHARDVER! interaktív
Új hozzászólás Aktív témák
-
Reggie0
titán
-
S_x96x_S
veterán
A egysegesitett memorias consumer megoldasok csak dedukciora alkalmasak, amire ugyanugy osszelegozol nVidia kartyakat is. Az nVLinknek csak treningnel vagy gigaszi modellek eseten van jelentosege, amire ugysem jok az elobbiek. A CUDA-t pedig nem a hw eladasok tartjak eletben, hanem a CUDA miatt veszik az nVidia hardvereket. 5-10 ev lemaradasban van sw szinten az AMD es az Intel is, hiaba van pl. ROCm, ha tulnyomo tobbsegben csak az nVidia-s CUDA kod van atforditva, ami nyilvan nem lesz hatekony AMD-s kornyezetben. Cross platform kod pedig sosem lesz olyan mint a direkt optimalizalas, rengeteg aktivan hasznalt CUDA-ban megirt konyvtar pedig annyira komplex, hogy aki erti az kb. mar az nVidianal dolgozik.
> 5-10 ev lemaradasban van sw szinten az AMD
na melyikre jött ki előbb az M3 ?
"MiniMax M3 428B on both the CUDA & ROCm stack on day 0!"
https://x.com/SemiAnalysis_/status/2065584972220481568 -
S_x96x_S
veterán
Persze, senkinek sem jo a mostani helyzet, de azt nehez elvitatni, hogy az nVidia reges reg rajott (talan az elso detonator driverek megjelenesekor), hogy a sw legalabb olyan fontos mint a hw. Azota locsoljak bele a penzt, a drivereiket leszamitva rengeteg opensource hozzajarulasuk van (termeszetesen a sajat rendszereikre optimalizalva), a tobbiek pedig szinte csak a communitytol varjak a sajat megvaltasukat evek ota, ami nagyon docogosen megy. Eddig meg nem jutott el odaig senki, hogy szinten vegtelen penzt ontson a sw oldalba, igy hiaba az igeretes fejlesztesek, azok lassu adaptacioja miatt egyre melyebbre ashatja be magat a zold szorny. Az pedig, hogy az AI komplex alacsony szintu kodot optimalizal eltero hardwarekre hiba es ostobasagok nelkul meg jopar ev, legfeljebb a laboratoriumokban letezhet ilyesmi, a jelenleg elerheto legfeljettebb modellek is nagyon durvan hibaznak ha nem alapveto feladarokrol van szo - vagy superviseolni kell oket, amihez pedig szukseg van a "mernoki" tudasra.
Az AMD próbál alkalmazkodni.
"AMD's Lemonade SDK For Local AI Adds NVIDIA CUDA Support"
https://www.phoronix.com/news/AMD-Lemonade-10.7-Released -
zooly
aktív tag
az a paradoxon,
hogy éppen az nvidia technológián kifejlesztett AI kódgenerátorok,
csökkentik a CUDA előnyeit.Amúgy se a nagy cégek ( openAI ) , se a kínai állam nem rajong az nvidia felárért és dominanciáért ( és ez a népszerűség átka.)
És egyre több CUDA alternativa van, és pár elég igéretes.
pl. a jelentős részben kínaiak által fejlesztett "TileLang.",
amire az AMD is felfigyelt.Persze, senkinek sem jo a mostani helyzet, de azt nehez elvitatni, hogy az nVidia reges reg rajott (talan az elso detonator driverek megjelenesekor), hogy a sw legalabb olyan fontos mint a hw. Azota locsoljak bele a penzt, a drivereiket leszamitva rengeteg opensource hozzajarulasuk van (termeszetesen a sajat rendszereikre optimalizalva), a tobbiek pedig szinte csak a communitytol varjak a sajat megvaltasukat evek ota, ami nagyon docogosen megy. Eddig meg nem jutott el odaig senki, hogy szinten vegtelen penzt ontson a sw oldalba, igy hiaba az igeretes fejlesztesek, azok lassu adaptacioja miatt egyre melyebbre ashatja be magat a zold szorny. Az pedig, hogy az AI komplex alacsony szintu kodot optimalizal eltero hardwarekre hiba es ostobasagok nelkul meg jopar ev, legfeljebb a laboratoriumokban letezhet ilyesmi, a jelenleg elerheto legfeljettebb modellek is nagyon durvan hibaznak ha nem alapveto feladarokrol van szo - vagy superviseolni kell oket, amihez pedig szukseg van a "mernoki" tudasra.
-
S_x96x_S
veterán
én úgy értelmeztem, hogy az első körben azért nem lesz linux
mert a Microsoft érthetően nem áldoz erre.
( és a Windows a kritikus út a piaci méretgazdaságosság felé )de később már az nvidia érdeke,
hogy rendes linux támogatása legyen.
( Thinkpadeknél is elvárt )amúgy a WSL2 - ben
valami biztos elérhető lesz már az elején
( pl. egy mini DGX SPARK-os környezet ). -
Reggie0
titán
ez csak egy egyszerű power usereknek való általános laptop
ami egyben AI dev kit -isAmivel el lehet kezdeni az AI ismerkedést, fejlesztést.
pl. lokális RAG -ot, adattisztitást, Blender MCP -vel modellezést.Egy lépcsőfok,
aminek a segítségével egy újabb lépcsőfokra lehet lépni.
de nem kötelező, és dönthetsz más utirány felé is.szerintem az a lényeg - hogy fokozatosan az olcsó+ nagysebességű Unifed Memória irány felé fordul át a piac
( és az irányt az Apple Studio mutatja. ~ M3 Ultra chip and 512GB of unified memory delivers a massive memory bandwidth of 819 GB/s )És ha az N1X nem lesz sikeres, akkor majd az N2X vagy az N3X
A veseny jó !
Azzal, hogy a linuxot nem szanjak ra mar eleve csokkentik a sikeret. Szoval ki tudja mit is akarnak igazabol. Lehet csak szabadulnanak az elore lekotott ram kapacitasoktol.
-
S_x96x_S
veterán
ez csak egy egyszerű power usereknek való általános laptop
ami egyben AI dev kit -isAmivel el lehet kezdeni az AI ismerkedést, fejlesztést.
pl. lokális RAG -ot, adattisztitást, Blender MCP -vel modellezést.Egy lépcsőfok,
aminek a segítségével egy újabb lépcsőfokra lehet lépni.
de nem kötelező, és dönthetsz más utirány felé is.szerintem az a lényeg - hogy fokozatosan az olcsó+ nagysebességű Unifed Memória irány felé fordul át a piac
( és az irányt az Apple Studio mutatja. ~ M3 Ultra chip and 512GB of unified memory delivers a massive memory bandwidth of 819 GB/s )És ha az N1X nem lesz sikeres, akkor majd az N2X vagy az N3X
A veseny jó !
-
wasd.hu
senior tag
Nem vagyok programozó, GTM kampányokat csinálok egyszerre kb. 30 ügyfélnek, annak minden lépését Claude-al az ajánlatadás, onboardingtól, a kampány copyk, inbox managementen, lead továbbítás és statisztika trackelésen át az offboarding reportokig, ezen felül pedig a saját magunk által használt különböző toolok között olyan automatizációkat meg kapcsolatokat hozok létre (most épp főleg ezzel foglalkozom), hogy ha 1 helyen ráklikkelsz valahova akkor annak tényleg mindenhol nyoma legyen és 1 betű adatot ne kelljen manuálisan felvezetnie senkinek a cégnél. Már egy sales call ha lemegy annak is a fireflies transcriptje alapján töltődnek dolgok egy CRM boardba, ahonnan az infok töltődnek tovább stb.
Fut egy csomó olyan Python automatizáció VPS-en amiket úgy készített el a Claude, hogy 0-t tudok/tanultam programozni valaha, és így van egy cégszintű company landing page mint single source of truth aminek elemei folyamatosan updatelődnek, szép és könnyen kezelhető a frontendje is és mindenki megtalálja rajta a saját magának hasznos felületet (sales, inbox manager, tulaj, én)
Van még egy csomó aspektus, de onnan, hogy manualisan google sheeteket vezetgetünk oda jutottunk, hogy minden kapcsolatban van mindennel, majdnem minden teljesen automata és csak a claudeba kell irogatni a promptokat a többi történik magától.
Illetve ugye a Claude skillek még amiről nem beszéltem és ezek github repoja, ezek is aktívan használva vannak és fejlődnek, és ezek is mind olyanok amiket kódolás tudás nélkül soha nem hoztam volna össze.
Startup nyilván.Wow ez érdekelne. Ahogy kolléga mondja "nyilvanos valamennyire a pipeline" vagy tudsz hasonlot mutatni?
-
Reggie0
titán
Ez manapság már kényelmi és pénz kérdés,
és mindenki eldöntni, hogy szüksége van-e rá - vagy megéri-e neki.
De a technológia elérhető.Amúgy egyre inkább a hibrid megoldásé lesz a jövő.
( vagyis API + LocalLLM egyszerre , főleg az agenic AI korában )
Vagyis nyugodtan használhatsz emelett egy cloud-os megoldást is.amúgy ha egy adatokkal foglalkozó fejlesztőnek manapság >=64GB laptop az ideális ( akkor ahhoz képest már a 128GB memória nem akkora tétel )
és egy MacBook Pro M5 - 128 GB , 614 GB/s
inferencben ráver egy mobil RTX 4090 (16GB , 576 GB/s ) - megoldásra.Nyilvan, nem a memomeret miatt mondom, nekem is evek ota 128gb van a gepben(nem ai miatt). Ez nem kerdes. En az erdemi AI potencialt nem latom az rtx sparkban.
-
ben2
senior tag
A egysegesitett memorias consumer megoldasok csak dedukciora alkalmasak, amire ugyanugy osszelegozol nVidia kartyakat is. Az nVLinknek csak treningnel vagy gigaszi modellek eseten van jelentosege, amire ugysem jok az elobbiek. A CUDA-t pedig nem a hw eladasok tartjak eletben, hanem a CUDA miatt veszik az nVidia hardvereket. 5-10 ev lemaradasban van sw szinten az AMD es az Intel is, hiaba van pl. ROCm, ha tulnyomo tobbsegben csak az nVidia-s CUDA kod van atforditva, ami nyilvan nem lesz hatekony AMD-s kornyezetben. Cross platform kod pedig sosem lesz olyan mint a direkt optimalizalas, rengeteg aktivan hasznalt CUDA-ban megirt konyvtar pedig annyira komplex, hogy aki erti az kb. mar az nVidianal dolgozik.
"A egysegesitett memorias consumer megoldasok csak dedukciora alkalmasak, amire ugyanugy osszelegozol nVidia kartyakat is. "
Ez igaz, csak kb. 2 db. 5090 áráért kapsz 128gb AI PC-t. Ezért versenyképesek az egységesített memóriás consumer megoldások a legózással szemben.
"A CUDA-t pedig nem a hw eladasok tartjak eletben, hanem a CUDA miatt veszik az nVidia hardvereket."Pont erről beszéltem én is: a CUDA-val láncolja a saját ökoszisztémájába a felhasználókat az NVIDIA. A user azért vesz NV hardvert, mert az alkalmazások és a libraryk többsége CUDA only. Mivel a userek NV hardvert vesznek, a fejlesztők a CUDA-t részesítik előnyben, így minden CUDA fejlesztés az NV hardver eladásokat növeli és minden NV eladás a CUDA dominanciáját.
Kivéve, ha van olyan hardver szegmens, amire az nvidia-nak egyáltalán nincs normális megoldása. Ez esetben ugyanis a userek kénytelenek lemondani a CUDA-ról, ha pedig a fejlesztők el akarják érni őket, akkor ők is kénytelenek CUDA-n kívül más API-kat is támogatni. Ezért az nvidia-nak első sorban az az érdeke, hogy minden AI hardvernek legyen versenyképes nvidia megfelelője. -
S_x96x_S
veterán
A egysegesitett memorias consumer megoldasok csak dedukciora alkalmasak, amire ugyanugy osszelegozol nVidia kartyakat is. Az nVLinknek csak treningnel vagy gigaszi modellek eseten van jelentosege, amire ugysem jok az elobbiek. A CUDA-t pedig nem a hw eladasok tartjak eletben, hanem a CUDA miatt veszik az nVidia hardvereket. 5-10 ev lemaradasban van sw szinten az AMD es az Intel is, hiaba van pl. ROCm, ha tulnyomo tobbsegben csak az nVidia-s CUDA kod van atforditva, ami nyilvan nem lesz hatekony AMD-s kornyezetben. Cross platform kod pedig sosem lesz olyan mint a direkt optimalizalas, rengeteg aktivan hasznalt CUDA-ban megirt konyvtar pedig annyira komplex, hogy aki erti az kb. mar az nVidianal dolgozik.
az a paradoxon,
hogy éppen az nvidia technológián kifejlesztett AI kódgenerátorok,
csökkentik a CUDA előnyeit.Amúgy se a nagy cégek ( openAI ) , se a kínai állam nem rajong az nvidia felárért és dominanciáért ( és ez a népszerűség átka.)
És egyre több CUDA alternativa van, és pár elég igéretes.
pl. a jelentős részben kínaiak által fejlesztett "TileLang.",
amire az AMD is felfigyelt. -
zooly
aktív tag
Szvsz ez az egész nem a hardverről, hanem a CUDA dominanciájának fenntartásáról szól.
Az NVIDIA szándékosan visszafogja a vram mennyiséget és megszüntette az nvlink támogatást a gamer kártyáin, hogy az AI datacenterek ne a gamer piacra szánt hardvereket vegyék.
Csakhogy így a konkurens unified memoryt alkalmazó termékeknek piaci rés nyílt a nagyobb LLM-ek lokális futtatására valahol a datacenterek és a gamer hardverek között.
Ezek a megoldások viszont nem támogatják a CUDA-d, így sorra jelennek meg az AI eszközök alternatív buildjei az AMD és az Apple hardvereire.
Az NVIDIA-nak tehát lépnie kellett, mert ha nincs CUDA-ra épülő, relatíve olcsó, ámde sok ramot támogató hardver, akkor a fejlesztőknek megéri a CUDA-n kívül más szabványokat is támogatni és onnantól az Nvidia nem tudja a CUDA-val a saját ökoszisztémájához láncolni a felhasználókat.A egysegesitett memorias consumer megoldasok csak dedukciora alkalmasak, amire ugyanugy osszelegozol nVidia kartyakat is. Az nVLinknek csak treningnel vagy gigaszi modellek eseten van jelentosege, amire ugysem jok az elobbiek. A CUDA-t pedig nem a hw eladasok tartjak eletben, hanem a CUDA miatt veszik az nVidia hardvereket. 5-10 ev lemaradasban van sw szinten az AMD es az Intel is, hiaba van pl. ROCm, ha tulnyomo tobbsegben csak az nVidia-s CUDA kod van atforditva, ami nyilvan nem lesz hatekony AMD-s kornyezetben. Cross platform kod pedig sosem lesz olyan mint a direkt optimalizalas, rengeteg aktivan hasznalt CUDA-ban megirt konyvtar pedig annyira komplex, hogy aki erti az kb. mar az nVidianal dolgozik.
-
oio1i10o
junior tag
Nem vagyok programozó, GTM kampányokat csinálok egyszerre kb. 30 ügyfélnek, annak minden lépését Claude-al az ajánlatadás, onboardingtól, a kampány copyk, inbox managementen, lead továbbítás és statisztika trackelésen át az offboarding reportokig, ezen felül pedig a saját magunk által használt különböző toolok között olyan automatizációkat meg kapcsolatokat hozok létre (most épp főleg ezzel foglalkozom), hogy ha 1 helyen ráklikkelsz valahova akkor annak tényleg mindenhol nyoma legyen és 1 betű adatot ne kelljen manuálisan felvezetnie senkinek a cégnél. Már egy sales call ha lemegy annak is a fireflies transcriptje alapján töltődnek dolgok egy CRM boardba, ahonnan az infok töltődnek tovább stb.
Fut egy csomó olyan Python automatizáció VPS-en amiket úgy készített el a Claude, hogy 0-t tudok/tanultam programozni valaha, és így van egy cégszintű company landing page mint single source of truth aminek elemei folyamatosan updatelődnek, szép és könnyen kezelhető a frontendje is és mindenki megtalálja rajta a saját magának hasznos felületet (sales, inbox manager, tulaj, én)
Van még egy csomó aspektus, de onnan, hogy manualisan google sheeteket vezetgetünk oda jutottunk, hogy minden kapcsolatban van mindennel, majdnem minden teljesen automata és csak a claudeba kell irogatni a promptokat a többi történik magától.
Illetve ugye a Claude skillek még amiről nem beszéltem és ezek github repoja, ezek is aktívan használva vannak és fejlődnek, és ezek is mind olyanok amiket kódolás tudás nélkül soha nem hoztam volna össze.
Startup nyilván.Ez nagyon izgalmasan hangzik, esetleg nyilvanos valamennyire a pipeline vagy tudsz hasonlot mutatni?
-
S_x96x_S
veterán
Ez engem őszintén érdekelne. Tudnál mondani egy konkrét példát arra, hogy nálad mit jelent az, hogy a PoC után a megvalósítást elejétől végig Claude csinálja?
Milyen jellegű projektről van szó, és a gyakorlatban meddig jut el a Claude önállóan? Kódot ír, tesztel, hibát javít, dokumentál, deployol is, vagy inkább csak a fejlesztési munkát végzi?
Érdekelne az is, hogy ilyenkor te napi szinten mivel foglalkozol: architektúrát tervezel, specifikációt írsz, review-zol, vagy még ennél is magasabb szinten irányítod a folyamatot?ha érdekel,
akkor van 'mesterséges intelligencia' topik is.
https://prohardver.hu/tema/ai_mi_mesterseges_inteligencia_topik/friss.html -
Csandi
addikt
Ez engem őszintén érdekelne. Tudnál mondani egy konkrét példát arra, hogy nálad mit jelent az, hogy a PoC után a megvalósítást elejétől végig Claude csinálja?
Milyen jellegű projektről van szó, és a gyakorlatban meddig jut el a Claude önállóan? Kódot ír, tesztel, hibát javít, dokumentál, deployol is, vagy inkább csak a fejlesztési munkát végzi?
Érdekelne az is, hogy ilyenkor te napi szinten mivel foglalkozol: architektúrát tervezel, specifikációt írsz, review-zol, vagy még ennél is magasabb szinten irányítod a folyamatot?Nem vagyok programozó, GTM kampányokat csinálok egyszerre kb. 30 ügyfélnek, annak minden lépését Claude-al az ajánlatadás, onboardingtól, a kampány copyk, inbox managementen, lead továbbítás és statisztika trackelésen át az offboarding reportokig, ezen felül pedig a saját magunk által használt különböző toolok között olyan automatizációkat meg kapcsolatokat hozok létre (most épp főleg ezzel foglalkozom), hogy ha 1 helyen ráklikkelsz valahova akkor annak tényleg mindenhol nyoma legyen és 1 betű adatot ne kelljen manuálisan felvezetnie senkinek a cégnél. Már egy sales call ha lemegy annak is a fireflies transcriptje alapján töltődnek dolgok egy CRM boardba, ahonnan az infok töltődnek tovább stb.
Fut egy csomó olyan Python automatizáció VPS-en amiket úgy készített el a Claude, hogy 0-t tudok/tanultam programozni valaha, és így van egy cégszintű company landing page mint single source of truth aminek elemei folyamatosan updatelődnek, szép és könnyen kezelhető a frontendje is és mindenki megtalálja rajta a saját magának hasznos felületet (sales, inbox manager, tulaj, én)
Van még egy csomó aspektus, de onnan, hogy manualisan google sheeteket vezetgetünk oda jutottunk, hogy minden kapcsolatban van mindennel, majdnem minden teljesen automata és csak a claudeba kell irogatni a promptokat a többi történik magától.
Illetve ugye a Claude skillek még amiről nem beszéltem és ezek github repoja, ezek is aktívan használva vannak és fejlődnek, és ezek is mind olyanok amiket kódolás tudás nélkül soha nem hoztam volna össze.
Startup nyilván. -
Scofield007
csendes tag
De hát ezt már most is tudja pl a Claude, nem kell ehhez lokálisan futtatott modell meg "AI-ra készített" számítógép.
Nekem is rá van eresztve minden, munkához csak a Claude-ot használom már, nem is csinálok semmit csak promptolok
ott tartunk, hogy az emberi tényező a proof of concept, utána a megvalósítást elejétől végig Claude csinálja, jó pár hónapja már gond nélkül.Ez engem őszintén érdekelne. Tudnál mondani egy konkrét példát arra, hogy nálad mit jelent az, hogy a PoC után a megvalósítást elejétől végig Claude csinálja?
Milyen jellegű projektről van szó, és a gyakorlatban meddig jut el a Claude önállóan? Kódot ír, tesztel, hibát javít, dokumentál, deployol is, vagy inkább csak a fejlesztési munkát végzi?
Érdekelne az is, hogy ilyenkor te napi szinten mivel foglalkozol: architektúrát tervezel, specifikációt írsz, review-zol, vagy még ennél is magasabb szinten irányítod a folyamatot? -
ben2
senior tag
Szvsz ez az egész nem a hardverről, hanem a CUDA dominanciájának fenntartásáról szól.
Az NVIDIA szándékosan visszafogja a vram mennyiséget és megszüntette az nvlink támogatást a gamer kártyáin, hogy az AI datacenterek ne a gamer piacra szánt hardvereket vegyék.
Csakhogy így a konkurens unified memoryt alkalmazó termékeknek piaci rés nyílt a nagyobb LLM-ek lokális futtatására valahol a datacenterek és a gamer hardverek között.
Ezek a megoldások viszont nem támogatják a CUDA-d, így sorra jelennek meg az AI eszközök alternatív buildjei az AMD és az Apple hardvereire.
Az NVIDIA-nak tehát lépnie kellett, mert ha nincs CUDA-ra épülő, relatíve olcsó, ámde sok ramot támogató hardver, akkor a fejlesztőknek megéri a CUDA-n kívül más szabványokat is támogatni és onnantól az Nvidia nem tudja a CUDA-val a saját ökoszisztémájához láncolni a felhasználókat. -
csendes
addikt
A vicces az egészben az hogy AI-ra az nVidia kifejezettten támogatja a FOSS (nyílt forráskódú) megoldásokat. Más kérdés, hogy a videokártyáíra a gyári driver-ek nem nyílt forráskódúak és rövid a hivatalos támogatási idő, utána az új kernelekhez kézzel kell reszelni a gyári meghajtókat, a nyílt forráskódú nouveau pedig 3D-ben nagyon lassú.
-
S_x96x_S
veterán
Ez manapság már kényelmi és pénz kérdés,
és mindenki eldöntni, hogy szüksége van-e rá - vagy megéri-e neki.
De a technológia elérhető.Amúgy egyre inkább a hibrid megoldásé lesz a jövő.
( vagyis API + LocalLLM egyszerre , főleg az agenic AI korában )
Vagyis nyugodtan használhatsz emelett egy cloud-os megoldást is.amúgy ha egy adatokkal foglalkozó fejlesztőnek manapság >=64GB laptop az ideális ( akkor ahhoz képest már a 128GB memória nem akkora tétel )
és egy MacBook Pro M5 - 128 GB , 614 GB/s
inferencben ráver egy mobil RTX 4090 (16GB , 576 GB/s ) - megoldásra. -
Reggie0
titán
> Szerintem egy profi konferencian remote-ban tolja az AI-t minek hurcolna a laptopjaban?
mert a sziliciumvölgyben a Macbook pro - a default céges laptop.
Még az OpenAI és hamarabb kiadja a MacOS -es verziót mint a windows-ot. És ha ebből van 128GB -os akkor miért ne ?de amúgy miért tolná mindig remote-ban ?
halottál te a Kárpátok AI gurujáról :-)
és miket csinált?
https://x.com/karpathy/status/1762621031121145996
2024: "Setting up my shiny new fully maxed out Space Black MacBook Pro M3 Max 128GB 16-inch (upgrading from an M1 Air). I always like to set up the new one with a clean slate, from scratch - this time I will not allow my dev configuration to get out of hand. Then we'll talk to it."-------
Amúgy trendi a téma.
"I flew from London to Google Cloud Next 2026 in Las Vegas. Ten hours with no in-flight wifi. I used the time to test how far a modern MacBook can carry engineering work on local LLMs alone.
..... "
https://news.ycombinator.com/item?id=47921064Egy repulesen ertheto, de a foldon kb. mindenhol van mar net. Egy konferencian mindenkeppen. Laptopon AI-zni inkabb csak kenyszermegoldas, mint jo dolog. Ha elerem a szervert, akkor alap, hogy ott futtatok, nem egy nyeszlett hordozhato gepen bohockodok.
-
S_x96x_S
veterán
> Szerintem egy profi konferencian remote-ban tolja az AI-t minek hurcolna a laptopjaban?
mert a sziliciumvölgyben a Macbook pro - a default céges laptop.
Még az OpenAI és hamarabb kiadja a MacOS -es verziót mint a windows-ot. És ha ebből van 128GB -os akkor miért ne ?de amúgy miért tolná mindig remote-ban ?
halottál te a Kárpátok AI gurujáról :-)
és miket csinált?
https://x.com/karpathy/status/1762621031121145996
2024: "Setting up my shiny new fully maxed out Space Black MacBook Pro M3 Max 128GB 16-inch (upgrading from an M1 Air). I always like to set up the new one with a clean slate, from scratch - this time I will not allow my dev configuration to get out of hand. Then we'll talk to it."-------
Amúgy trendi a téma.
"I flew from London to Google Cloud Next 2026 in Las Vegas. Ten hours with no in-flight wifi. I used the time to test how far a modern MacBook can carry engineering work on local LLMs alone.
..... "
https://news.ycombinator.com/item?id=47921064 -
wasd.hu
senior tag
-
tibaimp
nagyúr
Egyetértek!
-
Sinesol
veterán
-
Reggie0
titán
-
Reggie0
titán
-
Reggie0
titán
Nem hiszem, hogy ez nulla összegű döntés.
Mivel nyugodtan megfér ez a laptop egy Desktop - multi-GPU-s workstationnal együtt, vagy egy DGX Station-al ( ami a Spark nagy testvére és tényleg workstation )Itt inkább a hodozhatóság lesz a lényeg.
és ez inkább egy Macbook Pro - alternativa lesz.
[ Windows + CUDA + Adobe + Gaming + MoE + WSL2 ]
(bár a MacBook Pro memória sávszélessége ennek a 2,5x -e)De egy profi AI konferenciára - nem dGPU -val, megy, hanem
egy 128GB -os unified memories laptoppal
( Macbook Pro / RTX Spark / Strix Halo )Ez a gép nagy MoE -k futtatására ideális,
Minden mást meg meg felhőben - vagy egy erősebb workstationn-on lehet futtatni.Szerintem egy profi konferencian remote-ban tolja az AI-t minek hurcolna a laptopjaban?
-
Sinesol
veterán
-
zooly
aktív tag
Miert ne mukodne a multi gpu gamer kartyakkal? Siman lebeszelik amit kell a pcie buszon, minden llm framework tamogatja. Csak alaplap + cpu legyen amiben van sok sav.
-
zooly
aktív tag
Nem hiszem, hogy nagysagrendekkel nagyobb kereslet lesz erre mint mondjuk a strix halo-ra, eleve aki llm-ezni szeretne annak a 128gb verzio kell, amit valoszinu nagyon dragan fognak merni - egy hasonlo meretu moe modell normalis futtatasahoz pedig harmad aron osszerakhat egy pc-t vagy gamer notebookot.
-
ben2
senior tag
Nagy királyság ezekben a 128GB-os masinákban, hogy kicsik, nem ormótlanul csúnyák, keveset fogyasztanak, viszonylag nagy méretü modellek is elférnek a memóriában ésszerü quantization mellett és valamennyire clusterezni is lehet öket. Persze lassúak, de ha nincs végtelen pénze az embernek, akkor a GPU-val is beleütközik az ember korlátokba.
Nagyon sok pénzt kell ahhoz költeni, hogy eljusson az ember arra a pontra, hogy ne a hardver legyen a szük keresztmetszet, de akkor meg már olyasmivel is kell foglalkozni komolyabban mint hütés, zaj vagy az elektromos hálózat, ezek meg simán elzümmögnek a nappaliban.
De ahogy S_x96x_S írta, akinek van ilyenje, annak simán lehet otthon multi-GPU cucca is vagy mondjuk ha kell akkor bérel valami komolyabbat.
A multi-GPU cucc gamer kártyákkal nem megy, mert belefut a 32GB vram limitbe. Egy RTX 6000 pro 96GB vrammal meg maga annyiba kerül, mint egy RTX Spark és ebből kellene minimum 2. És akkor még a 1.5 kilowattos fogyasztásról meg a GPU-kat kiszolgáló PC áráról nem is beszéltünk.
-
ben2
senior tag
Mit értesz normális GPU alatt?
-
BütyökLiza
csendes tag
Ezt én is megkérdeztem magamtól, majd az AI-tól, ezt írta:
"Lokális MI-ügynökök: A PC, ami cselekszik helyetted Az eddigi "AI PC-k" (mint a Microsoft Copilot+ laptopok) leginkább csak chatelni tudtak, vagy apróbb képszerkesztési feladatokat végeztek el a felhőben. Az RTX Spark ezzel szemben egy szuperszámítógép-szintű hardver a táskádban, amely képes úgynevezett Agentic AI (cselekvőképes MI) funkciókat futtatni, internet nélkül. [1, 2, 3]
NVIDIA OpenShell: Ez a Microsofttal közösen fejlesztett, vadonatúj biztonsági rendszer. Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz. Nemcsak válaszol a kérdéseidre, hanem önállóan elvégzi a munkát (pl. "Keresd meg az elmúlt havi számlákat, készíts belőlük egy Excel táblázatot, és küldd el e-mailben a könyvelőnek"). [1]
Óriási modellek a gépeden: A 128 GB egyesített memóriának köszönhetően a laptop képes 120-200 milliárd paraméteres, professzionális nagy nyelvi modelleket (LLM) futtatni helyben. Ráadásul az MI hatalmas, akár 1 millió tokenes kontextust (pl. több egész könyvnyi vagy teljes kódnyelvi adatbázist) is képes egyszerre fejben tartani és átlátni. [1, 2]
Kreatív MI-munka: Nem kell többé előfizetni külső szolgáltatásokra. A gépen helyben, másodpercek alatt generálhatsz fotórealisztikus 4K-s videókat, vagy 3D-s környezeteket a játékfejlesztéshez."
Őszintén nem tudom eldönteni, hogy kell-e ez, de biztos meg van/lesz a célközönsége. Nekem egyelőre nincs rá szükségem, de gondolom sokan vagyunk így itt ezzel.
"A PC, ami cselekszik helyetted"
Hát helyettem aztán ne cselekedjen a PC-m!
-
Sanya
nagyúr
-
zooly
aktív tag
Az OpenShell lenyege pont az, hogy nem ferhet hozza mindenhez az AI Agent, csak amit engedelyezel, kernel szinten izolalja el a rendszer tobbi reszetol. Jelenleg ezt eleg nehez kivitelezni Windowson, vannak ra megoldasok, de korulmenyesek.
-
wasd.hu
senior tag
-
Sanya
nagyúr
Nagy királyság ezekben a 128GB-os masinákban, hogy kicsik, nem ormótlanul csúnyák, keveset fogyasztanak, viszonylag nagy méretü modellek is elférnek a memóriában ésszerü quantization mellett és valamennyire clusterezni is lehet öket. Persze lassúak, de ha nincs végtelen pénze az embernek, akkor a GPU-val is beleütközik az ember korlátokba.
Nagyon sok pénzt kell ahhoz költeni, hogy eljusson az ember arra a pontra, hogy ne a hardver legyen a szük keresztmetszet, de akkor meg már olyasmivel is kell foglalkozni komolyabban mint hütés, zaj vagy az elektromos hálózat, ezek meg simán elzümmögnek a nappaliban.
De ahogy S_x96x_S írta, akinek van ilyenje, annak simán lehet otthon multi-GPU cucca is vagy mondjuk ha kell akkor bérel valami komolyabbat.
Szóval, ennyi pénzért sem jó semmire.
-
wasd.hu
senior tag
-
oio1i10o
junior tag
Nagy királyság ezekben a 128GB-os masinákban, hogy kicsik, nem ormótlanul csúnyák, keveset fogyasztanak, viszonylag nagy méretü modellek is elférnek a memóriában ésszerü quantization mellett és valamennyire clusterezni is lehet öket. Persze lassúak, de ha nincs végtelen pénze az embernek, akkor a GPU-val is beleütközik az ember korlátokba.
Nagyon sok pénzt kell ahhoz költeni, hogy eljusson az ember arra a pontra, hogy ne a hardver legyen a szük keresztmetszet, de akkor meg már olyasmivel is kell foglalkozni komolyabban mint hütés, zaj vagy az elektromos hálózat, ezek meg simán elzümmögnek a nappaliban.
De ahogy S_x96x_S írta, akinek van ilyenje, annak simán lehet otthon multi-GPU cucca is vagy mondjuk ha kell akkor bérel valami komolyabbat.
-
Csandi
addikt
Szóval az AI se tudja megmondani mire is jó
Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz.
Na attól védjen meg minket az isten
Már látom előre az agyhalott prank videókat a tikitokiról: "hey alexa, delete every file. - Fine I deleted them. Broooooo chill its just a prank hahaha"De hát ezt már most is tudja pl a Claude, nem kell ehhez lokálisan futtatott modell meg "AI-ra készített" számítógép.
Nekem is rá van eresztve minden, munkához csak a Claude-ot használom már, nem is csinálok semmit csak promptolok
ott tartunk, hogy az emberi tényező a proof of concept, utána a megvalósítást elejétől végig Claude csinálja, jó pár hónapja már gond nélkül. -
S_x96x_S
veterán
Nem hiszem, hogy ez nulla összegű döntés.
Mivel nyugodtan megfér ez a laptop egy Desktop - multi-GPU-s workstationnal együtt, vagy egy DGX Station-al ( ami a Spark nagy testvére és tényleg workstation )Itt inkább a hodozhatóság lesz a lényeg.
és ez inkább egy Macbook Pro - alternativa lesz.
[ Windows + CUDA + Adobe + Gaming + MoE + WSL2 ]
(bár a MacBook Pro memória sávszélessége ennek a 2,5x -e)De egy profi AI konferenciára - nem dGPU -val, megy, hanem
egy 128GB -os unified memories laptoppal
( Macbook Pro / RTX Spark / Strix Halo )Ez a gép nagy MoE -k futtatására ideális,
Minden mást meg meg felhőben - vagy egy erősebb workstationn-on lehet futtatni. -
Reggie0
titán
mivel a spark egységes memoriát használ, ami lehet 128GB is, igy beleférnek a memoriába , a nagy offline AI modellek, igy pl egy fejlesztő nem a Claude-nak fizet havi 2500 dollárt a programozo intelligenciáért , hanem a saját számitógépén futtat programozó ügynököket, a nap 24 órájában , az nvidia megint aranyat tojik, mert a gépüket vinni fogják mint a cukrot, irdatlan lesz rá a kereslet, a mai világban ai nélkül lehetetlen megmaradni a programozoi világban
Hat, azert annyira nem lesz ra nagy a kereslet. Jopofak ezek a 128GB-os unified memory-s bohockodasok, de eleg hamar korlatokba utkoznek. Ez olyan kozepkategorias juzereknek valo, aki komolyan AI-zik es 0-24-ben agensekkel kodoltat, az inkabb normalis GPU-t vesz.
-
Reggie0
titán
-
IgorKGB
csendes tag
mivel a spark egységes memoriát használ, ami lehet 128GB is, igy beleférnek a memoriába , a nagy offline AI modellek, igy pl egy fejlesztő nem a Claude-nak fizet havi 2500 dollárt a programozo intelligenciáért , hanem a saját számitógépén futtat programozó ügynököket, a nap 24 órájában , az nvidia megint aranyat tojik, mert a gépüket vinni fogják mint a cukrot, irdatlan lesz rá a kereslet, a mai világban ai nélkül lehetetlen megmaradni a programozoi világban
-
F34R
nagyúr
Erre is lesz lassan dedikalt hardware, mint a bitcoinra... nagyon fasza.. mijonmeg? ??
-
tibaimp
nagyúr
Szóval az AI se tudja megmondani mire is jó
Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz.
Na attól védjen meg minket az isten
Már látom előre az agyhalott prank videókat a tikitokiról: "hey alexa, delete every file. - Fine I deleted them. Broooooo chill its just a prank hahaha"Igen, kb. ez van, ezért írtam az utolsó mondatot is hozzá az előző hsz-ben.
-
paatrick
őstag
Ezt én is megkérdeztem magamtól, majd az AI-tól, ezt írta:
"Lokális MI-ügynökök: A PC, ami cselekszik helyetted Az eddigi "AI PC-k" (mint a Microsoft Copilot+ laptopok) leginkább csak chatelni tudtak, vagy apróbb képszerkesztési feladatokat végeztek el a felhőben. Az RTX Spark ezzel szemben egy szuperszámítógép-szintű hardver a táskádban, amely képes úgynevezett Agentic AI (cselekvőképes MI) funkciókat futtatni, internet nélkül. [1, 2, 3]
NVIDIA OpenShell: Ez a Microsofttal közösen fejlesztett, vadonatúj biztonsági rendszer. Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz. Nemcsak válaszol a kérdéseidre, hanem önállóan elvégzi a munkát (pl. "Keresd meg az elmúlt havi számlákat, készíts belőlük egy Excel táblázatot, és küldd el e-mailben a könyvelőnek"). [1]
Óriási modellek a gépeden: A 128 GB egyesített memóriának köszönhetően a laptop képes 120-200 milliárd paraméteres, professzionális nagy nyelvi modelleket (LLM) futtatni helyben. Ráadásul az MI hatalmas, akár 1 millió tokenes kontextust (pl. több egész könyvnyi vagy teljes kódnyelvi adatbázist) is képes egyszerre fejben tartani és átlátni. [1, 2]
Kreatív MI-munka: Nem kell többé előfizetni külső szolgáltatásokra. A gépen helyben, másodpercek alatt generálhatsz fotórealisztikus 4K-s videókat, vagy 3D-s környezeteket a játékfejlesztéshez."
Őszintén nem tudom eldönteni, hogy kell-e ez, de biztos meg van/lesz a célközönsége. Nekem egyelőre nincs rá szükségem, de gondolom sokan vagyunk így itt ezzel.
Szóval az AI se tudja megmondani mire is jó
Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz.
Na attól védjen meg minket az isten
Már látom előre az agyhalott prank videókat a tikitokiról: "hey alexa, delete every file. - Fine I deleted them. Broooooo chill its just a prank hahaha" -
tibaimp
nagyúr
Ezt én is megkérdeztem magamtól, majd az AI-tól, ezt írta:
"Lokális MI-ügynökök: A PC, ami cselekszik helyetted Az eddigi "AI PC-k" (mint a Microsoft Copilot+ laptopok) leginkább csak chatelni tudtak, vagy apróbb képszerkesztési feladatokat végeztek el a felhőben. Az RTX Spark ezzel szemben egy szuperszámítógép-szintű hardver a táskádban, amely képes úgynevezett Agentic AI (cselekvőképes MI) funkciókat futtatni, internet nélkül. [1, 2, 3]
NVIDIA OpenShell: Ez a Microsofttal közösen fejlesztett, vadonatúj biztonsági rendszer. Lehetővé teszi, hogy az MI-ügynök teljes hozzáférést kapjon a fájljaidhoz és alkalmazásaidhoz. Nemcsak válaszol a kérdéseidre, hanem önállóan elvégzi a munkát (pl. "Keresd meg az elmúlt havi számlákat, készíts belőlük egy Excel táblázatot, és küldd el e-mailben a könyvelőnek"). [1]
Óriási modellek a gépeden: A 128 GB egyesített memóriának köszönhetően a laptop képes 120-200 milliárd paraméteres, professzionális nagy nyelvi modelleket (LLM) futtatni helyben. Ráadásul az MI hatalmas, akár 1 millió tokenes kontextust (pl. több egész könyvnyi vagy teljes kódnyelvi adatbázist) is képes egyszerre fejben tartani és átlátni. [1, 2]
Kreatív MI-munka: Nem kell többé előfizetni külső szolgáltatásokra. A gépen helyben, másodpercek alatt generálhatsz fotórealisztikus 4K-s videókat, vagy 3D-s környezeteket a játékfejlesztéshez."
Őszintén nem tudom eldönteni, hogy kell-e ez, de biztos meg van/lesz a célközönsége. Nekem egyelőre nincs rá szükségem, de gondolom sokan vagyunk így itt ezzel.
-
ricsi99
addikt
-
S_x96x_S
veterán
a MS szándékai szerint
a Windows Subsystem for Linux (WSL 2) - lesz elsődlegesen támogatva és továbbfejlesztve az RTX SPARK / ARM-en is.
https://github.com/microsoft/WSL2-Linux-Kernel/releases
ami már a 6.18-as kernelt is támogatja.És én hasonló esetben a DGX SPARK dockerizált image-ével próbálkoznék, hátha az fut.
-
ripla
addikt
Azt ők sem tudják, csak jól hangzik, mint manapság egy aktuális marketingre kitalált hívószó. Volt itt már bitcoin meg VR, most meg épp AI-nak hívják az aktuális trendet. Ha majd ez is megbukik, akkor megint kitalálnak valamit.
-
paatrick
őstag
Valaki aki benne van írja már le mit jelent az hogy AI-ra "készített" számítógép, akár win akár linux. Mire használják?
-
tibaimp
nagyúr
Kíváncsi leszek majd az összehasonlító tesztekre, hogy az AI programok mennyivel futnak gyorsabban a Linux-os verzión, mert ha sokkal jobban fog menni rajta, az elég nagy blama az MS-nek...
-
Youri
veterán
Nyílván összeborul a két legnagyobb slop factory
Új hozzászólás Aktív témák
-
Fórumok
LOGOUT - lépj ki, lépj be!
LOGOUT reakciók Monologoszféra FototrendGAMEPOD - játék fórumok
PC játékok Konzol játékok MobiljátékokPROHARDVER! - hardver fórumok
Notebookok TV & Audió Digitális fényképezés Alaplapok, chipsetek, memóriák Processzorok, tuning Hűtés, házak, tápok, modding Videokártyák Monitorok Adattárolás Multimédia, életmód, 3D nyomtatás Nyomtatók, szkennerek Tabletek, E-bookok PC, mini PC, barebone, szerver Beviteli eszközök Egyéb hardverek PROHARDVER! BlogokMobilarena - mobil fórumok
Okostelefonok Mobiltelefonok Okosórák Autó+mobil Üzlet és Szolgáltatások Mobilalkalmazások Tartozékok, egyebek Mobilarena blogokIT café - infotech fórumok
Infotech Hálózat, szolgáltatók OS, alkalmazások SzoftverfejlesztésFÁRADT GŐZ - közösségi tér szinte bármiről
Tudomány, oktatás Sport, életmód, utazás, egészség Kultúra, művészet, média Gazdaság, jog Technika, hobbi, otthon Társadalom, közélet Egyéb Lokál PROHARDVER! interaktív
- 27% - ASUS PRIME Z890M-PLUS WIFI Alaplap
- BESZÁMÍTÁS! Sony PlayStation 5 825GB SSD lemezes konzol extra játkokkal garanciával hibátlan működés
- Lenovo L14 Gen 1.,FHD,14",i5-10310,8GB DDR4, 256GB NVMe SSD,WIN11
- BESZÁMÍTÁS! GIGABYTE VISION RTX 3060 12GB videokártya garanciával hibátlan működéssel
- 27% - Erazer P20 GAMER PC! i7-14700F / RTX 4070 / 16GB DDR5 / 1TB NVMe / B760
na melyikre jött ki előbb az M3 ?
ott tartunk, hogy az emberi tényező a proof of concept, utána a megvalósítást elejétől végig Claude csinálja, jó pár hónapja már gond nélkül.