Az Ollama új szintre emeli a Mac-ek MI-teljesítményét
Fontos kérdés, hogy mennyit fejlődhetnek a helyi nagynyelvi modellek futtatásának sebessége Apple gépeken – mostantól ugyanis jelentős előrelépés várható. Az Ollama nevű rendszer, amely lehetővé teszi a helyi MI-modellek futtatását Mac-en, bevezette az Apple MLX gépi tanulási keretrendszerének támogatását. Emellett az Ollama javította a gyorsítótárazási teljesítményt, valamint mostantól támogatja az Nvidia által kidolgozott modelltömörítési formátumot is, ami bizonyos modelleknél sokkal hatékonyabb memóriakezelést tesz lehetővé.
Lendületben a helyi modellek
A fejlesztések elsősorban az újabb, Apple Silicon chippel szerelt Mac-ek (M1-től felfelé) tulajdonosainak kedveznek. Ez jókor jön, hiszen a kutatói és hobbista körökön túl most kezd igazán terjedni a nagy modellek helyi futtatása. Ehhez hozzájárult például az OpenClaw elképesztő népszerűsége is; a szoftver több mint 300 ezer csillagot zsebelt be rövid idő alatt, és Kínában valóságos őrület övezi.
Sokan már unják a felhőalapú MI-eszközök korlátait és drága előfizetéseit (például a Claude Code vagy a ChatGPT Codex szolgáltatásokat), ezért egyre többen próbálkoznak helyi megoldásokkal. Az Ollama épp mostanában javította a Visual Studio Code-integrációját is.
Újítások és hardverigények
Az MLX-támogatás egyelőre előnézeti fázisban érhető el (Ollama 0.19), és jelenleg csak egyetlen modellt támogat. A hardverigény viszont nem lesz mindenkinek barátságos: minimum egy Apple Silicon processzoros Macre van szükség, legalább 32 GB RAM-mal.
Ráadásként az Ollama már a legújabb M5-ös GPU-kban található Neural Accelerator egységeket is kihasználja, így a legfrissebb Mac-eknél még gyorsabb tokenfeldolgozás és válaszidő várható.
A jövő és a helyi modellek lehetőségei
Következésképpen, bár a helyi modellek még elmaradnak a felhőalapú élvonalbeli megoldásoktól, egyre inkább alkalmasak számos olyan feladatra, amiért eddig előfizetést kellett váltani. Ráadásul a helyi futtatás biztonságosabb, mint a felhő, bár nem ajánlott mély rendszerhozzáférést adni a modelleknek. A fő akadályok továbbra is a parancssoros használat, valamint a hardveres elvárások, különös tekintettel a videomemóriára. Az MLX viszont jelentős előrelépést jelent az Apple-chipek memóriakezelésében, ami a modern Mac-felhasználóknak egészen új lehetőségeket adhat. Az Ollama még nem közölt pontos dátumot arról, hogy mikor lesz szélesebb körben elérhető az MLX-támogatás.
Fizetős iOS appok és játékok, amik ingyenesek a mai napon. Between Dates Calendar Math (iPhone/iPad)A Between Days alkalmazás segítségével egyszerűen és gyorsan meghatározható, hány nap van két dátum között...
📱 A Google ismét újat mutat a Pixel okostelefonok világában – mostantól az eszközökön futó mesterséges intelligencia még erősebbé teszi a mobilokat, úgy, hogy közben védi a felhasználók adatait...
Fizetős iOS appok és játékok, amik ingyenesek a mai napon. Between Dates Calendar Math (iPhone/iPad)A Between Days alkalmazás egyszerű és gyors megoldást kínál két dátum közötti napok kiszámítására...
Az Észak-Minnesotában pusztító erdőtüzek füstje hamarosan elérheti az Egyesült Államok északkeleti nagyvárosait, többek között Detroitot, Milwaukee-t, Clevelandet, Philadelphiát és New Yorkot...
A Minnesotai Egyetem laboratóriumában újszerű biológiai eredmény született: egy aprócska SpudCell nevű képződmény képes táplálkozni, növekedni, versengeni, osztódni és lemásolni önmagát – vagyis szinte mindent tud, amit egy élő sejt is...
A Google Képek (Google Images) megújult külsőt kapott: mostantól személyre szabott galériákat kínál a felhasználóknak, így még könnyebben fedezhetik fel az őket érdeklő képeket...
A Google DeepMind vezére, Demis Hassabis szerint az új generációs mesterséges intelligencia egyre komolyabb veszélyeket rejt magában, például a kiberbiztonság és a biológiai fenyegetések terén...
💊 Fontos kérdés, hogy meg lehet-e állítani vagy lassítani az Alzheimer-kór lefolyását, hiszen a demencia legfőbb oka, az Alzheimer-kór, világszerte rengeteg embert érint...
🚀 Sikeresen megérkezett kedden a Nemzetközi Űrállomásra egy amerikai–orosz személyzet, miután a kazahsztáni Bajkonurból indultak a Roszkoszmosz által üzemeltetett Szojuz MS-29 fedélzetén...
🔒 Az informatika egyik legfontosabb biztonsági eleme, a Secure Boot, már csaknem tíz éve lényegében védtelenné vált – és ezt eddig senki sem vette észre...
Bár a csípős paprika számos kultúra elválaszthatatlan része, és egyes laboratóriumi kísérletek a bennük található vegyületeket, például a kapszaicint gyulladáscsökkentőnek vagy akár daganatellenesnek mutatják, az utóbbi évek humán kutatásai nem ennyire egyértelműek...
Április 6-án négy űrhajós indult el az Artemis II misszió keretében az Orion űrhajóval, és körülbelül 40 percig teljesen eltűntek a Föld látóteréből...
💼 Májusban a Meta megvált dolgozóinak 10 százalékától, közel 8 000 alkalmazottat küldött el, ami jelentős átszervezéssel járt a vállalat MI-re és adatközpontokra irányuló fejlesztései miatt...
Időutazás egyetlen napon: Jeruzsálem falainak áttörésétől 🏰 a Rosetta-kő 🗿 megtalálásán és Napoleon 🚢 megadásán át a Grunwaldnál vívott döntő ütközetig ⚔️, sőt a modern korszakban a törökországi puccskísérletig 🇹🇷 és a Mozilla alapításáig 🦊...
Tipikus eset, amikor egy ismert gyógyszer egészen váratlan előnyöket kínál. A GLP-1 típusú szerek, mint az Ozempic, a Wegovy vagy a Rybelsus, eredetileg a fogyás, a jobb vércukorszint-szabályozás és a szívbetegségek kockázatának csökkentése miatt váltak népszerűvé...
Indiai kutatók a világ eddigi legrészletesebb, háromdimenziós agytörzs-atlaszát hozták létre, amelyben MRI-felvételeket több mint 500 mikroszkópos szövetrészlettel kapcsoltak össze...
Többek között különleges eredményre jutottak a kutatók: a Tejútrendszer középpontjához közel egy óriási gázfelhőben felfedeztek egy ritka cukorfélét, az eritrózt, amely nemcsak málnában, hanem barnító krémekben is megtalálható...
Ami kezdetben ártalmatlannak tűnt, most minden régi T-Mobile-előfizető számára valódi változás: a társaság e héttől kezdve automatikusan átsorolja a 10–15 éves tarifákat – például a Simple Choice, T-Mobile One, One Plus, a Magenta családhoz tartozó, valamint a Sprintből áthozott régi csomagokat – modernebb tarifákra...
A legnagyobb kriptovaluták teljesítménye az elmúlt 24 órában jelentősen visszaesett, miután egyre többen valószínűsítik, hogy az amerikai jegybank akár már júliusban kamatemelés mellett dönt...
🤔 A mesterséges intelligencia kutatása 75 éve követi Alan Turing útmutatását, aki két alapvető feltételezést tett: az intelligencia létrehozható szoftverből, függetlenül a testtől, és hogy egy gép intelligensnek számít, ha sikerrel utánozni tudja az embert, például egy beszélgetés során...
