Dacă ați ratat @NousResearch ore de birou, iată un TLDR despre ceea ce ați ratat 🤖 Psyche democratizează antrenamentul AI pe @solana Psyche își propune să permită antrenarea colaborativă, open-source a modelelor AI de bază mari, reducând dependența de laboratoare închise și folosind algoritmi pentru a minimiza supraîncărcarea comunicării în antrenamentul GPU distribuit. Antrenamentul actual al modelului: În prezent antrenează un LLM dens de 40 de miliarde de parametri în stil DeepSeek, conceput pentru a fi puternic, dar rulabil local. Coordonare descentralizată: Coordonarea instruirii are loc în rețeaua Solana pentru a asigura descentralizarea și a evita punctele unice de eșec. Provocări și soluții de rețea: O rețea de bârfe peer-to-peer folosind IRO a fost construită pentru a gestiona transmiterea de date între noduri, abordând limitările de volum de date ale Solana. Trecerea la Python Backend (Torch Titan): Baza de cod a lui Psyche este "Pythonificată" prin abstractizarea backend-ului trainerului pentru a sprijini antrenorii bazați pe Python (integrând o bifurcație a Torch Titan), care se așteaptă să ofere o accelerare de ~ 2x. Capabilități de reglare fină: Psyche va susține în curând reglarea fină completă, inclusiv metodele avansate dezvoltate la Nous, cu planuri de a regla fin un viitor model Nous în rețea. Auditurile trezorierului: Codul trezorierului din Solana, care gestionează distribuirea recompenselor către furnizorii de calcul, a trecut cu succes două audituri independente. Cercetări viitoare (Psyche 2.0): Cercetările viitoare includ explorarea paralelismului tensorial (TP), paralelismul conductelor (PP) și paralelismul experților (EP) pe internet pentru a face din Psyche o platformă pentru dezvoltarea de algoritmi AI avansați. Contribuții ale comunității: Dezvoltatorii pot contribui la baza de cod open-source Psyche, pot crea noi medii pentru baza de cod de învățare prin întărire Atropos și pot sprijini rețeaua de inferență descentralizată folosind API-ul Nous Viziunea pe termen lung: Scopul final este de a democratiza antrenarea modelelor AI, permițând oricui să contribuie la o rețea globală, similar cu "plierea acasă" sau "SETI acasă", pentru a crea cea mai bună inteligență artificială deschisă din lume. Video:

@aeyakovenko @0xMert_ Trebuie să te shill Nous 🤖