GetUSB.info Logo

Posts Taggati ‘NAND flash’

La velocità delle aspettative: una lezione del Derby per il settore tech

Il cancelletto di partenza del Kentucky Derby è una lezione perfetta sulle aspettative.

Cavallo del Kentucky Derby ritirato al cancelletto di partenza come esempio di prestazioni burst e sostenute

Proprio prima dell’inizio della corsa, le cose si sono fatte strane. Non il solito movimento nervoso prima della gara, ma un cedimento vero e proprio proprio al cancelletto. Un cavallo che era già entrato come sostituto, quello che il pubblico chiamava “white monster”, ha perso il controllo, ha disarcionato il fantino ed è stato ritirato pochi minuti prima della campana.

È stato uno di quei momenti in cui tutto sembrava pronto. La preparazione c’era, le caratteristiche fisiche c’erano, e l’aspettativa era al massimo. Poi, nel momento in cui è arrivata la pressione, semplicemente non ha retto.

Nel settore tech vediamo questo “ritiro” ogni giorno nella memoria flash. Ci fidiamo dei numeri in evidenza, solo per vedere poi la realtà assestarsi in modo diverso quando il lavoro inizia davvero.

L’illusione della “Burst Speed”

La maggior parte delle chiavette USB viene venduta puntando su un solo numero aggressivo: la velocità massima di scrittura. È il gancio di marketing perfetto. 300MB/s, 400MB/s: numeri facili da stampare su una confezione e ancora più facili da confrontare a colpo d’occhio.

Per essere corretti, quei numeri non sono bugie. Per una finestra molto breve, un’unità può davvero raggiungerli. I dati finiscono in uno strato di cache veloceUn’area temporanea di archiviazione ad alta velocità nei dispositivi di memoria flash, usata per accelerare le operazioni di scrittura e lettura prima del trasferimento dei dati verso la memoria principale più lenta., il controller resta fresco, e tutto sembra fluido. È quella prima uscita dal cancelletto: una partenza pulita e una falcata forte. In quel momento sei convinto di avere davanti un vincitore.

Ma uno scatto al cancelletto non è una lezione sulle prestazioni; è una lezione sul potenziale. E il potenziale, da solo, raramente porta a termine il lavoro.

Velocità sostenuta: dove inizia la vera lezione

La storia vera comincia quando il trasferimento continua. La cache si riempie. Il controllerUn componente hardware che gestisce il flusso dei dati tra un’unità USB e i suoi chip di memoria. inizia il lavoro pesante di spostare i dati nella vera memoria NANDUna tecnologia di archiviazione non volatile progettata per memorizzare grandi quantità di dati in modo efficiente e recuperarli quando necessario.. La correzione degli errori lavora di più, la gestione in background entra in gioco, e i limiti termici iniziano a farsi più stretti.

L’unità non si guasta, ma cambia. Rallenta.

Una chiavetta partita a 300MB/s può assestarsi su una velocità sostenuta di 70MB/s quando lo “scatto” iniziale è finito. Quel calo del 75% nelle prestazioni è la realtà dell’hardware, ma raramente è la realtà della proposta commerciale. Nel tech, spesso scambiamo il burst per la capacità reale.

Il costo delle supposizioni

È qui che lo scollamento diventa un problema di lavoro. Fai un rapido test di benchmark, vedi numeri alti e costruisci il tuo flusso operativo attorno a quelli. Poi passi alla produzione: trasferimenti più lunghi, scritture ripetute e condizioni meno controllate.

L’ho visto succedere in ambienti professionali di duplicazione. Su una prova breve sembra tutto perfetto, ma quando il lavoro cresce, il throughput inizia a scivolare. Le tempistiche si allungano. Il sistema sembra “pesante”.

Se hai mai lavorato con sistemi di duplicazione USB multi-porta, questa lezione l’hai vista da vicino. La velocità teorica per dispositivo spesso evapora quando chiedi al controller di gestire venti dispositivi contemporaneamente sotto pieno carico. La specifica dichiarata resta la stessa, ma le condizioni sono cambiate.

Le prestazioni nel tempo sono l’unica metrica che conta davvero

Quel momento al Derby sembrava familiare perché ricordava una cosa semplice: essere pronti al cancelletto non è la stessa cosa che avere resistenza in pista. Il cavallo era capace, ma la situazione è cambiata, e la prestazione non ha seguito.

La memoria flash si comporta allo stesso modo. La prima impressione è pensata per essere forte, persino convincente. Ma più tempo passi con l’hardware, più inizi a vedere il suo vero carattere.

La lezione per il settore tech è semplice: smettiamo di misurare solo la partenza. La burst speed ti dice cosa è possibile in condizioni ideali, ma la velocità sostenuta ti dice cosa aspettarti nel mondo reale. Da qualche parte tra marketing e carico di lavoro, la realtà trova sempre il suo equilibrio.

Leggi Tutto

Il NAND non sta scomparendo, ma i server AI oggi dipendono da più del semplice flash

Il NAND non sta scomparendo, ma i server AI ora dipendono da molto più della sola memoria flash

Da oltre due decenni, GetUSB osserva come i dati si muovono realmente, non solo come vengono raccontati dal marketing. In questo periodo abbiamo visto lo storage evolversi attraverso diversi cicli, dal declino dei dischi meccanici alla crescita della memoria flash, fino ad arrivare più recentemente a sistemi in cui lo storage non è più solo un componente passivo, ma parte integrante dell’infrastruttura stessa.

Quello che sta accadendo ora con l’infrastruttura AI sembra un altro di quei momenti di transizione, ma guidato da un tipo di pressione diverso.

La memoria NAND non sta scomparendo, e su questo non c’è davvero discussione. Rimane la base dello storage moderno e svolge quel ruolo in modo estremamente efficace. Allo stesso tempo, la domanda di NAND è aumentata rapidamente, in gran parte a causa dei carichi di lavoro AI che richiedono dataset enormi e accesso continuo a tali dati. Questa domanda sta iniziando a scontrarsi con l’offerta in modi sempre più difficili da ignorare, che si tratti di pressione sui prezzi, allocazioni più restrittive o semplicemente tempi di consegna più lunghi per implementazioni su larga scala.

Quando questo tipo di squilibrio inizia a emergere, l’industria non resta ferma ad aspettare che la situazione si normalizzi. Inizia a cercare altri modi per risolvere il problema, ed è qui che le cose cominciano a cambiare.

Leggi Tutto

Dentro un computer AI: perché i moderni sistemi di intelligenza artificiale consumano così tanta memoria

Scalabilità di un server AI da una singola macchina a rack completi e a un data center, che illustra perché i moderni sistemi di intelligenza artificiale richiedono così tanta memoria

Com’è davvero un server AI quando si apre il coperchio

In questo periodo c’è molto rumore sul fatto che l’AI utilizzi “troppa memoria”. I prezzi sono in aumento. Le forniture sono limitate. Tutti dicono che la domanda stia esplodendo. Probabilmente lo hai già letto.

Ma gran parte di ciò che viene scritto salta la parte più importante: com’è fatto fisicamente un computer AI e perché ha bisogno di così tanta memoria in primo luogo. Non attraverso grafici astratti o previsioni di mercato, ma in termini che si possano visualizzare. Una volta compreso quanto consuma davvero un singolo sistema AI, il resto della storia smette di sembrare drammatico e inizia a sembrare inevitabile.

Mi sono ritrovato a spiegarlo di recente in un luogo che non ha nulla a che fare con i data center. Ero alla scuola di mio figlio per una “giornata dei genitori”, in piedi in un’aula, e alcuni studenti hanno iniziato a fare domande sull’AI. Non domande sui chatbot. Domande vere. Com’è fatto il computer? Dove vanno i dati? Perché tutti continuano a parlare di “memoria” come se fosse l’elemento chiave?

Leggi Tutto