Tendencias del momento
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.

Chamath Palihapitiya
Dios está en los detalles.
Di mi nombre…

The All-In PodcastHace 16 horas
Chamath: Dos términos a los que debes prestar atención en IA son Prefill y Decode
"Hay dos términos de los que creo que vas a escuchar mucho en los próximos años."
"El primer término es prefill, y el siguiente es decode."
"Lo que son prefill y decode, son dos formas muy distintas de cómo piensan los modelos, y cómo un modelo pasa por el proceso de responder a una pregunta que le haces."
"Y así, cuando envías un aviso a la IA, lo que sucede es que el modelo lo procesa. Esto se llama la fase de lectura o prefill."
"Lee tu aviso completo de una vez. Y luego hace un montón de matemáticas, calcula todas estas relaciones entre todas las palabras, y las almacena en memoria temporal."
"El problema es que esto está realmente limitado por el cómputo. Así que requiere una fuerza bruta masiva. Y las GPUs de Nvidia son las mejores aquí."
"Y su arquitectura está diseñada para un procesamiento paralelo masivo, lo que las hace realmente increíbles para digerir estos largos avisos."
"Así que el problema se vuelve cada vez más grande, Nvidia simplemente domina por completo."
"Pero la siguiente fase, sin embargo, esta fase crítica, la fase de decode, es la fase de escritura, ¿verdad?"
"Así que el modelo comienza a generar una respuesta, le haces una pregunta y su respuesta, un token a la vez."
"Y luego, para elegir el siguiente token, para elegir la siguiente palabra, tiene que mirar hacia atrás a todo lo que ya ha dicho para que no alucine."
"El problema es que esto está increíblemente limitado por el ancho de banda de la memoria."
"Y en nuestra arquitectura, hace mucho tiempo, tomamos estas decisiones de diseño desde el primer día."
"Y así, lo que hicimos fue tomar un enfoque arquitectónico muy diferente, tomamos una tecnología de proceso muy conservadora. No estábamos empujando los límites de la física."
"Y usamos mucho de lo que se llama SRAM. Así que memoria en el chip para que pudiéramos hacer esta cosa de decode tan bien o mejor que los demás."
"Y así, ahora cuando juntas estas dos cosas, simplemente creo que va a crear una gran aceleración en la capacidad de toda esta capa de infraestructura para volverse mucho más barata y mucho más valiosa, lo que sospecho que tendrá mucho más tirón de desarrolladores, y habrá muchas más aplicaciones siendo construidas, miles de millones y miles de millones de más personas usándolo."
52
🤔

Kevin Bass PhD MS4 ene, 17:25
He analizado los datos. De nuevo.
He hecho un mapa. De nuevo.
La imagen ahora es aún más CLARA.
Los estados sin requisitos de identificación de votantes tienen 16 veces más probabilidades de ofrecer beneficios de bienestar a inmigrantes ilegales que los estados que requieren identificación (67% frente a 4%, p<0.0001).
Los Demócratas están importando y pagando a ilegales por votos.
Detalles👇

49
Parte superior
Clasificación
Favoritos
