Menéame: comentarios [4032998]

#30 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

MisturaFina — Sat, 01 Mar 2025 11:14:34 +0000

Un bittorent como file system. Maravilloso! Esto es libertad. Y viene de un pais comunista.

» autor: MisturaFina

#29 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

daTO — Sat, 01 Mar 2025 08:03:53 +0000

#3 he pensado lo mismo!!!!

» autor: daTO

#28 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

inovercy — Fri, 28 Feb 2025 21:03:56 +0000

#14 Creo que se están mezclando temas. Sobre le tema de acceso a la memoria RAM, esto se soluciona con RDMA (Remote Direct Memory Access). Además, las redes con soporte RDMA te permiten hacer un bypass al kernel del sistema operativo, evitando así que la CPU te haga de cuello de botella, que es lo que suele pasar cuando se transfiere por red grandes volumenes de archivos.

Tengo testeado, precisamente en ambientes con GPU's instancias de AWS con interfaces de 100gbps, y las cpu se saturan (muchas cpus) cuando se llegaba a una tasa de 70gbps. No obstante, si se usa RDMA esto se evita. ¿Problema? Que S3 no soporta RDMA y para que esto sea efectivo lo necesitas en ambos lados de la comunicación, tanto el que lee como el que envía.

Sobre problemas con los filesystem. Nvidia ya tiene su propia tecnologia de GDS para leer de disco de forma directa, saltándose las CPU's.

Para entornos distribuidos lo que se suele usar son sistemas como Lustre (ya tiene sus años) o WekaFS (más nuevo pero cerrado) que hacen uso de RDMA y pueden alimentar GPUs de forma bastante rapida. De hecho, Weka tiene compatibilidad con GDS de Nvidia para esto precisamente.

Yo creo que a los que le va a impactar este nuevo open source es precisamente a Weka, porque es competencia directa, pero Open Source, y moderno.

» autor: inovercy

#27 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

inovercy — Fri, 28 Feb 2025 20:54:48 +0000

#18 No. Sistemas de archivos distribuidos de alto rendimiento ya había antes que esto, como Lustre. A quien le va a afectar es a Weka, otro sistema similar pero cerrado, que también usa RDMA para alimentar gpus. Eso si, las licencias son caras, y esto viene gratis.

Ahora habrá que ver cómo de fácil es configurarlo, porque las infiniband y el hardware en general para RDMA barato no es.

» autor: inovercy

#26 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

galleto — Fri, 28 Feb 2025 20:44:36 +0000

Nueva versión del emule actualizada?

» autor: galleto

#25 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

aironman — Fri, 28 Feb 2025 20:26:30 +0000

#22 la serie es un producto de entretenimiento, creado por gente que ha estado en el mundillo, eso se nota.

Por comentar, la internet distribuida está creada, pero no tiene tracción. A nadie le interesa.

» autor: aironman

#24 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Canha — Fri, 28 Feb 2025 20:25:58 +0000

#12 pues yo no entiendo el bajón. Esto me recuerda al fake que se dio cuando las acciones de Activision se desplomaron porque una empresa que era Activision tv era una empresa criminal en malasia.
Lo que hicieron en deepseek fue una barbaridad de complejo, pero siguen usando gráficas nvidia, sencillamente porque son las mejores.
Hackearon las gráficas para descargarlas pero siguen usándolas y necesitandolas.

» autor: Canha

#23 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Tkachenko — Fri, 28 Feb 2025 20:17:23 +0000

#21
Europa es la único con las leyes, el criterio y la autoridad moral ahora mismo como para poner a disposición del público mundial una IA en la que confiar, privada y segura, con tus derechos a salvo.
Por favor.... pregunta en Gaza por la autoridad moral de Europa

P d: no te meto otro negativo porque no puedo

» autor: Tkachenko

#22 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Eibi6 — Fri, 28 Feb 2025 19:27:05 +0000

#6 se que es una barbaridad té debería dar una pista de que ya sabía que no tiene nada que ver

Él caso que no me refiero al "producto" en sí, si no al ecosistema y él hype alrededor; toda esta movida de las IAs me recuerdan muchisimo a la serie

» autor: Eibi6

#21 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Artok — Fri, 28 Feb 2025 19:06:56 +0000

#2 yo creo que la ia será europea o no será. Europa es la único con las leyes, el criterio y la autoridad moral ahora mismo como para poner a disposición del público mundial una IA en la que confiar, privada y segura, con tus derechos a salvo.

Ayer estaba con el grok, que me gusta más que ChatGPT, pero no te sientes libre al preguntar, es incómodo sabiendo quién guarda y posee tus datos

» autor: Artok

#20 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

emdi — Fri, 28 Feb 2025 18:48:26 +0000

#14 Esto es un sistema de ficheros. Almacenamiento. Discos. No acceso a memoria.

» autor: emdi

#19 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

pedrobotero — Fri, 28 Feb 2025 18:47:18 +0000

Recordemos que está Deepseek esta semana en su "semana de adviento", están presentando cada día o regalando a la comunidad alguno de sus descubrimientos durante seis días.

x.com/deepseek_ai?t=JQx-EWW1okZBod1LcAwn6w&s=35

» autor: pedrobotero

#18 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

autonomator — Fri, 28 Feb 2025 18:34:44 +0000

¿Quizás esto sea el inicio de un nuevo Internet lejos de la mano imperialista?

» autor: autonomator

#17 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

capitan.meneito — Fri, 28 Feb 2025 18:31:09 +0000

#15 Iaéame

» autor: capitan.meneito

#16 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Aluflipas — Fri, 28 Feb 2025 18:19:57 +0000

#12 "Cuando la necesidad aprieta hay que agudizar el ingenio..."

Justamente eso lo explican muy bien, a nivel histórico, en el canal de Dot CSV Lab:

Minuto 20:09 y antes el desarrollo:
youtu.be/X2o779o5PoE?si=QFySYzZ-Dej0nweN&t=1209

» autor: Aluflipas

#15 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

sieteymedio — Fri, 28 Feb 2025 18:07:15 +0000

#8 Rabiéame.

» autor: sieteymedio

#14 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

giputxilandes — Fri, 28 Feb 2025 18:07:08 +0000

Esto es un gran avance en lo relativo a IAs. En contra de lo que la gente piensa, es el acceso a memoria y no la capacidad de procesamiento el actual cuello de botella.

» autor: giputxilandes

#13 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

ur_quan_master — Fri, 28 Feb 2025 17:59:57 +0000

#10 con c++ se hacen cosas increíbles... Y es increíble que se puedan hacer cosas con c++

» autor: ur_quan_master

#12 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

elgranmago — Fri, 28 Feb 2025 17:53:24 +0000

Y ésto amigos es gracias al embargo de EEUU a China. Cuando la necesidad aprieta hay que agudizar el ingenio para intentar jugar con las herramientas que tienes. Ahora resulta que para enseñar a una IA no es necesario tener los últimos sistemas sino optimizar los existentes.

Esta gente ha pasado olímpicamente de la capa CUDA de las gráficas de NVIDIA y se han picado código PTX (muy bajo nivel, casi ensamblador) directamente x.com/Jukanlosreve/status/1883304958432624881 para acelerar todo el proceso. Por ésto fue por lo que NVIDIA cayó 589 mil millones de dólares, que se dice pronto. ( finance.yahoo.com/news/nvidia-stock-plummets-loses-record-589-billion- )

Aquí todos los papers publicados hasta el momento ( huggingface.co/collections/Presidentlin/deepseek-papers-674c536aa6acdd )

» autor: elgranmago

#11 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

--419859-- — Fri, 28 Feb 2025 17:49:55 +0000

#4 ¿Has llegado hasta donde pone "distribuido"? Porque la pregunta está fuera de lugar, y eso sin meterme en el "alto rendimiento".

» autor: --419859--

#10 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Torrezzno — Fri, 28 Feb 2025 17:38:49 +0000

Tiene buena pinta. C++ aún mola

» autor: Torrezzno

#9 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

mirav — Fri, 28 Feb 2025 17:31:36 +0000

#4 yo daba una docena de discos duros si sacan algo como ceph pero algo mas humano

» autor: mirav

#8 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

focamonje — Fri, 28 Feb 2025 17:27:22 +0000

Chinéame

» autor: focamonje

#7 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

omegapoint — Fri, 28 Feb 2025 17:26:32 +0000

#5 #4 ¿Dónde deja esto mis archivos?

» autor: omegapoint

#6 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

aironman — Fri, 28 Feb 2025 17:23:18 +0000

#3 Nada, no tiene nada que ver. Pied Piper era un algoritmo de compresión que derivó en un intento de internet distribuida.

» autor: aironman

#5 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

HaCHa — Fri, 28 Feb 2025 17:18:46 +0000

¿Dónde deja esto a Linus Torvalds?

» autor: HaCHa

#4 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

kokona — Fri, 28 Feb 2025 16:28:08 +0000

¿donde deja esto a btrfs?

» autor: kokona

#3 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

Eibi6 — Fri, 28 Feb 2025 15:57:40 +0000

Se que es una barbaridad lonque voy a decir pero todo esto de DeepSeek me recuerda muchisimo a Pied Piper{troll}

» autor: Eibi6

#2 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

pedrobotero — Fri, 28 Feb 2025 15:40:25 +0000

Ya, pero... y Tiananmen que, eh, eh, eh???

Al final van a ser los chinos los que le den una oportunidad a Europa para no quedarse atrás en esto de la IA, espero que lo aprovechemos.

» autor: pedrobotero

#1 Nuevo sistema de archivos distribuido de alto rendimiento de DeepSeek

a69 — Fri, 28 Feb 2025 15:17:48 +0000

Genial! Tengo unos cuantos teras de pelic.... archivos para compartir.

» autor: a69