Subred de Bittensor completó el preentrenamiento de LLM con 72 mil millones de parámetros, TAO subió 54.8% en las últimas dos semanas

Gate News Noticias, 16 de marzo, según información oficial, la subred Templar (SN3) de Bittensor completó el 10 de marzo el mayor entrenamiento descentralizado de LLM Covenant-72B en la historia. Covenant-72B es un modelo de lenguaje con 72 mil millones de parámetros, entrenado por el equipo Templar en la subred Bittensor 3, basado completamente en internet general, sin necesidad de centros de datos centralizados. El modelo obtuvo una puntuación de 67.1 en la prueba MMLU (sin muestras), superando en las mismas condiciones de evaluación a modelos de referencia centralizados como LLaMA-2-70B y LLM360 K2. Es el modelo de lenguaje colaborativo completamente sin permisos de mayor escala hasta la fecha, con más de 70 nodos diferentes contribuyendo con recursos de cálculo durante todo el proceso. El equipo ha publicado todos los pesos y puntos de control bajo la licencia Apache. Debido a esta noticia, Bittensor (TAO) y sus tokens de subred han experimentado un aumento general, con TAO subiendo un 54.8% en las últimas dos semanas. El token de la subred τemplar ha subido un 194% en los últimos 7 días, cotizando actualmente a 19.3 dólares.