¿Muy poco y demasiado tarde? Bertha LPU se une a la LPU ultrarrápida de Groq a medida que crece el desafío al gigante de GPU de Nvidia

¿Muy poco y demasiado tarde? Bertha LPU se une a la LPU ultrarrápida de Groq a medida que crece el desafío al gigante de GPU de Nvidia

Una startup de inteligencia artificial en Corea del Sur Hiper Axel Se asoció con la empresa de SoC basada en plataforma y el diseñador de ASIC SEMIFIVE en enero de 2024 para desarrollar Bertha LPU. Diseñado para la inferencia LLM, Bertha ofrece “bajo costo, baja latencia y características específicas de dominio”, con el objetivo de … Read more

Groq LPU (Language Processing Unit) performance tested – capable of 500 tokens per second

Groq LPU (Language Processing Unit) performance tested – capable of 500 tokens per second

A new player has entered the field of artificial intelligence in the form of the Groq LPU (Language Processing Unit). Groq has the remarkable ability to process over 500 tokens per second using the Llama 7B model.  The Groq Language Processing Unit (LPU), is powered by a chip that’s been meticulously crafted to perform swift inference … Read more

ChatGPT alternative Groq focus on high-speed responses

ChatGPT alternative Groq focus on high-speed responses

In the fast-paced world of artificial intelligence, a new ChatGPT alternative has emerged, promising to transform the way we interact with AI chatbots. Groq, a platform that’s gaining traction and on a mission to set the standard for GenAI inference speed, helping real-time AI applications come to life. Groq offers users a breakthrough in response … Read more