VLLM
LazyLLM| Launched | |
| Pricing Model | Free |
| Starting Price | |
| Tech used | |
| Tag | Software Development,Data Science |
| Launched | |
| Pricing Model | Free |
| Starting Price | |
| Tech used | |
| Tag | Low Code,Mlops |
| Global Rank | |
| Country | |
| Month Visit |
| Global Rank | |
| Country | |
| Month Visit |
Estimated traffic data from Similarweb
EasyLLM - EasyLLM es un proyecto de código abierto que ofrece herramientas y métodos útiles para trabajar con modelos de lenguaje grande (LLM), tanto de código abierto como de código cerrado. Ponte en marcha de inmediato o echa un vistazo a la documentación.
LLMLingua - Para acelerar la inferencia de los LLM y mejorar la percepción de los LLM de información clave, comprime el indicador y KV-Cache, que logra una compresión de hasta 20 veces con una pérdida de rendimiento mínima.
StreamingLLM - Presentamos StreamingLLM: Un marco eficiente para implementar LLM en aplicaciones en tiempo real. Controla secuencias de longitud infinita sin sacrificar el rendimiento y disfruta de optimizaciones de velocidad de hasta 22,2x. Ideal para diálogos multironda y asistentes diarios.
OneLLM - OneLLM es su plataforma sin código de extremo a extremo para construir y desplegar LLM.