RepoAlerts

awslabs/ai-eval-studio

App

¿Es de fiar?

Nuestras comprobaciones no ven nada raro.

  • Estrellas de cuentas reales Sin datos

    Todavía no hemos comprobado si sus estrellas son falsas.

  • Activo Bien

    Último cambio hace 12 días.

  • Licencia Bien

    Apache-2.0: puedes usarlo gratis, también en un producto comercial. Conserva el aviso de licencia.

Comprobaciones rápidas con datos públicos. Ayudan, pero no son una garantía.

Qué es

Plataforma prototipo de evaluación de LLM de extremo a extremo. Subes un conjunto de datos en CSV o Excel, describes tu objetivo en un chat con un agente coordinador y el sistema ejecuta evaluaciones sobre modelos candidatos en Amazon Bedrock, optimiza iterativamente el prompt…

Para quién es

Ingenieros de ML y desarrolladores que evalúan prompts y modelos LLM en Amazon Bedrock y quieren un arnés de evaluación ejecutable en CI

Cómo usarlo

Instalación

cd backend && uv sync

Sacado de su README. Compruébalo allí antes de ejecutarlo.

Los instaladores, cuando el proyecto los publica, están en su última versión (release).

Descargas (si las hay)

Pide a tu IA que lo instale

Pega esto en Claude, ChatGPT o tu asistente de programación.

Ayúdame a instalar y configurar awslabs/ai-eval-studio en mi proyecto. Sigue su README: https://github.com/awslabs/ai-eval-studio. Explícame cada paso y comprueba que es seguro antes de ejecutar nada.

Curva de estrellas

393De 0 a 393 estrellas entre el 27 oct 2026 y el 18 nov 2026.

En el radar

18 nov 2026: #16
Mejor puesto: n.º 16, el 18 nov 2026. Entre los 100 primeros 1 de los últimos 32 días.

Su puesto entre los 100 primeros del radar, día a día, con el n.º 1 arriba. Los huecos son días en que estuvo fuera.

Logros

  • Mejor puesto en RepoAlerts: n.º 16, el 18 nov 2026

Alternativas

Proyectos parecidos que cita su ficha. Cada enlace busca en el directorio.

Recibe alertas de repos como este

Te escribimos cuando algo de Modelos e inferencia empiece a subir. Gratis, una vez por semana, solo lo que encaja.

Qué te llega: un email los lunes con los repos que encajan, nunca más. Mira el de la semana pasada. Privacidad

Para quien mantiene el repo

Pon esta insignia en tu README. Muestra el puesto del repo en el radar, se actualiza cada hora y enlaza a esta página.

[![awslabs/ai-eval-studio on RepoAlerts](https://repoalerts.com/badge/awslabs/ai-eval-studio.svg)](https://repoalerts.com/repo/awslabs/ai-eval-studio?ref=badge)
Compartir en X

  • hyperionaidev/smolmaxxing

    Un proyecto de investigación que ejecuta modelos de lenguaje grandes en dispositivos de bajo consumo, como cajas de TV y tablets antiguas. Parchea llama.cpp con kernels propios, menor uso de memoria y

    Modelos e inferenciaC · 971 estrellas · +970 esta semana · 14 días · HN 484 pts

  • NVIDIA/cuPotential

    Biblioteca CUDA-X para el cálculo eficiente de interacciones moleculares de los campos de fuerza estándar de dinámica molecular. Incluye un plugin para OpenMM con fuerzas no enlazantes, un integrador

    LibreríaModelos e inferenciaPython · 116 estrellas · +115 esta semana · 28 días

  • lalipa2003-arch/JailbreakHub

    Recopilación de prompts y técnicas presentados como capaces de eludir los filtros de seguridad de LLM, reunidos de foros en línea y redactados por los mantenedores. El README indica que están pensados

    RecursoModelos e inferenciaRoff · 579 estrellas · +294 esta semana · 51 días

  • n4ze3m/tiny-voca

    Un modelo de texto a voz en inglés de 4,5 millones de parámetros, con dos voces (F2 femenina y M2 masculina) a 24 kHz. Entrenado desde cero, funciona en CPU, con PyTorch, ONNX Runtime o en el navegado

    ModeloModelos e inferenciaPython · 697 estrellas · +697 esta semana · 3 días

  • higurashi-ai/Haru

    Un modelo de diálogo hablado de baja latencia y multilingüe, con comunicación full-duplex que escucha y habla a la vez en tramos de 133 ms a 7,5 Hz. Ofrece implementaciones en PyTorch, MLX (Apple sili

    ModeloModelos e inferenciaPython · 583 estrellas · +582 esta semana · 6 días

  • basetenlabs/deepseek-ultrafast

    Un motor de inferencia para DeepSeek-V4.1-Flash en GPU NVIDIA sm_100a y sm_103a, con contexto de 1M de tokens y compartición de caché KV entre servidores mediante RDMA, coordinada con Redis. Incluye u

    AppModelos e inferenciaRust · 472 estrellas · +472 esta semana · 22 días · HN 71 pts