Mochi Diffusion

Mochi Diffusion pone la potencia de Stable Diffusion directamente en tu Mac con Apple Silicon. En lugar de depender de interfaces web o entornos virtuales que consumen muchos recursos, Mochi Diffusion aprovecha el marco Core ML de Apple para un rendimiento y una eficiencia optimizados. Esto te permite generar imágenes de alta calidad de forma local, privada y con un consumo de memoria significativamente reducido. Si buscas una solución rápida, nativa y sin conexión para Stable Diffusion en macOS, Mochi Diffusion es la respuesta.

Características principales:

• Maximiza el rendimiento con Core ML: Utiliza la implementación de Apple de Core ML de Stable Diffusion, aprovechando al máximo el Neural Engine en los chips de Apple Silicon. Esto se traduce en velocidades de generación de imágenes rápidas y una huella de memoria mínima (tan baja como ~150 MB con el Neural Engine).

• Genera imágenes sin conexión: Crea imágenes completamente sin conexión, lo que garantiza que tus datos permanezcan privados y seguros. No se requiere conexión a Internet después de la configuración inicial del modelo.

• Admite múltiples técnicas de generación: Más allá del texto a imagen básico, Mochi Diffusion admite:

• Imagen a Imagen (img2img): Genera imágenes basadas en una imagen existente.

• ControlNet: Ejerce un control preciso sobre la generación de imágenes utilizando modelos de ControlNet.

• Incrusta metadatos en imágenes: Guarda automáticamente la información del *prompt* dentro de los metadatos EXIF de las imágenes generadas. Visualiza fácilmente estos datos directamente en la ventana "Obtener información" del Finder de macOS.

• Mejora la resolución de las imágenes con RealESRGAN: Convierte tus imágenes generadas a resoluciones más altas utilizando la tecnología integrada de mejora de la resolución RealESRGAN.

• Gestión automática de imágenes: Benefíciate de la funcionalidad integrada de guardado automático y restauración, gestionando los archivos de imagen generados sin problemas.

• Personaliza con tus modelos: Integra fácilmente tus propios modelos personalizados de Stable Diffusion Core ML. Mochi Diffusion está diseñado para funcionar sin problemas con modelos convertidos correctamente, evitando las trampas comunes de los modelos *pickled*.

• Experiencia macOS nativa: Creado con SwiftUI, Mochi Diffusion proporciona una verdadera experiencia macOS nativa, integrándose perfectamente con la apariencia del sistema operativo.

Casos de uso:

1. Prototipado rápido: Itera rápidamente en conceptos de imagen sin depender de servicios en la nube ni esperar el procesamiento remoto. Experimenta con diferentes *prompts* y configuraciones para refinar tu visión creativa en tiempo real. Ejemplo: Un diseñador de UX puede generar rápidamente múltiples variaciones de un elemento de la interfaz de usuario basándose en un boceto (img2img) y un *prompt* descriptivo.

2. Creación de imágenes sin conexión: Genera ilustraciones o recursos visuales en entornos con conectividad a Internet limitada o nula. Ejemplo: Un artista digital que viaja puede continuar su trabajo en un avión o en una ubicación remota.

3. Ajuste fino de ControlNet: Utiliza ControlNet para guiar con precisión la generación de imágenes para fines artísticos o técnicos específicos. Ejemplo: Un arquitecto puede generar variaciones del diseño de un edificio basándose en un plano de planta detallado (ControlNet) y un *prompt* de texto que describa el estilo deseado.

Detalles técnicos:

• Opciones de unidad de cálculo:

• CPU y Neural Engine: Proporciona un equilibrio óptimo entre la velocidad de generación y el uso de la memoria. Recomendado para la mayoría de los usuarios.

• CPU y GPU: Potencialmente más rápido en chips M1 Max, Ultra y posteriores, pero consume más memoria.

• Compatibilidad del modelo:

• Versión split_einsum: Compatible con todas las opciones de unidad de cálculo, incluido el Neural Engine.

• Versión original: Solo compatible con la opción de unidad de cálculo "CPU y GPU".

• Gestión de modelos:

• Carpeta de modelos predeterminada: ~/MochiDiffusion/models/ (personalizable en Configuración).

• Crea una subcarpeta dentro del directorio models para cada modelo y coloca los archivos del modelo Core ML convertidos dentro de esa subcarpeta. (Consulta la estructura de directorios de ejemplo en la información proporcionada).

• Primer uso del modelo: Al utilizar un modelo por primera vez, el Neural Engine puede tardar hasta 2 minutos en compilar una versión en caché. Las generaciones posteriores que utilicen ese modelo serán significativamente más rápidas.

Conclusión:

Mochi Diffusion te permite aprovechar todo el potencial de Stable Diffusion en tu Mac con Apple Silicon. Ofrece un rendimiento sin igual, capacidades sin conexión y una experiencia macOS nativa, lo que la convierte en la solución ideal para desarrolladores, artistas y cualquier persona que busque una herramienta de generación de imágenes potente y eficiente.