lightningpixel/modly
Modly
Modly هو مولد نماذج ثلاثية الأبعاد (3D) يعمل بالذكاء الاصطناعي محلياً، ويقوم بتحويل الصور ثنائية الأبعاد إلى شبكات (meshes) ثلاثية الأبعاد. إنها أداة تركز على الخصوصية وتعالج البيانات مباشرة على بطاقة الرسوميات (GPU) الخاصة بالمضيف باستخدام الاستدلال المسرع.
يعمل النظام كإطار عمل قابل للتوسيع لنماذج الذكاء الاصطناعي، مما يسمح بدمج إضافات النماذج الخارجية وملفات وقت التشغيل من مستودعات بعيدة. ويستخدم بنية إضافات (plugin) تعتمد على ملفات البيان (manifest) لإضافة طرق توليد جديدة عن طريق تحميل البيانات الوصفية والملفات من أنظمة التحكم في الإصدار الخارجية.
تتضمن مجموعة الأدوات واجهة سطر أوامر (CLI) لتشغيل سير عمل التوليد وتصدير أصول الشبكات (mesh assets) للأتمتة القابلة للبرمجة. كما يتميز بأنظمة إدارة النماذج لتتبع التنزيل، وحالة التحميل، وتدفقات الأحداث في الوقت الفعلي لنماذج الذكاء الاصطناعي المنشورة.
Features
- Image-to-Mesh Generation - Provides the core capability of converting 2D images into 3D polygonal meshes using local AI processing.
- Local 3D Generation Runtimes - Creates 3D mesh models from 2D images using AI models running locally on the user's GPU.
- AI Model Integrations - Allows the integration of custom AI models and generation methods via external repositories and manifests.
- GPU-Accelerated Inference - Executes AI model computations directly on the host GPU to ensure high performance and data privacy.
- 3D Asset Generators - Generates 3D meshes and textures from image inputs while maintaining all data on the local machine.
- Generative 3D Modeling - A desktop application that synthesizes 3D shapes and textures from images using local AI models.
- Inference Workflow Automations - Exposes 3D generation and mesh export processes through a command-line interface for scriptable inference workflows.
- 3D Generation Command-Line Interfaces - Provides a command-line interface for triggering 3D generation processes and exporting meshes for automated agents.
- GPU-Accelerated 3D Generation Tools - Provides a privacy-focused tool for generating 3D models from photos using local GPU acceleration.
- Remote Profile Loading - Downloads and integrates additional generation methods by fetching runtime files and profiles from external repositories.
- Manifest-Based Plugin Loading - Implements a manifest-driven architecture to load modular AI model extensions and runtime files.
- AI Model Management - Manages the lifecycle of local AI models, including downloading, loading, and monitoring deployment status.
- AI Command Line Automation - Automates the 3D generation and export pipeline through a dedicated command-line interface.
- Event-Driven Model Streaming - Utilizes real-time event streams to monitor the progress of AI model generation and deployment.
- Model Extension Modules - Supports modular model extensions to augment the system's generative 3D capabilities.
- 3D Design Workflow Automations - Automates 3D generation and mesh export workflows through a scriptable command-line interface.
- AI Model Deployment Monitors - Includes a system to track the download and loading status of AI models via real-time event streams.
- AI Tools - Tool for converting images to 3D models.
