MulmoChat

MulmoChat

MulmoChat, sesli sohbeti, görüntü oluşturmayı ve web'de gezinme özelliklerini sorunsuz bir şekilde entegre eden, kullanıcıların zengin görsel ve etkileşimli içerik deneyimlerken doğal olarak konuşma yoluyla etkileşim kurmasına olanak tanıyan açık kaynaklı çok modlu bir AI sohbet arayüzüdür.
https://github.com/receptron/MulmoChat?ref=producthunt&utm_source=aipure
MulmoChat

Ürün Bilgisi

Güncellendi:Mar 31, 2026

MulmoChat Nedir

MulmoChat, eski Microsoft mühendisi Satoshi Nakajima tarafından geliştirilen ve geleneksel sohbet arayüzlerini yeniden tasarlayan çığır açan bir araştırma prototipidir. Geleneksel metin tabanlı sohbet uygulamalarından farklı olarak MulmoChat, GUI (Grafik Kullanıcı Arayüzü) ve NLUI (Doğal Dil Kullanıcı Arayüzü) birleştirerek çok modlu AI sohbet deneyimleri için yeni bir paradigmayı temsil eder. Proje açık kaynaklıdır ve çalışması için OpenAI ve Google Gemini API anahtarları gerektirir ve Windows, macOS ve Linux platformlarını destekler.

MulmoChat Temel Özellikleri

MulmoChat, geleneksel metin tabanlı iletişimi zengin görsel ve interaktif içerikle birleştirerek yapay zeka sohbet etkileşimlerinde devrim yaratan bir araştırma prototipidir. Sesli sohbet özellikleri, görüntü oluşturma, web'de gezinme ve kullanıcıların OpenAI, Anthropic, Google Gemini ve Ollama dahil olmak üzere birden fazla yapay zeka sağlayıcısı tarafından desteklenen, doğrudan tuval üzerinde dinamik görsel içerik deneyimlerken doğal konuşmalara katılabilecekleri çok modlu etkileşimler içerir.
Çok Modlu Etkileşim: Geleneksel yalnızca metin tabanlı sohbet deneyimlerinin ötesine geçerek, metin, ses, görüntü ve interaktif öğeleri tek bir konuşma arayüzünde sorunsuz bir şekilde birleştirir
Sağlayıcıdan Bağımsız Metin Oluşturma: Birleşik bir API arayüzü aracılığıyla birden fazla yapay zeka sağlayıcısını (OpenAI, Anthropic, Google Gemini, Ollama) destekleyerek esnek model seçimi ve entegrasyonu sağlar
Gelişmiş Görüntü Oluşturma: Özelleştirilebilir parametreler ve iş akışlarıyla FLUX gibi gelişmiş modelleri destekleyerek yerel görüntü oluşturma için ComfyUI ile entegre olur
Genişletilebilir Eklenti Mimarisi: Geliştiricilerin TypeScript sözleşmelerinden Vue görünümlerine ve yapılandırmalarına kadar eklentiler aracılığıyla işlevselliği genişletmelerine olanak tanır

MulmoChat Kullanım Alanları

İnteraktif Eğitim: Öğretmenler, sözlü açıklamaları gerçek zamanlı görsel yardımcılar ve interaktif öğelerle birleştirerek sürükleyici öğrenme deneyimleri oluşturabilirler
Tasarım İşbirliği: Tasarımcılar, yaratıcı süreci kolaylaştırarak gerçek zamanlı olarak görüntü oluşturup manipüle ederken konseptleri tartışabilirler
Sanal Turizm: Seyahat acenteleri, harita özellikleri, görüntü oluşturma ve doğal konuşmayı birleştirerek interaktif sanal turlar sağlayabilirler

Artıları

Birden fazla yapay zeka sağlayıcısı için destekle oldukça esnek
Zengin çok modlu etkileşim yetenekleri
Açık kaynaklı ve genişletilebilir mimari

Eksileri

Tam işlevsellik için birden fazla API anahtarı gerektirir
Çeşitli bağımlılıklarla karmaşık kurulum
Araştırma prototipi durumu, sınırlı üretim hazırlığını gösterebilir

MulmoChat Nasıl Kullanılır

Bağımlılıkları Yükleyin: MulmoChat için gerekli tüm bağımlılıkları yüklemek için 'yarn install' komutunu çalıştırın
Ortam Değişkenlerini Yapılandırın: Bir .env dosyası oluşturun ve gerekli API anahtarlarını ekleyin: OPENAI_API_KEY ve GEMINI_API_KEY zorunludur. İsteğe bağlı anahtarlar arasında GOOGLE_MAP_API_KEY, EXA_API_KEY, ANTHROPIC_API_KEY, OLLAMA_BASE_URL, COMFYUI_BASE_URL, COMFYUI_DEFAULT_MODEL ve COMFYUI_TIMEOUT_MS bulunur
Geliştirme Sunucusunu Başlatın: Geliştirme sunucusunu başlatmak için 'yarn dev' komutunu çalıştırın
Mikrofon Erişimine İzin Verin: Tarayıcıyı açarken, istendiğinde mikrofonunuza erişmesine izin verin
Sesli Sohbeti Başlatın: AI ile etkileşime başlamak için arayüzdeki 'Sesli Sohbeti Başlat' düğmesini tıklayın
İsteğe Bağlı: ComfyUI Entegrasyonunu Kurun: Yerel görüntü oluşturma için: 1) ComfyUI Desktop'ı yükleyin, 2) ComfyUI Desktop sunucusunu başlatın, 3) flux1-schnell-fp8.safetensors gibi uyumlu modelleri indirin, 4) Gerekirse ComfyUI ortam değişkenlerini yapılandırın
Çok Modlu Etkileşime Başlayın: Ses veya metin yoluyla AI ile konuşmaya başlayın. Sistem, konuşmanıza göre görüntüler oluşturabilir, haritalar görüntüleyebilir ve etkileşimli görsel içerik sağlayabilir

MulmoChat SSS

MulmoChat, çok modlu yapay zeka sohbet deneyimleri için yeni bir paradigmayı keşfeden bir araştırma prototipidir. Geleneksel metin tabanlı sohbet arayüzlerinin aksine, kullanıcıların doğrudan tuval üzerinde zengin görsel ve etkileşimli içerik deneyimleyerek doğal konuşmaya katılmalarını sağlar.

MulmoChat Benzer En Yeni Yapay Zeka Araçları

Folderr
Folderr
Folderr, kullanıcıların sınırsız dosya yükleyerek, birden fazla dil modeli ile entegre olarak ve kullanıcı dostu bir arayüz aracılığıyla iş akışlarını otomatikleştirerek özel AI asistanları oluşturmalarını sağlayan kapsamlı bir AI platformudur.
Peache.ai
Peache.ai
Peache.ai, kullanıcıların çeşitli AI kişilikleri ile flörtöz, esprili ve cesur sohbetler yapmalarını sağlayan bir AI karakter sohbet oyun alanıdır.
TalkPersona
TalkPersona
TalkPersona, sanal bir konuşan yüz ile doğal ses ve dudak senkronizasyonu yetenekleri aracılığıyla gerçek zamanlı insan benzeri konuşma sağlayan AI destekli bir video sohbet botudur.
Thaly AI
Thaly AI
Thaly AI, müşteri konuşmalarını ve potansiyel müşteri nitelendirmesini otomatikleştirerek işletmelerin satış operasyonlarını ölçeklendirmelerine yardımcı olan AI destekli bir satış asistanıdır.