XiaoChi der Chinesische IoT Open-Source ChatBot

[Andreas_Kunar]

Das chinesische „小智“ (Xiǎo Zhì) bedeutet wörtlich 小 (xiǎo) = „klein“ und 智 (zhì) = „Weisheit“, „Intelligenz“, „Verstand“ - auf Wienerisch so etwas wie “klane G’scheithaubn”.

Es sind open-source Projekte, ähnlich zu amazon’s Alexa, aber bloss völlig eigenständig von den Großkonzernen. Aber leider primär in Chinesisch mit etwas Englischunterstützung. Aber in den Funktionen weit leistungsfähiger - eine volle Sprach-/Bildergesteuerte KI. Siehe beispielsweise die Demo im youtube video https://www.youtube.com/watch?v=5PVOqjsLAxI&t=1086s

• https://xiaozhi.global/ bzw. XiaoZhi AI - ESP32 Voice Robot & XiaoZhi Dev Board | 小智AI.Dev ist eine gute Übersicht zur Technik
• Mit billigen ESP32-Mikrocontroller basierten Geräten als IoT/Smarthome Periperie. Vom Weckerähnlichen, kleinem Bildschirm über Smartwatch-ähnliche bis hin zu größeren Geräten und zukünftig Robotern.
• Auf diesen IoT-Geräten läuft adaptierte open-source Software von GitHub - 78/xiaozhi-esp32: An MCP-based chatbot | 一个基于MCP的聊天机器人 - mit lokaler Spracherkennung bzw. Sprachausgabe, Touch-Bedienung,…
• Und einem open-source Server-Backend auf Basis GitHub - xinnan-tech/xiaozhi-esp32-server: 本项目为xiaozhi-esp32提供后端服务，帮助您快速搭建ESP32设备控制服务器。Backend service for xiaozhi-esp32, helps you quickly build an ESP32 device control server.

Ich (Andi Kunar) schau mir das gerade an, habe mir ein paar ESP32-Boards dazu gekauft und versuche gerade, diese zum Laufen zu bringen. Tommi interessiert sich auch dafür und wir sehen uns nun gemeinsam ein paar weitere Geräte an (der semaf.at hat auch einiges lokal dazu im Programm).

Es müsste eigentlich auch möglich sein, die Geräte um deutsche Sprachunterstützung zu erweitern, ev. in den HomeAssistant zu integrieren,…

Die Programmierung erfolgt auf den ESP32-Geräten in C/C++ mit Arduino Software bzw. ESP-IDF (und ggf. Adrunio als ESP-IDF Komponente). Diese Mikrocontroller sind extrem mächtig, können lokale KI-Vorverarbeitung,… - die Programmierung ist aber etwas komplex und lernintensiv.

Mitstreiter(innen) in den Experimenten wären uns SEHR willkommen! Bei Bedarf gibts auch gerne Clubabende order Workshops dazu.

[Andreas_Kunar]

Mein erstes funktionierendes XiaoChi Gerät - ein Uhrengroßes Waveshare AMOLED 1.8 um ca. EUR40. Leider nur mit Chinesisch und Englisch als Sprache, und mit dem Test-Backend von https://xiaozhi.me.

Ich hab die Software fürs Gerät erfolgreich mit VSCode + ESP-IDF + GitHub - 78/xiaozhi-esp32: An MCP-based chatbot | 一个基于MCP的聊天机器人 + Copilot (für das Lösen der ESP-IDF Versionskonflikte mit V6 statt V5) zusammengebaut. Alles am Mac unter Ubuntu arm64 Linux.

[Martin_Weissenboeck]

Interessiert mich auch. Wie wäre es mit einem Bastelabend, so etwa wie wir das mit dem esp32 gemacht haben?

[Andreas_Kunar]

Ich würde gerne die meisten monatlichen Hub KI Abende zu diesem Thema gestalten. Mehr Details dazu sollte ich bis nächste Woche haben. Sobald ich Konkretes habe, werde ich hier posten.

[Thomas_Gessl]

Ja, genau das ist die Idee.

• Niederschwelliger Einstieg um ESP32 Chips mit KI-Funktionen zu “füttern” (sprich “Einsteiger-Bastelabend”)
• großes Potential das auch Professionelles entstehen lassen kann
• Modernste Technik, das einen großen Interessentenkreis und vor Allem auch Jüngere anspricht
• Mit dem Ziel, die dahinterliegende KI bei 4future zu hosten und unabhängig von den großen US-Playern zu sein

Und last but not least, auch Szenarien aufzuzeigen, die bei unseren Themen anknüpfen können, zB Home Assistant - Integration etc.