单人用 Go 自研本地 GUI 系统:LLM 生成矢量代码绘制全部像素

Wix86 · reddit · 2026-09-24

一位研究者展示了自研 GUI harness 项目(灵感类 Minecraft):目标是让用户或 LLM 用 7 个简单矢量函数(Rectangle/Circle/Line/Image/Text/List/Div)构建复杂世界与应用,摆脱聊天界面与云依赖。

技术要点

Go 编写,单个 exe 约 40MB(CPU 版),内存 70–100MB;内置 llama.cpp、whisper.cpp、omnivoice.cpp 与代码解释器,不用浏览器,自建文本与布局引擎
屏幕上每个像素都是 LLM 生成代码输出的矢量图形,组件(按钮/滑块/日历)全部可组合,完全可 hack
存储从零自建(无 OS 文件系统),记录每次变更可一键回滚用户或 Agent 的错误操作,可只保留最近一小时/天/周的历史
最简主义交互:无 Delete/Rename 按钮,按住 CTRL 用「画笔」选中布局元素再加语音/文字指令;Agent 不看屏幕,直接编辑代码与知识库
测试 gemma-31b、Qwen-27b、DeepSeek-V4-flash(fp8),希望未来 sub-20B 可用;可接 OpenRouter 测 SOTA 模型

作者称上下文工程完成约 50%,当前最大 UX 问题等 Agent 完成的等待时间,正通过改进上下文工程解决。

「编程与Agent」频道最新