张紫宸(Charlie Zhang)

张紫宸(Charlie Zhang)

你好,我是张紫宸

我曾是 Mira(前身为 Halo)的第一位全职员工。Mira 是一家位于旧金山的 AI 智能眼镜公司,获得了 General CatalystNaval Ravikant、Pillar VC、Soma Capital 和 Village Global 共 660 万美元投资。我在种子前轮阶段加入,参与公司从早期产品走到累计售出 3,000 多台的过程。

技术上,我搭建了基于 WebRTC 语音活动检测的实时语音转文字链路,用 TorchServe 部署自托管语音识别模型,并设计了可承载数百条并发 WebSocket 连接的 FastAPI 后端。我也负责智能体记忆系统,让眼镜能听懂对话、记住信息,并在需要时真正派上用场。

此前我在 Supercell AI Lab 工作。Supercell 开发了《荒野乱斗》《皇室战争》和《部落冲突》。我用大语言模型构建了可以实时生成分支剧情的 NPC 对话系统:角色有各自的性格和情绪,也会根据玩家的互动发展出新的故事。我负责 FastAPI 后端与 Google GenAI SDK 集成,将服务部署到 AWS Lambda,并接入 Unity C# 游戏客户端。

本科就读于密歇根大学安娜堡分校,主修计算机科学,并加入了文理学院的 Honors Program

欢迎通过邮件联系我:charliezhang325@gmail.com

这里也收录了我的书法摄影作品。

兴趣爱好
  • 智能体系统、长期记忆与 Code Mode 架构
  • 面向 AR 与可穿戴设备的端侧语音交互
教育经历
  • 计算机科学学士, 2022-2025

    密歇根大学安娜堡分校

项目

*
Mira Gen 1:拥有长期记忆的 AI 智能眼镜
🏆 最佳扩展现实(AR 与 VR) 🏆. Lightspeed 2026 Game Changers
Mira 是一款不带摄像头的 AI 显示眼镜,可以把现实对话变成可搜索的记忆,并提供实时回答、翻译和智能体自动化功能。眼镜重 39 克,配有双 MEMS 麦克风、双扬声器、私密双光波导显示屏和用于手势操作的智能戒指。作为公司的第一位全职员工,我负责实时语音转文字、自托管语音识别服务、FastAPI/WebSocket 后端和智能体记忆系统。
Mira Gen 1:拥有长期记忆的 AI 智能眼镜
越简单越好:小语言模型长思维链强化学习中奖励函数的选择

Luning Wang*, 张紫宸*, Junkuan Liu*.

我们比较了普通、余弦和动态三种奖励函数在小语言模型长思维链强化学习中的表现。实验中,设计最简单的普通奖励反而持续优于更复杂的方案,说明在激发小模型推理能力时,复杂奖励未必更有效。
越简单越好:小语言模型长思维链强化学习中奖励函数的选择
VTMo:基于混合模态专家的统一视觉触觉 Transformer 编码器

张紫宸, Peihao Li, Yuan Cheng.

VTMo 是一个模块化的视觉触觉 Transformer 编码器。它通过共享自注意力,以及针对单一模态和跨模态设计的专家网络,在双编码器的灵活性和融合编码器的准确率之间取得平衡。VTMo 支持纯视觉、纯触觉和视觉触觉融合任务,并在缩短训练时间、降低计算量的同时,在图像到触觉检索任务上取得了有竞争力的结果。
VTMo:基于混合模态专家的统一视觉触觉 Transformer 编码器
用单步树状思维知识蒸馏训练小语言模型

Anurag Renduchintala*, Adi Mahesh*, 张紫宸*, Zimo Si*, Shangjun Meng*, Samuel Fang*.

我们提出了单步树状思维框架,把多步推理压缩到一个结构化提示中,再通过知识蒸馏将大语言模型的推理能力迁移给参数量更小的模型。在 24 点任务中,这一方法显著提高了小模型的推理表现,实验结果超过 GPT-4o 和 GPT-4。
用单步树状思维知识蒸馏训练小语言模型
任意二维刚体的推动动力学学习

Art Boyarov*, 张紫宸*.

我们研究了任意二维刚体的推动动力学,并用 Franka Panda 机械臂在仿真环境中采集的数据训练神经网络。与浅层 MLP 相比,受点云模型启发的深层网络能更好地拟合不同形状物体的运动。将学习到的模型接入模型预测路径积分(MPPI)控制器后,系统可以完成闭环推动和避障。
任意二维刚体的推动动力学学习
GenHint:教你写代码的 AI 编程助手
🏆 最佳开发者工具荣誉奖 🏆. MHacks 17 Hackathon, 2024
和 GitHub Copilot 等直接补全代码的工具不同,GenHint 会生成带有 TODO 注释的代码骨架,并解释每个子问题。它使用托管于 Groq 的 Llama 3 70B,现已发布为 VS Code 扩展。
GenHint:教你写代码的 AI 编程助手
Meowtive:为治愈系游戏打造的自主 AI 角色
🏆 Supercell AI Hackathon 第五名 🏆
Meowtive 是一套用 Unity、LangChain 和 Google Gemini 构建的游戏 AI 系统。猫咪智能体会根据自己的性格、情绪和当前环境,自主决定去钓鱼、探索或做其他事情。
Meowtive:为治愈系游戏打造的自主 AI 角色
Collage:大学选课版 Pinterest
Collage 是为密歇根大学学生设计的 AI 选课与学业规划工具。学生可以用教育邮箱登录,根据兴趣和职业目标发现课程,让 AI 顾问协助排课,也可以分享课表并找到一起上课的同学。
Collage:大学选课版 Pinterest
MIA-Sort:高效排序染色质复合物的多重染色质互作分析工具

张紫宸, Minji Kim.

MIA-Sort 是一个 Python 生物信息学工具,用于从 Hi-C、Pore-C 等大规模数据中高效提取和排序染色质复合物。研究人员可以用它分析染色质环、条纹、喷流和枢纽等结构,从而研究环挤出机制。
MIA-Sort:高效排序染色质复合物的多重染色质互作分析工具

文章

*
密歇根大学 EECS 482 操作系统笔记

密歇根大学 EECS 482 操作系统笔记

多线程程序设计、同步原语和底层硬件机制的常用实现模式。正文为英文。

写给所有人的深度学习教程

写给所有人的深度学习教程

从 Transformer、BERT 和 GAN 讲到元学习、强化学习、模型压缩与异常检测。正文为英文。

奖项

MHacks 2024
最佳开发者工具荣誉奖
MHacks 是美国规模较大的学生黑客松之一,2024 年有来自北美多所大学的 550 多名学生参加。
密歇根大学
University Honors
本科六个全日制学期全部获得 University Honors。
密歇根大学
James B. Angell Scholar
连续两个及以上学期获得全 A;我在 2024 年和 2025 年两次获奖。
密歇根大学
William J. Branstrom Freshman Prize
授予第一学期成绩位列前 5% 的本科新生。

一些小事

  • 我的中文名是张紫宸。“紫”是紫色,“宸”原指帝王居所。我很喜欢这个名字里稳重又有志向的感觉。
  • 我在江苏张家港长大,曾就读于江苏省梁丰高级中学国际部,后来转学到美国密歇根州 Rochester Adams High School。
  • 我从小学开始练习中国书法。下面放了一些近年的作品,也会在 Instagram 上不定期更新。

摄影