Repository navigation
HER Hack-Astron #4|Domux 智能家居真实使用案例挑战赛 #20
Copy link
Copy link
Closed
Labels
HER Hack-AstronHER Hack-Astron 女性开发者开源挑战计划HER Hack-Astron 女性开发者开源挑战计划bounty带公开奖励的悬赏活动带公开奖励的悬赏活动good first issueGood for newcomersGood for newcomershelp wantedExtra attention is neededExtra attention is neededreward带现金/实物奖励的任务带现金/实物奖励的任务
Description
HER Hack-Astron #4|Domux 智能家居真实使用案例挑战赛
把 Domux 的真实运行过程沉淀为可复现、可讨论的智能家居案例。
本期挑战要求参与者从 Hugging Face 获取 iFlytekOpenSource/Domux,完成一次真实的推理、评测、量化、训练或集成实验,并把完整案例发布到 Domux 官方 Hugging Face Discussions。随后通过 PR 收录到本仓库 cases/ 目录。
- Hugging Face 模型:https://huggingface.co/iFlytekOpenSource/Domux
- 唯一有效公开渠道:https://huggingface.co/iFlytekOpenSource/Domux/discussions
- 案例框架与自动校验:https://github.com/iflytek/domux/pull/15(已合并进 main)
- 案例说明:https://github.com/iflytek/domux/blob/main/cases/README.md
- 案例模板:https://github.com/iflytek/domux/tree/main/cases/TEMPLATE
赛程
- 开放提交:2026-08-24
- 赛事比拼:8 月 24 日–8 月 30 日
- 评奖与奖励发放:8 月 31 日–9 月 6 日
赛题方向
任选一个方向,也可以组合:
- 官方 Quick Start 复现:vLLM 或 SGLang 获取、部署和结构化输出
- 复杂智能家居指令:多设备、多房间、多楼层、多动作和上下文省略
- 鲁棒性:方言、ASR 噪声、中英文混合、纠错、否定和长尾设备名
- 无障碍:老人、儿童、视障等真实人群的控制语义与确认流程
- 开放评测:运行 4,057 条测试集,分析 Slot F1、Intent F1、格式合规和错误簇
- 端侧效率:量化、吞吐、首 token 延迟、显存/内存与硬件适配
- 安全边界:高风险动作、歧义检测、二次确认和安全拒绝
- 数据与训练:合法数据、难例挖掘、SFT/GRPO、奖励函数与分组评测
- 真实集成:把 Domux 接入一个可复现的家居控制、Agent 或自动化流程
- 前后对比:与规则系统、其他模型或原始 Gemma 在同一方法下对比
提交方式
-
在 Hugging Face 模型页同意 Gemma 使用条款。
-
安装并登录官方 HF CLI:
pip install -U huggingface_hub hf auth login -
获取并记录固定 revision:
hf download iFlytekOpenSource/Domux --revision <commit-sha> -
完成真实实验,保留可公开的运行日志、输入、原始输出、环境和截图。
-
在 Domux Discussions 新建公开帖子,标题:
[HER Hack-Astron #4] <案例名称> -
Fork iflytek/domux,把 cases/TEMPLATE 复制为 cases/,填写全部字段。
-
channels 只能附形如下面的 Discussion 直达链接:
https://huggingface.co/iFlytekOpenSource/Domux/discussions/<编号> -
发起 PR,标题:
[case] <case-id> - <一句话结果> -
PR 描述写 Ref HER Hack-Astron #4|Domux 智能家居真实使用案例挑战赛 #20,不要用 Closes;单个案例不能关闭整个活动。
验收标准
全部满足才是有效案例:
- 真实使用。 提供完整 tested revision 和已脱敏的 snapshot/产物信息。
- 真实运行。 有代表性输入、原始 Domux 输出,以及截图或日志证据。
- 唯一发布渠道。 完整案例发布在指定 Domux Discussion;GitHub-only 或其他平台-only 不接受。
- 可复现。 记录 runtime 版本、硬件、精度/量化、参数和必要脚本。
- 指标诚实。 准确率、延迟、显存或吞吐必须写样本量、方法、warm-up 和环境。
- 包含边界。 不只展示成功样例,也说明失败、限制或安全风险。
- 原创与许可。 使用自己的实验和文字;新增数据必须写明许可或授权。
- 隐私与安全。 不泄露 HF token、个人缓存路径、私有家庭数据、内网地址或业务数据。
- 不提交权重。 GitHub PR 不得包含 safetensors、GGUF、PT、PTH 或 CKPT 权重文件。
- 账号信誉。 不接受过去 30 天在 3 个及以上无关 bounty 仓批量开 PR 的账号。
团队参赛时,鼓励女性贡献者占实际 commits 与 Co-authored-by 记录的至少 50%。
评审维度
- 真实使用与运行证据:25%
- 可复现性与技术完整度:25%
- 智能家居场景价值与创新:20%
- 指标、失败分析与安全意识:20%
- Discussion 对后续用户上手的帮助:10%
奖项设置
优胜奖(1 名)
- 现金奖励:500 元
- 荣誉称号:HER Hack-Astron Add SFT+GRPO interpretability report and sync COMMAND_SPEC #4 Champion
优秀贡献奖(若干)
- 奖励内容:Astron 周边礼包 / Loomy 5000 积分 / 瑞幸咖啡券
联系我们
- 合作 / 出题 / 领奖邮箱:ifly_opensource@iflytek.com
- 企业微信小助手(出题咨询、领奖信息)和开发者交流群二维码:见 HER Hack-Astron 合作伙伴招募页「联系我们」
- 获奖名单公布后,请通过上述邮箱或企业微信小助手发送领奖信息。
注意事项
- 模型受 Gemma Terms of Use 与 Prohibited Use Policy 约束
- 不要把 HF token 写进命令、截图、Discussion 或 PR
- 本活动不要求公开本地完整缓存路径,用户名部分必须打码
- 可以使用云 GPU,但需披露硬件类型和计费/免费环境
- 案例框架 PR feat: add Domux HER Hack-Astron #4 case framework #15 已合并进 main,cases/ 目录与自动校验脚本均已可用,可直接按模板提交案例 PR
欢迎用真实运行和真实经验,把 Domux 的下一次实验变成更容易复现的案例。
Reactions are currently unavailable
Metadata
Metadata
Assignees
Labels
HER Hack-AstronHER Hack-Astron 女性开发者开源挑战计划HER Hack-Astron 女性开发者开源挑战计划bounty带公开奖励的悬赏活动带公开奖励的悬赏活动good first issueGood for newcomersGood for newcomershelp wantedExtra attention is neededExtra attention is neededreward带现金/实物奖励的任务带现金/实物奖励的任务
Activity
[-]HER Hack-Astron #4|Domux Hugging Face 真实下载与智能家居案例挑战赛[/-][+]HER Hack-Astron #4|Domux 智能家居真实使用案例挑战赛[/+]markorning-design commentedon Aug 23, 2026
FenjuFu commentedon Aug 24, 2026
这条"提交"不符合本悬赏(HER Hack-Astron #4)的任何一条验收标准,已作为 spam 处理:
cases/<case-id>案例文件。如果你确实做了真实的 Domux 使用/评测案例,欢迎按 issue 里的模板另开一个规范的案例 PR(附可复现步骤 + HF Discussion 链接),我会照标准审核。此评论予以隐藏。
[case] add Domux 4057 RTX 3090 evaluation (1/2)
[case] add sanitized evaluation artifacts (2/2)
Kencoze commentedon Aug 25, 2026
@FenjuFu 你好,参与 #4 的团队 here(Kencoze)。开工前先同步一下参赛方向,如有偏差希望提前得到指正:
提案:Domux MCP Server — 把 Domux 封装为任何 Agent 都能调用的智能家居基础设施
不做重复性能评测(已有案例覆盖),我们把 Domux 从「一个模型」升级为「标准能力层」:
parse_command/batch_parse/health_check),任何支持 MCP 协议的 Agent 可直接调用 Domux 的结构化解析能力对应赛题方向:真实集成(MCP + HA 双层)+ 安全边界(认证/审计/高危确认)+ 无障碍确认流程(Guest/Service-Agent 权限设计天然覆盖)。
交付物:
cases/案例 PR + HF Discussion 完整案例 + MIT 开源 repo。骨架代码已完成并通过 92 项冒烟断言,8/26 起提交增量进展,8/29 前交最终案例。方向有问题请随时指出,感谢!FenjuFu commentedon Aug 26, 2026
@Kencoze 感谢提前同步方向,思路完全对题,可以放手做。几点确认和建议:
方向判断:把 Domux 从"一个解析模型"升级为"标准能力层",正是 #4 想看到的——真实集成 + 安全边界 + 无障碍三条主线你都覆盖到了,而且不重复跑性能评测,这点很好。
评审会重点看的几处(供你打磨):
cases/<case-id>schema:提交 PR 前先对齐挑战工作流要求的字段——之前有一个自动提交就是没过 schema 校验被我退回,别踩同一个坑。parse_command/batch_parse/health_check的入参/出参 schema 越清晰越好,方便任意支持 MCP 的 Agent 直接接入。关于风险评分 / 保险评核 API:这块很有想象力,但注意别让它冲淡核心的"智能家居真实使用案例"叙事——建议作为进阶模块呈现,核心案例仍落在真实设备控制链路上。
期待 8/29 前的最终案例,过程中有任何卡点随时在这里 at 我。加油!
yaegerbomb42 commentedon Aug 28, 2026
/attempt
FenjuFu commentedon Aug 31, 2026
欢迎参赛。本期允许多个团队并行
/attempt,最终按验收标准择优:真实的推理/评测/量化/训练/集成实验 + 完整案例发布到 Domux 官方 Hugging Face Discussions + 通过 PR 收录到本仓库cases/目录。开工前如想同步方向,欢迎在此贴出提案,我会尽量提前给反馈。c45: dataset 386->387 — +1 intake row (iflytek/domux#20 HF-model hack…
[case] domux-4057-rtx3090-eval - 4057-sample BF16 evaluation and fail…
FenjuFu commentedon Sep 2, 2026
🎉 HER Hack-Astron #4 评选结果与领奖信息 / Results & Prize Claim
感谢每一位参与 HER Hack-Astron #4 的贡献者!大家围绕 Domux 的真实推理、开放评测、CPU/GPU 部署、鲁棒性、安全闸门与 Home Assistant / MCP 集成,提交了可复现的实验、原始输出与失败分析。
经社区 maintainers 综合评审,现公布本期评选结果:
🏆 优胜奖 / Champion
Hugging Face Discussion #7 — LumiQiao;对应 PR #29 — @qrx-joe
domux-seniorsafe胜出并不是因为分数最好看,恰恰相反——它是本期唯一完成“先冻结、后运行、再如实公开不理想结果”三轮递进验证的案例。第二轮修复归一化拼接缺陷后,没有只挑成功样例,而是重新跑完全部数据,将 normalized exact match 从 75.7% 提升到 85.7%;同时用 raw 管线 80/80 条输出与首轮逐字节一致,反证两次实验确实使用同一模型与同一配置。这利用了 greedy decoding 的确定性,是很聪明的复现性校验。
第三轮先将 160 条挑战集、评测协议和 SHA-256 指纹冻结,再完成 320 次真实 CPU 推理。面对 raw 55.1%、normalized 61.8%,以及 5/24 输入策略错误放行、2/24 blocked-label 请求仍成为输出候选等不理想结果,作者仍完整发布,并明确拒绝修补冻结后才发现的缺陷。案例还主动把“规则层安全 100%”标注为 true by construction, not a model metric,拆掉了一个本可被包装成模型能力的漂亮指标。
加上全程 CPU-only,这个案例对 Domux 的低成本部署、可审计预处理和上线前安全评估最有直接价值。
🌟 优秀贡献奖 / Outstanding Contributions
domux-4057-full-eval:在 RTX 4090D 上完成官方 4,057 条全量 BF16 与 NF4 对比,公开 97.58% / 93.57% 准确率、失败簇和“省显存但不提速”的部署边界domux-4057-rtx3090-eval:在消费级 RTX 3090 上复现 4,057 条全量评测,并把正确率、并发请求延迟、单请求延迟和字段级失败簇分开报告domux-safety-gate:从只看输入推进到检查全部七个输出字段;84 条 held-out 结果与 18/28 false interventions 均如实保留,没有在冻结测试后继续调参domux-clarify-commit:96 次 BF16 推理接入真实 Home Assistant REST 状态变更,完成 3/3 次精确提交并在 dispatch 前拒绝 1/1 次真实状态漂移,同时保留原始 guarded v1 的 FAIL 结论domux-mcp-server:探索 Domux MCP 标准能力层、四级身份认证、高危二次确认、审计日志、风险评分和保险评核 API 的完整集成方向再次感谢以上所有获奖贡献者,以及每一位参与讨论、复现与测试的社区成员!
📌 仓库收录状态
以下案例已通过 CI、DCO、CLA 与维护者核验并合并:
以下获奖案例暂未收录;奖项决定不自动豁免仓库的硬性验收条件:
参与资格补充核验
按照本次活动的参与规则,若获奖贡献者尚未在 GitHub 或 Hugging Face Profile 中明确公开自我声明的性别或代词信息,请任选一种方式完成补充核验:
我们不会根据姓名、头像、外貌或其他信息推断性别。贡献者无需在本 Issue 的公开评论中披露敏感或个人信息。
领奖信息
请所有获奖贡献者通过邮箱或企业微信私下提交领奖信息,并务必注明:
请不要在 GitHub 公开评论中发布手机号、收件地址、收款方式等隐私信息。
优胜奖
Discussion #7 / PR #29 的现金奖励(500 元)获得者请提供可用的收款方式。
优秀贡献奖
请各位获奖者从以下奖品中选择一项,并提供对应信息:
联系方式
本期挑战赛就此收官,Issue 关闭。感谢大家用真实运行、冻结证据和诚实失败分析,为 Domux 留下可复现、可继续改进的案例!🚀
English summary: Thank you to everyone who contributed to HER Hack-Astron #4. Champion: Discussion #7 (LumiQiao) / PR #29 (@qrx-joe). Outstanding Contributions: PR #22 (@gebibd00-jpg), PR #23 (@posuizhiyu-maker), PR #24 (@yangmengze608-afk), PR #26 (@MittaPei), and PR #28 (@Kencoze). PRs #23, #24, #26, and #29 have been merged after CI, DCO, CLA, and maintainer review. PR #22 did not pass the account-reputation acceptance criterion; PR #28 still needs DCO and the referenced source/test/raw artifacts before repository inclusion. Award recipients should contact us privately by email or WeCom; do not post phone numbers, addresses, or payment details publicly. This challenge is now closed—thank you!
FenjuFu commentedon Sep 2, 2026
🚀 邀请参加 HER Hack-Astron #5
特别邀请本期所有案例参赛者继续参加第五期挑战:
@qrx-joe @gebibd00-jpg @posuizhiyu-maker @yangmengze608-afk @MittaPei @Kencoze
👉 HER Hack-Astron #5|Spark-X2.5 端侧智能体真实使用案例挑战赛
第五期面向 Spark-X2.5-4B / 1.7B,欢迎把本期积累的冻结评测、CPU/GPU 部署、失败分析、安全闸门与 Agent 集成方法继续带到新赛题中。可选择真实推理、智能体工作流、仓库级编码、1M 长上下文、多语言、量化、训练或对比评测等方向。
也特别邀请 Hugging Face 上的 LumiQiao(本期 Discussion #7 作者)继续参赛。期待在 Spark-X2.5 再看到大家真实、可复现、敢于公开失败的实验!