很多领域压根没有 benchmark——这种情况下,auto-research 到底该怎么设计?🤔
Mouna

🧑‍🍳 正在COOK @Bonjour!(全干COO的意思)

自己造一个 benchmark 确实是个常见的做法? 我的研究领域其实也比较难找到完全合适的benchmark,研一的一整年都是在做这个系统架构的研究,为此还特地发了个论文 就算是新的系统 or 结合的领域,也一定能找到值得参考的 ref ,把不同ref 里的benchmark 做个整理 -> 就得到了新的benchmark -> 然后在这个基础上继续实验 🤪
登录并发表评论

评论 · 0