RepoTransBench:一个面向真实世界的代码库级翻译基准
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本研究提出RepoTransBench,以解决现有代码翻译基准无法满足真实编码需求的问题。研究表明,最佳语言模型的成功率仅为7.33%,经过迭代调试后提高至21%,显示自动代码库翻译的可靠性仍需提升。
🎯
关键要点
- 本研究提出RepoTransBench,以解决现有代码翻译基准无法满足真实编码需求的问题。
- RepoTransBench是一个针对代码库级别的真实世界代码翻译基准,并具有自动可执行的测试套件。
- 研究发现,最佳表现的语言模型在一次测试中的成功率仅为7.33%。
- 经过反馈进行迭代调试后,成功率提高至21%。
- 这表明自动代码库级翻译的可靠性仍需提升。
➡️