新闻中心

TOMG-Bench:大语言模型开放域分子生成新基准

2025-02-18
浏览次数:
返回列表

TOMG-Bench:评估大语言模型开放域分子生成能力的新基准

科学家们开发了一个新的基准测试——tomg-bench,用于评估大型语言模型 (llm) 在分子领域的开放域生成能力。该基准测试旨在弥补现有分子-文本数据集的不足,更准确地评估 llm 在实际分子设计中的应用潜力。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

图片

项目资源:

  • 项目主页:https://www.php.cn/link/36e6bfe59546f6b2f2a4c16eebfac314
  • 数据集和测试脚本:https://www.php.cn/link/b61868418a7958262112355435af49f4
  • 预印本:https://www.php.cn/link/c2b0e140029533c81a1793e5930e29ed
  • Huggingface 数据集:https://www.php.cn/link/57a33a900c373d400a96043e9ef92461
  • PaperWithCode:https://www.php.cn/link/719c6c64efb8dbf088b2677dee1a2c2e

挑战与机遇:

传统的分子发现方法效率低且成本高。虽然图神经网络 (GNN) 等 AI 工具展现出潜力,但其泛化能力和生成特定性质分子结构的能力有限。LLM 强大的语言理解和生成能力为分子发现带来了新的机遇,但分子与文本数据的对齐仍然是一个挑战。现有数据集通常是目标导向的,无法满足化学家在实际工作中对模糊需求的多种解决方案的生成。

图片

TOMG-Bench 的设计:

TOMG-Bench 旨在评估 LLM 在开放域分子生成中的能力,更贴近实际应用场景。它包含三个主要任务,每个任务又细分为三个子任务:

  1. 分子编辑 (MolEdit): 添加、删除或替换分子中的官能团。
  2. 分子优化 (MolOpt): 优化分子的 LogP、MR 或 QED 值。
  3. 定制分子生成 (MolCustom): 根据原子数量、键数量或官能团生成分子。

每个子任务包含 5000 个测试样本,提供全面的性能评估。

图片

数据生成和评估指标:

TOMG-Bench 使用 Zinc250K 数据库和随机生成的方法创建测试用例。评估指标包括成功率、相似性、有效性以及新颖性(针对 MolCustom 任务)。为了综合评估,引入了平均加权成功率指标。

Glarity Glarity

Glarity是一款免费开源的AI浏览器扩展,提供YouTube视频总结、网页摘要、写作工具等功能,支持免费的镜像翻译,电子邮件写作辅助,AI问答等功能。

Glarity 131 查看详情 Glarity

图片

OpenMolIns 指令微调数据集:

为了提升 LLM 的性能,研究人员还开发了 OpenMolIns 指令微调数据集,包含不同规模的数据,涵盖所有九个子任务。

图片

实验结果与发现:

实验结果表明,开放域分子生成任务具有挑战性,即使是先进的 LLM 也存在局限性。开源模型的性能正在快速提升,模型能力与性能正相关,数据规模也对性能有显著影响。TOMG-Bench 揭示了 LLM 在分子领域的优势和不足,为未来的研究提供了方向。

排行榜 (Leaderboard):

TOMG-Bench 提供了模型性能排行榜,方便比较不同 LLM 的表现。

总结:

TOMG-Bench 为评估 LLM 在开放域分子生成能力方面提供了一个重要的基准,推动了 LLM 在分子发现领域的应用和发展。其开源的数据集和测试脚本为研究人员提供了宝贵的资源。

以上就是TOMG-Bench:大语言模型开放域分子生成新基准的详细内容,更多请关注其它相关文章!


# llm  # 铁岭网站优化费用多少  # 大连谷歌seo公司  # seo方面的文章  # 微信营销怎么推广产品的  # 域名购买年限与seo  # 白云酒店网站建设方案  # 智源  # 在实际  # 开发了  # 分子结构  # 文档  # 捷豹  # 是一个  # 等功能  # 句话  # 开源  # ai  # 工具  # git  # 产业  # 亳州网站建设找哪家  # 自产产品用于营销推广  # 河池口碑营销网络推广解决方案  # 山西关键词排名供应商 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: typescript中怎么引用js文件  微信最多可以加多少好友  电脑如何查看固态硬盘  python 如何执行linux命令  iphone拍电子屏有横条如何解决  2025年哪个局域网聊天软件好用  苹果16如何预购  关系型数据库和非关系型数据库有哪些  夸克还原排版是什么意思  夸克投屏为什么那么卡  夸克高考为什么不靠谱  系统如何装进固态硬盘  哪个品牌有折叠屏手机卖  春运抢票需要什么软件抢  如何修改cad命令  typescript如何生成uuid  如何用命令连接mysql  db2命令中如何去到指定的副本  dos命令 如何将变量 作为路径的一部分  春运车站抢票和网上抢票  电脑5G怎么上传手机  adb 命令如何后台运行  为什么有的夸克带电  征信不好如何短期恢复  typescript怎么使用vue  typescript中如何定义json  位置控制单片机怎么用的  youtube受限模式是什么_youtube受限模式是什么意思  如何注释typescript  如何拍屏幕不出条纹详细方法  win10锁屏壁纸怎么换360锁屏壁纸吗  照相机上面power是什么意思  苹果电脑如何输入命令  怎么在项目中使用typescript  如何知道固态硬盘  折叠屏手机哪个牌子性价比高  域名解析后为什么要进行域名备案  怎么自学typescript  平板键盘nfc功能是什么意思  春运哪天抢票最好预约  如何正确使用固态硬盘  windows 如何连接ftp命令行  光刻机是干什么用的  花呗征信不好如何恢复 如何修复不良的花呗征信  苹果16哪些会降价的  tft单片机怎么写彩屏  哪些编程软件需用typescript  春运抢票软件哪个最好用  bored是什么意思  ssd固态硬盘如何选择 

搜索