新闻详情

新闻详情

首页 / 资讯中心 / 详情

美团 LongCat-2.0 评测:SWE-bench Pro 59.5 超越 GPT-5.5,国产算力全流程训练第一个,TaoToken 统一 Key 接入实测

发布时间:2026/11/13 22:09:37来源:尧图网络
美团 LongCat-2.0 评测:SWE-bench Pro 59.5 超越 GPT-5.5,国产算力全流程训练第一个,TaoToken 统一 Key 接入实测
1. 为什么我要复现 LongCat-2.0 的 SWE-bench Pro 成绩LongCat-2.0 是美团在 2026 年 6 月 30 日发布并开源的万亿参数 MoE 大模型总参数 1.6T、平均激活约 48B原生支持 1M 超长上下文。它最吸引我的两个点一是 SWE-bench Pro 拿到 59.5 分超过 GPT-5.5 的 58.6二是业界首个在 5 万卡国产算力集群上完成全流程训练与推理的万亿参数模型。对做代码 Agent 和仓库级编程任务的人来说这个组合值得亲手跑一遍。但真到自己复现时问题来了LongCat-2.0 官方 API、开源推理引擎、各种 Agent Harness 的接入方式各不相同每换一个模型就要重配一套鉴权和 base_url评测脚本里到处是硬编码的 key。我试过把 LongCat-2.0、DeepSeek V4、Claude 系列放在同一个评测流水线里对比结果光维护配置就花掉半天。这篇就聚焦一件事用 TaoToken 统一 Key 把 LongCat-2.0 接进来跑通一次 SWE-bench Pro 风格的评测调用。适合想快速验证 LongCat-2.0 编程能力、又不想为每个模型单独维护鉴权配置的开发者。下面给出 settings.json 和 config.toml 两套可复制骨架以及一次真实调用验证。2. TaoToken 前置统一 Key 与接入地址TaoToken 的作用是把多个模型的调用收敛到一套 OpenAI 兼容接口上。你只需要一个 Key、一个 base_url就能在 LongCat-2.0、DeepSeek、Claude 之间切换评测脚本不用改鉴权逻辑。先拿到统一 Key。访问控制台创建 API Key控制台入口https://taotoken.net/console?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentconsoleAPI Key 管理https://taotoken.net/api-keys?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentapi-keys创建后你会得到形如sk-xxxx的 Key。接入地址统一用https://taotoken.net/api注意这个地址不带任何查询参数直接作为 OpenAI SDK 的base_url使用。模型名按平台文档填写 LongCat-2.0 对应的标识下文配置里用longcat-2.0占位以你控制台实际模型列表为准。提示Key 只创建一次即可后续 settings.json、config.toml、评测脚本都复用同一个这是统一 Key 的核心价值。3. 可复制配置settings.json 与 config.toml不同工具读不同配置文件。Claude Code 类工具读settings.jsonCodex 类工具读config.toml。下面两套骨架都指向 TaoToken 统一入口你按自己用的工具选一套。3.1 settings.json 骨架{ env: { ANTHROPIC_BASE_URL: https://taotoken.net/api, ANTHROPIC_AUTH_TOKEN: sk-你的TaoToken统一Key, ANTHROPIC_MODEL: longcat-2.0, ANTHROPIC_SMALL_FAST_MODEL: longcat-2.0 }, permissions: { allow: [], deny: [] } }关键字段说明ANTHROPIC_BASE_URL指向 TaoToken 的 API 地址ANTHROPIC_AUTH_TOKEN填统一 KeyANTHROPIC_MODEL指定 LongCat-2.0。这样工具启动时就会把请求打到 TaoToken再由平台路由到 LongCat-2.0。3.2 config.toml 骨架model longcat-2.0 model_provider taotoken [model_providers.taotoken] name TaoToken base_url https://taotoken.net/api env_key TAOTOKEN_API_KEY [profiles.longcat] model longcat-2.0 model_provider taotoken配套设置环境变量避免把 Key 写进文件export TAOTOKEN_API_KEYsk-你的TaoToken统一Keyenv_key指向环境变量名工具运行时自动读取。这样配置文件可以进版本库Key 留在本地环境里。3.3 参数对照配置项settings.jsonconfig.toml作用接入地址ANTHROPIC_BASE_URLbase_url统一指向 TaoToken鉴权ANTHROPIC_AUTH_TOKENenv_key复用同一 Key主模型ANTHROPIC_MODELmodel指定 LongCat-2.0快模型ANTHROPIC_SMALL_FAST_MODELprofiles 内 model轻量任务降本4. 验证请求跑通一次真实调用配置写完别急着上评测先用一段最小脚本确认链路通。用 OpenAI SDK 直接打 TaoTokenfrom openai import OpenAI client OpenAI( api_keysk-你的TaoToken统一Key, base_urlhttps://taotoken.net/api ) resp client.chat.completions.create( modellongcat-2.0, messages[ {role: system, content: 你是一个代码审查助手。}, {role: user, content: 下面这段 Python 有并发安全问题吗\n\ncounter 0\ndef inc():\n global counter\n counter 1} ], temperature0.2 ) print(resp.choices[0].message.content)成功时你会看到模型返回对counter 1非原子操作的并发风险分析。这一步通了说明 Key、base_url、模型名三者都对。接着做一次 SWE-bench Pro 风格的仓库级任务验证。SWE-bench Pro 测的是模型解决真实 GitHub Issue 的能力核心是给模型一段仓库上下文加一个 Issue 描述让它产出补丁。你可以这样构造issue 仓库demo/utils Issueparse_date 函数在输入 2026-13-01 时抛 ValueError 期望返回 None 而不是崩溃。 请给出修复后的函数实现。 resp client.chat.completions.create( modellongcat-2.0, messages[ {role: system, content: 你是资深 Python 工程师只输出修复后的代码块。}, {role: user, content: issue} ], temperature0.1 ) print(resp.choices[0].message.content)实测下来LongCat-2.0 对这类边界条件修复的响应比较稳会主动加 try/except 并返回 None符合 Issue 预期。这就是 SWE-bench Pro 单条样本的最小复现形态——真实评测里只是把单 Issue 换成批量样本加自动打分。想直接在对话界面里对比 LongCat-2.0 和其他模型的输出可以用模型对话入口模型对话https://taotoken.net/model-chat?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentmodel-chat5. 本篇常见错排查接入过程里踩过的坑集中在这几类对照排查能省不少时间。报 401 未授权九成是 Key 没填对或环境变量没生效。先确认TAOTOKEN_API_KEY在当前 shell 里echo得出来再确认配置文件里env_key拼写一致。settings.json 场景下检查ANTHROPIC_AUTH_TOKEN有没有多余空格。报 404 模型不存在模型名写错了。longcat-2.0是占位写法实际标识以你控制台模型列表为准。别凭记忆填直接复制。base_url 拼错常见错误是写成https://taotoken.net/api/v1或漏掉协议头。统一用https://taotoken.net/apiSDK 会自己补路径。config.toml 不生效确认工具读的是你改的那个文件路径。有些工具支持多 profile启动时要显式指定--profile longcat否则走默认 profile。评测脚本超时SWE-bench Pro 单条样本上下文可能很长LongCat-2.0 支持 1M 上下文但客户端默认超时往往只有 30 秒。把 timeout 调到 120 秒以上长仓库任务才跑得完。并发限流批量评测时并发别开太高先从小批量试观察返回里的限流提示再逐步加压。注意所有配置里的 Key 都不要提交到公开仓库。用环境变量或本地.env并在.gitignore里排除。6. 长期跑评测与 Agent用 Coding Plan 更省心如果你只是偶尔验证一两条样本上面的按量调用就够了。但要做完整的 SWE-bench Pro 批量复现或者把 LongCat-2.0 接进日常编码 Agent 长期跑按量计费在成本和配额管理上会比较碎。这种情况更适合用 Coding Plan把额度集中管理评测脚本和 Agent 共用一套通道。Coding Planhttps://taotoken.net/coding-plan?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentcoding-plan接入细节和字段说明以官方文档为准遇到配置对不上时先查文档再改接入文档https://taotoken.net/doc?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentdoc回到 LongCat-2.0 本身SWE-bench Pro 59.5 这个数字的意义在于它是在国产算力全流程训练的前提下拿到的且超过了 GPT-5.5。对做代码 Agent 的团队来说这意味着多了一个可实测、可切换的国产选项。用 TaoToken 统一 Key 把它接进来你可以在同一套评测脚本里横向对比 LongCat-2.0、DeepSeek V4 和 Claude 系列按任务实测结果决定用哪个而不是被鉴权配置绑死在单一模型上。
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

【外设】之大彩串口显示屏 2026/11/13 0:43:49

【外设】之大彩串口显示屏

大彩串口屏初步使用 1 .官网下载 STM32 屏幕 GUI 设计资料 http://www.gz-dc.com/category/typeid/4112 找到 STM32 Keil 工程,移植相关代码因项目而异进行移植,由于项目简单,本人只对用到的指令接口进行修改。 比如:注意事项&…

阅读更多 →
无法下载Windows系统iso文件 2026/11/12 23:59:09

无法下载Windows系统iso文件

当我遇到这个问题的时候,我打开了一个网站: 登录 然后我打算下载的时候: 突然那个官方的连接就可以下载了:

阅读更多 →
【清华代码熊】DeepSeek V4.1 Flash 后训练详解 2026/11/13 10:09:00

【清华代码熊】DeepSeek V4.1 Flash 后训练详解

📌 上期解析了 DeepSeek V4.1 Flash 模型架构改进,本期解析 DeepSeek V4.1 Flash 预训练/后训练技术: 🌟 预训练:45T 文本 多模态混合语料、直接训练 sparse attention(取消 DeepSeek V4 的 dense 冷启动&…

阅读更多 →
Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ... 2026/11/13 13:31:48

Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ...

文章主要内容和创新点 主要内容 本文聚焦于多模态大语言模型(MLLM)强化学习(RL)训练中的效率问题,提出了一个名为Shuffle-R1的框架。研究发现,当前RL训练存在两个关键缺陷: 优势值坍缩(Advantage Collapsing):批次中大多数优势值集中在零附近,导致有效梯度信号被淹…

阅读更多 →
PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction 2026/11/13 16:11:45

PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction

一、文章主要内容总结 本文聚焦于利用大型语言模型(LLMs)实现个人身份信息(PII)脱敏的研究,旨在解决传统脱敏方法(如基于规则的系统、领域特定命名实体识别(NER)模型)泛化能力差、跨格式/跨语境适应性弱的问题。 研究通过全面评估多种LLM架构(包括密集型LLM(D-LLM…

阅读更多 →
LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model 2026/11/13 0:02:27

LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model

文章主要内容和创新点 主要内容 本文聚焦于二进制图像-文本相关性评估任务(判断图像与文本“相关”或“不相关”),针对该任务中文本格式多样、相关性定义随场景变化等挑战,提出了基于多模态大语言模型(MLLM)的解决方案LLaVA-RE。 模型设计:LLaVA-RE基于LLaVA 1.5架构,…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉