资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

就在刚刚,DeepSeek了更新V3版本!据了解,模型的速度有了明显提升。

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

官方还没有来得及正式宣发,我们迫不及待尝试了下,的确更新了!

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

那今天就抢先带大家在302.AI实测了解一下DeepSeek-V3,看看其在文本处理、推理逻辑、编程等方面的表现如何!

> 在302.AI上使用

302.AI的聊天机器人和API超市都同步更新了DeepSeek-V3,而且提供按需付费的服务方式,无论是企业、个体开发者,还是不同的用户群体,都能够依据自身的实际需求来灵活选择使用模型,满足各自不同的需求。

【聊天机器人】

用户可以通过聊天机器人快速体验最新模型。302.AI的聊天机器人提供市场上多种先进模型,并持续进行实时更新,保持与市场的发展同步。以下是具体的获取步骤:

1、进入302.AI——点击左侧菜单栏使用机器人——选择聊天机器人——点击模型——选择Deepseek-Chat模型并确定,最后点击创建聊天机器人按钮;

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

2、进入聊天机器人后,还可以点击左下角的设置,打开Artifacts功能

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

【API超市】

企业用户或者个体开发者可以通过302.AIAPI超市调用模型,并根据特定项目需求进行定制化开发,加快AI应用的研发与部署流程。以下是在API超市中获取Deepseek模型的详细步骤:

1、进入302.AI后——点击使用API——选择API超市——分类中点击语言大模型——然后选择国产模型。

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

2、下滑可以看到已经Deepseek-Chat模型的API,可按需选择【查看文档】快速接入API或者【在线体验】测试模型的参数。

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

> 实测对比

实测1-3使用的工具为:302.AI的模型竞技场

对比模型均为gpt-4o-2024-11-20、claude-3.5-sonnet-20241022、DeepSeek-V3

实测4使用的工具为:302.AI聊天机器人的Artifacts功能。

模型价格对比:

DeepSeek-V3 :输入价格为0.15美金/每百万tokens,输出价格为0.3美金/每百万tokens,

gpt-4o-2024-11-20:输入价格为2.5美金/每百万tokens,输出价格10美金/每百万tokens。

claude-3.5-sonnet-20241022:输入价格为3美金/每百万tokens,输出价格15美金/每百万tokens

实测1:文本处理测试

提示词:strrawberrry里有几个“r”,请逐个帮我数出来

分析:为了防止模型提前“背答案”,我们特意在单词中增加了两个“r”,所以正确答案是5个r。

(PS:以下是第一次提问得出的结果)

gpt-4o:虽然最终的答案正确,但未能正确指出r的位置

claude-3.5-sonnet:尽管最终的回答正确,但是最后却指出正确的strawberry只包含了2个”r”,正确拼写的情况下应该是包含3个r。

DeepSeek-V3回答错误,在解析的过程就可以发现模型遗落了连续出现的字母r。

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

实测2:推理测试

提示词:一个农夫过河,需要把狼、羊和白菜都带过河,但每次只能带一样物品,而且狼和羊不能单独相处,羊和白菜不能单独相处,请问农夫该如何过河?

分析:经典的农夫过河问题,没想到三个模型都给出了正确答案。

gpt-4o:分析过程简洁,回答正确

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

claude-3.5-sonnet:分析过程清晰,回答正确

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

DeepSeek-V3:分析过程十分详细,把每一步都细致描述出来,回答正确

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

实测3:逻辑思维测试:

提示词:如果只有4杯水,但现在来了5个领导,你会怎么办?

分析:最近网络上非常多人讨论的“高情商”题目。Deepseek v3的给出的解决的方法都合理,不仅如此,还提出了事后反思,整个答案非常完整

gpt-4o:根据题意,4杯水是为领导准备的,而且即使自身不喝领导也不够分,给出的第5个处理方法有点多此一举

claude-3.5-sonnet:回答中的第2点,同GPT-4o的答案,有点多此一举

DeepSeek-V3:给出的方法都是合理,且有的方法还非常具体给出话术参考,最后还提到需要反思,整体非常完整

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

实测4:编程测试:

对比模型:claude-3.5-sonnet-20241022、Deepseek v3

提示词:用前端代码生成一个俄罗斯方块游戏,将代码放在一起输出

DeepSeek-V3:Deepseek生成的效果其实还不错,游戏操作起来感觉非常流畅的,界面美观度还不错,但是整体游戏不够完整,没有得分显示、游戏说明、开始游戏等元素。

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

claude-3.5-sonnet:生成的游戏界面美观度还可以,游戏可操作,流畅度也不错,每个方块不同样式有不同的颜色。具备“开始游戏”按钮、游戏说明等,总体非常完整

资讯丨刚刚,DeepSeek更新了V3版本,快来302抢先实测了解模型性能

> 总结

通过以上实测,可以初步得出以下结论:

文本处理测试:面对改进后的数字母测试题,DeepSeek-V3未能回答正确,这或许表明模型在处理文本细节时的准确性不足

推理测试:在经典的农夫过河问题的测试中,DeepSeek-V3不仅能正确解答,还提供了详细的解析过程,表现出色

逻辑思维测试:DeepSeek-V3面对高情商提问,不仅给出了合理的解决方案,还提供了具体的实施话术,展现了其在逻辑思维问题上的思考深度

编程测试:在编程任务中,DeepSeek-V3生成的俄罗斯方块游戏不没有深入考虑更多用户交互体验,不够完整。

综合来看,DeepSeek-V3的性价比非常高,实测对比模型gpt-4o-2024-11-20和claude-3.5-sonnet-20241022价格均远远高出DeepSeek-V3,但DeepSeek-V3在推理和逻辑分析方面的表现更优。此外,我们在使用过程中感觉到模型的响应速度明显有了提高。

更值得一提的是,根据我们程序员在真实开发环境中的使用反馈,DeepSeek-V3的编码能力已经媲美claude-3.5-sonnet,超越了gpt-4o。

Like (0)
302.AI302.AI
Previous 2天前
Next 2024 年 12 月 16 日 下午6:36

相关推荐

  • 资讯丨DeepSeek-VL2发布,实测看图说话、文字识别和图形推理能力如何?

    12月13日,DeepSeek 官方发布博文,宣布开源 DeepSeek-VL2 模型。 据了解,在模型架构上,DeepSeek-VL2 视觉部分使用切图策略支持动态分辨率图像,语言部分采用 MoE 架构低成本高性能, MoE是一种混合专家(Mixture-of-Experts)架构,旨在提高模型的性能和效率。 在官方给出的测评结果中显示,DeepSeek-…

    3天前
    3400
  • 资讯丨Mistral AI推出多模态模型Pixtral Large并升级Mistral Large,实测结果让人眼前一亮?

    11月19日,Mistral AI宣布推出新视觉模型——Pixtral Large。 Pixtral Large是基于Mistral Large 2构建,具有124B开放权重的多模态模型,支持128K上下文窗口,能够理解文档、图表和自然图像的同时保持了 Mistral Large 2 领先的纯文本理解能力。 根据Mistral AI提供的Pixtral La…

    2024 年 11 月 21 日
    14600
  • AI PPT工具一键搞定PPT,帮你缓解职场”PPT恐惧症”

    在8月底的《脱口秀和Ta的朋友们》节目中,脱口秀演员赵晓卉的淘汰发言再次出圈,表现甚至比她在脱口秀比赛中的表现更为精彩,被观众称为“淘汰感言区的统治王者” ,在短短几分钟的淘汰感言中接连涌现出的金句,令人印象深刻: “上过班的人,都不会想做 PPT” “我对PPT已经 PPTSD 了” “昨天赢不了PPT、今天交不了 PPT” …… …

    2024 年 9 月 24 日
    22900
  • 智谱发布的新一代基座模型GLM-4-Plus和GLM-4V-Plus表现如何?

    8月29日,智谱AI在KDD国际数据挖掘与知识发现大会上发布了新一代基座模型,包括语言模型GLM-4-Plus、图像/视频理解模型GLM-4V-Plus等。 GLM-4-Plus 基座模型,通过多种方式构造出了海量高质量数据,并利用 PPO等多项技术,有效提升了模型推理、指令遵循等方面的表现,能够更好地反映人类偏好。据官方称,GLM-4-Plus在各项指标上…

    2024 年 9 月 2 日
    34900
  • Runway官宣上线Gen-3 Alpha!无门槛抢先体验

    7月2日凌晨,Runway在社交媒体正式宣布,Gen-3 Alpha全面开放使用! Runway是一家专注于AI视频生成的公司,其推出的Gen系列模型在视频创作领域引起了广泛关注。 据说最新推出的Gen-3 Alpha模型在保真度、一致性和动作表现方面都有重大改进! 都说Gen-3 Alpha很强,那我们先看下来自官网的一段视频: (Prompt:在日本城市…

    2024 年 7 月 12 日
    21800

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注