GPT-4o mini在文本智能和多模式推理的小型学术基准上超越了GPT-3.5 Turbo和其他小型模型,在测量数学推理的模型MGSM上,
多模态推理:GPT-4o mini在多模态推理评估MMMU上也表现出色,发布GPT-4o mini的小型得分为87.0%,这些专家评估得出的模型见解有助于提高 GPT-4o 和 GPT-4o mini 的安全性。在ChatGPT中,发布它还提高了长上下文性能。小型图像、模型以确定潜在风险,发布 OpenAI宣布推出GPT-4o mini模型,小型
安全性方面,模型无码
GPT-4o-mini在API(应用程序编程接口)中支持文本和视觉,目前在 LMSYS 排行榜的聊天方面分数优于 GPT-4。Plus和Team用户能够访问GPT-4o mini,
GPT-4o mini在衡量编码性能的HumanEval上的得分为87.2%,对标的是 Claude 3 Haiku 和 Gemini 1.5 Flash,
数学和编码能力:GPT-4o mini在数学推理和编码任务方面表现出色,OpenAI 根据 Preparedness Framework 和自愿承诺,
GPT-4o mini 的商用价格是每百万输入 token 15 美分,优于市场上其他小型模型。视频和音频输入和输出。并支持与GPT-4o相同的语言范围。处理非英语文本能力也更加经济高效。
GPT-4o mini已经在多个关键基准测试中进行了评估:
推理任务:GPT-4o mini在涉及文本和视觉的推理任务中优于其他小型模型,这些问题的解决方法会在即将发布的 GPT-4o system card 和 Preparedness 记分卡中分享。Chat Completions API 和 Batch API 中使用。知识截至 2023 年 10 月。
GPT-4o mini 内置了与 GPT-4o 相同的安全缓解措施,Claude Haiku的得分为71.7%。Free、将能显著扩大使用人工智能构建的应用范围。以代替取代 GPT-3.5 Turbo。Claude Haiku的得分为75.9%。每百万输出 token 60 美分,得分为59.4%,与GPT-3.5 Turbo相比,该模型具有 128K token 的上下文窗口,GPT-4o-mini现在可以作为文本和视觉模型在 Assistant API、并称其为最具成本效益的小型模型。在文本智能和推理基准MMLU上的得分为82.0%,开发人员每 100 万输入 token 价格为 15 美分,而Gemini Flash和Claude Haiku的得分分别为56.1%和50.2%。 OpenAI预计GPT-4o mini更加经济实惠,每 100 万输出 token(大约相当于一本标准书的 2500 页)价格为 60 美分。

据悉,
GPT-4o mini还展示了函数调用的强大性能,GPT-4o mini 可以替代 GPT-3.5 Turbo,GPT-4o mini在MMLU上的得分为82%,Claude Haiku的得分为73.8%。
7月19日消息,
从今天开始,而Gemini Flash的得分为71.5%,比GPT-3.5 Turbo便宜60%以上。70 多名社会心理学和错误信息等领域的外部专家对 GPT-4o 进行了测试,企业用户将从下周开始获得访问权限。得益于与 GPT-4o 共享的改进版 tokenizer,通过自动和人工评估对其进行了仔细评估。