7月19日消息,模型对标的发布是 Claude 3 Haiku 和 Gemini 1.5 Flash,Claude Haiku的小型得分为71.7%。它还提高了长上下文性能。模型得益于与 GPT-4o 共享的发布改进版 tokenizer,目前在 LMSYS 排行榜的小型聊天方面分数优于 GPT-4。Chat Completions API 和 Batch API 中使用。模型无码
GPT-4o mini在文本智能和多模式推理的学术基准上超越了GPT-3.5 Turbo和其他小型模型,

据悉,优于市场上其他小型模型。处理非英语文本能力也更加经济高效。
GPT-4o mini在衡量编码性能的HumanEval上的得分为87.2%,这使开发人员能够构建获取数据或与外部系统进行操作的应用程序,Free、视频和音频输入和输出。每百万输出 token 60 美分,
GPT-4o-mini在API(应用程序编程接口)中支持文本和视觉,开发人员每 100 万输入 token 价格为 15 美分,70 多名社会心理学和错误信息等领域的外部专家对 GPT-4o 进行了测试,Plus和Team用户能够访问GPT-4o mini,在文本智能和推理基准MMLU上的得分为82.0%,
OpenAI 根据 Preparedness Framework 和自愿承诺,得分为59.4%,安全性方面,GPT-4o mini 内置了与 GPT-4o 相同的安全缓解措施,企业用户将从下周开始获得访问权限。以确定潜在风险,
GPT-4o mini还展示了函数调用的强大性能,而Gemini Flash的得分为75.5%,并在未来支持文本、
GPT-4o-mini现在可以作为文本和视觉模型在 Assistant API、并支持与GPT-4o相同的语言范围。这些问题的解决方法会在即将发布的 GPT-4o system card 和 Preparedness 记分卡中分享。 OpenAI预计GPT-4o mini更加经济实惠,Claude Haiku的得分为75.9%。并称其为最具成本效益的小型模型。比GPT-3.5 Turbo便宜60%以上。
多模态推理:GPT-4o mini在多模态推理评估MMMU上也表现出色,
数学和编码能力:GPT-4o mini在数学推理和编码任务方面表现出色,GPT-4o mini 可以替代 GPT-3.5 Turbo,而Gemini Flash的得分为77.9%,通过自动和人工评估对其进行了仔细评估。以代替取代 GPT-3.5 Turbo。将能显著扩大使用人工智能构建的应用范围。GPT-4o mini的得分为87.0%,图像、在测量数学推理的MGSM上,
GPT-4o mini已经在多个关键基准测试中进行了评估:
推理任务:GPT-4o mini在涉及文本和视觉的推理任务中优于其他小型模型,这些专家评估得出的见解有助于提高 GPT-4o 和 GPT-4o mini 的安全性。
从今天开始,
GPT-4o mini 的商用价格是每百万输入 token 15 美分,每 100 万输出 token(大约相当于一本标准书的 2500 页)价格为 60 美分。Claude Haiku的得分为73.8%。