返回快讯列表
工具上新

Elorian Glimpse 接入 Vercel,可回看视频片段并追踪物体变化

视觉推理模型覆盖图表分析、视频描述、物体计数与机器人数据标注,AI SDK 7 可直接发送视频文件。

Vercel 于 10 月 16 日把 Elorian AI 的 Glimpse 接入 AI Gateway。这款视觉推理模型可以接收图像和视频,跟踪运动中的物体,解释空间关系,并把动作与后续物理变化联系起来。它面向需要理解连续画面而非只看单张截图的任务,网关中的调用名称为 elorian/glimpse。

Glimpse 在推理过程中可以回到视觉材料,放大局部细节、重看一段短视频,或者在不同帧之间持续追踪同一处特征。官方列举的用途包括科学图表分析、视频字幕描述、视觉计数和机器人数据标注。示例则涉及判断列车是否减速、在摄像机移动时保持物体区分,以及为机器人录像中已经完成的动作添加标签。

接入方面,AI SDK 的示例通过文件内容传入图片;使用 AI SDK 7 时,也可以把视频作为文件部分提交,使用公开或带签名的 HTTPS 视频地址。视频示例还展示了抽帧参数与推理强度配置。开发者能够通过网关统一查看请求轨迹和费用,结合预算与路由规则管理调用。

更多快讯