WithAI.Design

5 min read

拒绝信息差!最近AI动态

拒绝信息差!最近AI动态

AI 技术日新月异,我们还是定期看看有哪些新技术吧,保持自己的 updates,保持与世界同步!

AI 速递:Sora Turbo 发布、xAI 推出 Aurora 等

今日 AI 领域迎来重要进展,以下是详细内容:

一、ControlFlow:使用 Python 构建 AI 代理工作流程

ControlFlow 是一个 Python 框架,用于以结构化的方式构建代理 AI 工作流程。它采用以任务为中心的方法:

  • 定义清晰可观察的任务
  • 分配专门的 AI 代理处理每个任务
  • 将所有内容组合成流程来协调这些任务

二、OpenAI 发布 Sora Turbo

OpenAI 发布了 Sora 的 Turbo 版本 (http://sora.com)。主要功能包括:

  • 根据文本和图像生成视频
  • 逐帧指导的 Storyboard
  • 视频编辑
  • 样式预设
  • 可选择分辨率、时长和宽高比

01.gif

三、xAI 推出图像生成模型 Aurora

xAI 发布了其图像生成模型 Aurora,主要特点:

  • 根据文本和图像生成具有惊人逼真度的图像
  • 未来一周内向所有用户推出
  • xAI 终止了与 Black Forest Labs 在 FLUX 项目上的合作关系

四、CodeQA:基于代码库的检索增强生成

CodeQA 允许用户使用自然语言探索代码库,类似于 Cursor 的 @codebase 功能。主要特点:

  • 使用自然语言查询代码库
  • 提供相关的代码片段、文件名和引用
  • 由 LanceDB、GPT-4o 和 Answerdotai 的 colbert-small-v1 reranker 提供支持

五、PydanticAI 支持本地模型运行

PydanticAI 现在可以通过 Ollama 与本地模型流畅地运行。

  • 极少的集成设置
  • 只需将 AsyncOpenAI 客户端指向本地 Ollama 实例
  • 构建完全在本地运行的结构化数据提取器和代理 02.gif

六、MiniGPT-4:最小视觉语言模型

MiniGPT-4 是一款轻量级的视觉语言模型,Moondream 0.5B 作为最小的视觉语言模型之一,能够流畅地处理边缘和移动设备上的图像和文本任务。它仅需 479 MiB 即可下载,即使在 8 位量化后运行也仅需 996 MiB 内存。Moondream 0.5B 完全开源,其 int8 和 int4 权重均已开放下载。小巧的体积使其非常适合在边缘和移动设备上部署。

更多 AI 辅助设计和设计灵感趋势,请关注公众号(设计小站):sjxz 00。

标签