None

开发者能如何运用 Google Gemini 模型?AI Studio、Vertex AI 平台助建构 AI 应用

随着 Gemini 的发布,Google 也开放 Gemini Pro 给开发者运用,并带来了生成式 AI 垂直整合的技术堆叠(technology stack),其中建於 Gemini 模型之上的应用有:Google AI Studio、Vertex AI 以及 Duet AI。

更多关於 Gemini 介绍:Google 压箱宝 AI 模型「Gemini」降临!30 项评分直接超越 GPT-4V

Google AI Studio

Google AI Studio 是开发者要使用 Gemini 建构应用最快的方式,以浏览器就能登入 Google AI Studio,可加以选择要使用的模型,包括 Gemini Pro 和 Gemini Pro Vision,後者较为合适一并处理影像和文字输入。

在 Google AI Studio 中输入文字加上图像指令,待 Gemini 回应後,再取得 API key 和程式码,就可进一步移动至自己的整合开发环境中继续开发。

Vertex AI

如果想使用更完整管理的 AI 平台,可从 Google AI Studio 移动至企业用 AI 平台「Vertex AI」。

Vertex AI 的功能包括「模型园地」,有各式第一方、第三方和开放原始码的模型供选择,数量超过 130 个,也含 Gemini Pro、Imagen 2。其中 Imagen 2 现在可生成有文字、logo 的图像。

Vertex AI 涵盖的功能包括:

微调模型

用户能藉由 Vertex AI 提供的功能对模型进行微调,像是「Adapter tuning」以特定参数来微调模型、「逐步蒸馏法」(step-by-step distillation),让拥有完整能力的大型语言模型创作出规模较小的专用模型等。

同时,Vertex AI 也能确保模型取得最新的资料,透过检索增强生成的架构(Retrieval-Augmented Generation, RAG),让用户能以自家或外部的资料来源增强 Gemini 给出的回答。

延伸 Gemini 能力

「扩充功能」能串联起模型和外部应用或资料来源,可加以撷取即时资讯和触发动作;「函数呼叫」将 Gemini 的输出喂给函数或 API,再进一步提升模型输出的品质;「Orchestration 架构」 连结起各式模型,共同给出品质最高的回应。

到了部署模型的阶段,Vertex AI 能助开发者掌握模型输出的品质,也能比较两款以不同方式微调的模型,进行类似 A/B 测试的评估。

Vertex AI 使用方式与 Google AI Studio 一样使用指令即可,但可将模型的输出微调成各种风格,同时也支援 38 种语言。

搜寻与对话

另外,Vertex AI 也有「搜寻与对话」功能,让企业以 no-code 打造基於自家数据的搜寻和通讯应用,在搜寻方面 Vertex AI 具备「Blended Search」能力,可在一项查询中结合不同数据种类,包括 图像、影片等;对话上则是能用接近人声的声音和文字来互动,并涵盖多个对话渠道。在 2024 年稍早就能使用 Gemini 驱动搜寻和对话。

Duet AI

除了开发者端,Gemini 的多模态能力也将在 2024 年初来到 Google Workspace 中,之後在 Google 简报中就能请助手 Duet AI 将一幅手绘图变成更具象化的,也能整理 Google Meet 会议中的简报、语音和文字等各式型态的内容。 

Duet AI 也同样能协助使用 Google 云端之开发者的工作流程,又称为「Duet AI for Developers」,能生成程式码、程式码重构,进行单元测试,也能解释程式码方便其他协作者理解等,且开发者在自己最熟悉的环境就能享 Duet AI 的协助,像是 Visual Studio Code 等。

Duet AI 的一大特点在於可用自家的程式码和架构来客制化,AI 也会确保建议的程式码符合公司制定的格式和规范。

核稿编辑:Sisley

快加入 INSIDE Google News 按下追踪,给你最新、最 IN 的科技新闻!

surfshark怎么用

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x