# Google Gemini 多模態提示詞指南

- 連結：https://leggie.co/google-gemini-%e5%a4%9a%e6%a8%a1%e6%85%8b%e6%8f%90%e7%a4%ba%e8%a9%9e%e6%8c%87%e5%8d%97/
- 發佈時間：2024-09-28T21:53:20+08:00
- 作者：Leggie

![Google Gemini 多模態提示詞指南](data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw
==)

在人工智能快速發展的今天，Google 推出的 Gemini 模型無疑是一個重大突破。這個多模態
AI 系統不僅能理解文字，還能解讀圖像和視頻，為我們開啟了一個全新的人機互動時代。然而，
要充分發揮 Gemini 的潛力，掌握正確的提示詞技巧至關重要。

## Gemini：跨越感知鴻溝的 AI 先鋒

Gemini 的多模態能力使其成為 AI 領域的佼佼者。目前支持多模態提示的 Gemini 版本包括：

 * Gemini 1.5 Flash
 * Gemini 1.5 Pro
 * Gemini 1.0 Pro Vision

這些模型能夠同時處理文本、圖像和視頻輸入，為用戶提供更全面、更智能的互動體驗。

## 提示詞設計的黃金法則

要有效利用 Gemini 的多模態能力，以下幾點原則尤為重要：

 1. **明確具體的指令**：提供清晰、簡潔的指示，避免模糊不清的表述。
 2. **示例引導**：通過具體的少樣本示例，幫助模型理解您的目標。
 3. **任務分解**：將複雜任務拆分為多個易於管理的子目標。
 4. **指定輸出格式**：明確要求模型以特定格式（如 Markdown、JSON、HTML）輸出結果。
 5. **圖像優先**：對於單張圖片的提示，將圖像放在文本之前通常效果更佳。

## 排查問題的智慧之道

在使用過程中，如果遇到模型輸出不如預期的情況，可以嘗試以下策略：

 1. **引導關注**：明確指出您希望模型關注圖像的哪些方面。
 2. **描述再推理**：要求模型先描述圖像，然後再執行任務。
 3. **步驟分解**：對於複雜任務，引導模型逐步思考。
 4. **參數調優**：嘗試調整溫度、Top-P 和 Top-K 等參數，以獲得最佳結果。

## 案例分析：提升 Gemini 輸出質量

讓我們通過一些具體例子來說明如何優化提示詞：

**案例 1：解析機場資訊面板**

初始提示：「描述此圖片。」
改進提示：「將下圖中顯示的機場面板中的時間和城市解析為
列表。」

這個改進明確指出了我們想要的資訊，有助於模型生成更精確的回答。

**案例 2：識別地標**

初始提示：「確定城市以及地標。」
改進提示：

    ```wp-block-code
    確定城市以及地標。
    城市：羅馬，地標：鬥獸場
    城市：北京，地標：紫禁城
    城市：里約熱內盧，地標：基督救世主像
    ```

通過提供示例，我們幫助模型理解了所需的輸出格式。

**案例 3：數學問題解析**

初始提示：「序列中的第 4 項是什麼？」
改進提示：「序列中的第 4 項是什麼？請分步思考。」

這種改進鼓勵模型展示其推理過程，有助於我們理解和驗證結果。

## 輸出格式：精準控制 Gemini 的回答

在某些情況下，我們需要 Gemini 以特定格式輸出結果。例如：

**Markdown 表格**

提示：「將此圖片中的表格解析為 Markdown 格式」

**JSON 輸出**

提示：「請提供以下所有屬性的列表：配料、菜系類型、是否為素菜，採用 JSON 格式」

通過明確指定輸出格式，我們可以獲得結構化的數據，便於後續處理和分析。

## 深入理解：Gemini 的思考過程

有時，了解 Gemini 的推理過程可以幫助我們優化提示詞。例如，當詢問「這些圖片有什麼
共同之處？」時，我們可以要求模型先描述每張圖片，然後再進行比較分析。

改進提示：「首先，詳細描述每張圖片中的內容。這些圖片有什麼共同之處？」

這種方法不僅能得到更全面的分析，還能幫助我們了解模型的觀察和推理過程。

## 參數調優：釋放 Gemini 的潛力

Gemini 的輸出質量不僅取決於提示詞，還與採樣參數密切相關。以下是幾個關鍵參數(透過
API 或 Vertex AI Studio 的聊天面板進行相關設定)：

 1. **溫度**：控制詞元選擇的隨機性。較低的溫度（如 0.4）適合需要確定性答案的場景，較高
    的溫度則可能產生更具創意的結果。
 2. **Top-K**：限制模型在每個步驟中考慮的最高概率詞元數量。默認值為 32，較低的值會產生
    更確定的回答，較高的值則增加多樣性。
 3. **Top-P**：控制累積概率閾值。默認值為 1.0，降低這個值可以得到更保守的回答，提高
    則增加創意性。

通過調整這些參數，開發者可以根據具體需求優化 Gemini 的輸出。

### 結語

Google Gemini 的多模態能力為 AI 應用開闢了新的前景。通過掌握高效的提示詞技巧，我們
可以充分發揮這一強大工具的潛力，實現更智能、更自然的人機交互。無論是在圖像分析、
數據處理還是創意生成方面，Gemini 都展現出了令人驚嘆的能力。

隨著技術的不斷進步，Gemini 及類似的多模態 AI 系統將在未來扮演越來越重要的角色。對於
開發者和企業來說，及時掌握這些技術並將其整合到產品和服務中，將成為保持競爭力的關鍵。

##### 進一步閱讀

 1. [Gemini GEM 指令寫作指南：從入門到精通，打造你的專屬 AI 助理](https://leggie.co/gemini-gem-%e6%8c%87%e4%bb%a4%e5%af%ab%e4%bd%9c%e6%8c%87%e5%8d%97/)
 2. [Gemini Deep Research 最佳提示詞指南](https://leggie.co/gemini-deep-research%e6%9c%80%e4%bd%b3%e6%8f%90%e7%a4%ba%e8%a9%9e%e6%8c%87%e5%8d%97/)
 3. [Gemini Prompt 專家指南](https://leggie.co/gemini-prompt-%e5%b0%88%e5%ae%b6%e6%8c%87%e5%8d%97/)
 4. [Gemini Prompt 入門指南](https://leggie.co/gemini-prompt-%e5%85%a5%e9%96%80%e6%8c%87%e5%8d%97/)
