Độ phân giải nội dung nghe nhìn

Tham số media_resolution kiểm soát cách Gemini API xử lý dữ liệu đầu vào đa phương tiện như hình ảnh, video, âm thanh và tài liệu PDF bằng cách xác định số lượng mã thông báo tối đa được phân bổ cho dữ liệu đầu vào đa phương tiện, cho phép bạn cân bằng chất lượng phản hồi với độ trễ và chi phí. Mặc dù dữ liệu đầu vào bằng hình ảnh và tài liệu sẽ điều chỉnh việc phân bổ mã thông báo dựa trên chế độ cài đặt độ phân giải, nhưng dữ liệu đầu vào bằng âm thanh sẽ được mã hoá thành mã thông báo với tốc độ cố định mỗi giây trên tất cả các mức độ phân giải. Để biết các chế độ cài đặt khác nhau, giá trị mặc định và cách các giá trị này tương ứng với mã thông báo, hãy xem phần Số lượng mã thông báo.

Bạn có thể định cấu hình độ phân giải đa phương tiện theo 2 cách:

Độ phân giải đa phương tiện theo từng phần (Gemini 4 và Gemini 3)

Gemini 4 và Gemini 3 cho phép bạn đặt độ phân giải đa phương tiện cho từng đối tượng đa phương tiện trong yêu cầu của mình, giúp tối ưu hoá mức sử dụng mã thông báo một cách chi tiết. Bạn có thể kết hợp các mức độ phân giải trong một yêu cầu. Ví dụ: sử dụng độ phân giải cao cho một sơ đồ phức tạp và độ phân giải thấp cho một hình ảnh theo ngữ cảnh. Chế độ cài đặt này sẽ ghi đè mọi cấu hình chung cho một phần cụ thể. Để biết chế độ cài đặt mặc định, hãy xem phần Số lượng mã thông báo.

Python

from google import genai
from google.genai import types

# The media_resolution parameter for parts is available in the v1beta API version.
client = genai.Client(
  http_options={
      'api_version': 'v1beta',
  }
)

# Replace with your image data
with open('path/to/image1.jpg', 'rb') as f:
    image_bytes_1 = f.read()

# Create parts with different resolutions
image_part_high = types.Part.from_bytes(
    data=image_bytes_1,
    mime_type='image/jpeg',
    media_resolution=types.MediaResolution.MEDIA_RESOLUTION_HIGH
)

model_name = 'gemini-4-argon'

response = client.models.generate_content(
    model=model_name,
    contents=["Describe these images:", image_part_high]
)
print(response.text)

JavaScript

// Example: Setting per-part media resolution in JavaScript
import { GoogleGenAI, MediaResolution, Part } from '@google/genai';
import * as fs from 'fs';
import { Buffer } from 'buffer'; // Node.js

const ai = new GoogleGenAI({ httpOptions: { apiVersion: 'v1beta' } });

// Helper function to convert local file to a Part object
function fileToGenerativePart(path, mimeType, mediaResolution) {
    return {
        inlineData: { data: Buffer.from(fs.readFileSync(path)).toString('base64'), mimeType },
        mediaResolution: { 'level': mediaResolution }
    };
}

async function run() {
    // Create parts with different resolutions
    const imagePartHigh = fileToGenerativePart('img.png', 'image/png', Part.MediaResolutionLevel.MEDIA_RESOLUTION_HIGH);
    const model_name = 'gemini-4-argon';
    const response = await ai.models.generateContent({
        model: model_name,
        contents: ['Describe these images:', imagePartHigh]
        // Global config can still be set, but per-part settings will override
        // config: {
        //   mediaResolution: MediaResolution.MEDIA_RESOLUTION_MEDIUM
        // }
    });
    console.log(response.text);
}
run();

REST

# Replace with paths to your images
IMAGE_PATH="path/to/image.jpg"

# Base64 encode the images
BASE64_IMAGE1=$(base64 -w 0 "$IMAGE_PATH")

MODEL_ID="gemini-4-argon"

echo '{
    "contents": [{
      "parts": [
        {"text": "Describe these images:"},
        {
          "inline_data": {
            "mime_type": "image/jpeg",
            "data": "'"$BASE64_IMAGE1"'",
          },
          "media_resolution": {"level": "MEDIA_RESOLUTION_HIGH"}
        }
      ]
    }]
  }' > request.json

curl -s -X POST \
  "https://generativelanguage.googleapis.com/v1beta/models/${MODEL_ID}:generateContent" \
  -H "x-goog-api-key: $GEMINI_API_KEY" \
  -H "Content-Type: application/json" \
  -d @request.json

Độ phân giải đa phương tiện chung

Bạn có thể đặt độ phân giải mặc định cho tất cả các phần đa phương tiện trong một yêu cầu bằng cách sử dụng GenerationConfig. Tất cả các mô hình đa phương thức đều hỗ trợ tính năng này. Nếu một yêu cầu bao gồm cả chế độ cài đặt chung và chế độ cài đặt theo từng phần, thì chế độ cài đặt theo từng phần sẽ được ưu tiên cho mục cụ thể đó.

Python

from google import genai
from google.genai import types

client = genai.Client()

# Prepare standard image part
with open('image.jpg', 'rb') as f:
    image_bytes = f.read()
image_part = types.Part.from_bytes(data=image_bytes, mime_type='image/jpeg')

# Set global configuration
config = types.GenerateContentConfig(
    media_resolution=types.MediaResolution.MEDIA_RESOLUTION_HIGH
)

response = client.models.generate_content(
    model='gemini-3.8-flash',
    contents=["Describe this image:", image_part],
    config=config
)
print(response.text)

JavaScript

import { GoogleGenAI, MediaResolution } from '@google/genai';
import * as fs from 'fs';

const ai = new GoogleGenAI({ });

async function run() {
   // ... (Image loading logic) ...

   const response = await ai.models.generateContent({
      model: 'gemini-3.8-flash',
      contents: ["Describe this image:", imagePart],
      config: {
         mediaResolution: MediaResolution.MEDIA_RESOLUTION_HIGH
      }
   });
   console.log(response.text);
}
run();

REST

# ... (Base64 encoding logic) ...

curl -s -X POST \
  "https://generativelanguage.googleapis.com/v1beta/models/gemini-3.8-flash:generateContent" \
  -H "x-goog-api-key: $GEMINI_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "contents": [...],
    "generation_config": {
      "media_resolution": "MEDIA_RESOLUTION_HIGH"
    }
  }'

Các giá trị độ phân giải hiện có

Gemini API xác định các mức sau đây cho độ phân giải đa phương tiện:

  • MEDIA_RESOLUTION_UNSPECIFIED: Chế độ cài đặt mặc định. Số lượng mã thông báo cho mức này khác biệt đáng kể giữa Gemini 3 và các mô hình Gemini trước đó.
  • MEDIA_RESOLUTION_LOW: Số lượng mã thông báo thấp hơn, giúp xử lý nhanh hơn và chi phí thấp hơn, nhưng ít chi tiết hơn.
  • MEDIA_RESOLUTION_MEDIUM: Cân bằng giữa chi tiết, chi phí và độ trễ.
  • MEDIA_RESOLUTION_HIGH: Số lượng mã thông báo cao hơn, cung cấp nhiều chi tiết hơn để mô hình hoạt động, nhưng độ trễ và chi phí sẽ tăng lên.
  • MEDIA_RESOLUTION_ULTRA_HIGH (Chỉ theo từng phần): Số lượng mã thông báo cao nhất, cần thiết cho các trường hợp sử dụng cụ thể như sử dụng máy tính.

Xin lưu ý rằng MEDIA_RESOLUTION_HIGH mang lại hiệu suất tối ưu cho hầu hết các trường hợp sử dụng.

Số lượng mã thông báo chính xác được tạo cho từng mức này phụ thuộc vào cả loại đa phương tiện (Hình ảnh, Video, Âm thanh, PDF) và phiên bản mô hình.

Số lượng mã thông báo

Các bảng bên dưới tóm tắt số lượng mã thông báo gần đúng cho từng giá trị media_resolution và loại đa phương tiện theo họ mô hình.

Các mô hình Gemini 3

MediaResolution Image Video Audio PDF
MEDIA_RESOLUTION_UNSPECIFIED (Mặc định) 1120 70 25 (mỗi giây) 560
MEDIA_RESOLUTION_LOW 280 70 25 (mỗi giây) 280 + Văn bản gốc
MEDIA_RESOLUTION_MEDIUM 560 70 25 (mỗi giây) 560 + Văn bản gốc
MEDIA_RESOLUTION_HIGH 1120 280 25 (mỗi giây) 1120 + Văn bản gốc
MEDIA_RESOLUTION_ULTRA_HIGH 2240 Không áp dụng Không áp dụng Không áp dụng

Các mô hình Gemini 2.5

MediaResolution Image Video Audio PDF (Đã quét) PDF (Gốc)
MEDIA_RESOLUTION_UNSPECIFIED (Mặc định) 256 + Kéo và quét (~2048) 256 32 (mỗi giây) 256 + OCR 256 + Văn bản gốc
MEDIA_RESOLUTION_LOW 64 64 32 (mỗi giây) 64 + OCR 64 + Văn bản gốc
MEDIA_RESOLUTION_MEDIUM 256 256 32 (mỗi giây) 256 + OCR 256 + Văn bản gốc
MEDIA_RESOLUTION_HIGH 256 + Kéo và quét 256 32 (mỗi giây) 256 + OCR 256 + Văn bản gốc

Chọn độ phân giải phù hợp

  • Mặc định (UNSPECIFIED): Bắt đầu với giá trị mặc định. Giá trị này được điều chỉnh để cân bằng tốt giữa chất lượng, độ trễ và chi phí cho hầu hết các trường hợp sử dụng phổ biến.
  • LOW: Sử dụng cho các trường hợp mà chi phí và độ trễ là quan trọng nhất, còn chi tiết chi tiết thì ít quan trọng hơn.
  • MEDIUM / HIGH: Tăng độ phân giải khi tác vụ yêu cầu hiểu các chi tiết phức tạp trong nội dung đa phương tiện. Điều này thường cần thiết cho việc phân tích hình ảnh phức tạp, đọc biểu đồ hoặc hiểu tài liệu dày đặc.
  • ULTRA HIGH – Chỉ áp dụng cho chế độ cài đặt theo từng phần. Nên dùng cho các trường hợp sử dụng cụ thể như sử dụng máy tính hoặc khi thử nghiệm cho thấy có sự cải thiện rõ rệt so với HIGH.
  • Kiểm soát theo từng phần (Gemini 4 và Gemini 3): Tối ưu hoá mức sử dụng mã thông báo. Ví dụ: trong một câu lệnh có nhiều hình ảnh, hãy sử dụng HIGH cho một sơ đồ phức tạp và LOW hoặc MEDIUM cho các hình ảnh theo ngữ cảnh đơn giản hơn.

Chế độ cài đặt được đề xuất

Sau đây là danh sách các chế độ cài đặt độ phân giải đa phương tiện được đề xuất cho từng loại đa phương tiện được hỗ trợ.

Loại đa phương tiện Chế độ cài đặt được đề xuất Số mã thông báo tối đa Hướng dẫn sử dụng
Hình ảnh MEDIA_RESOLUTION_HIGH 1120 Nên dùng cho hầu hết các tác vụ phân tích hình ảnh để đảm bảo chất lượng tối đa.
Tệp PDF MEDIA_RESOLUTION_MEDIUM 560 Tối ưu cho việc hiểu tài liệu; chất lượng thường đạt đến mức medium. Việc tăng lên high hiếm khi cải thiện kết quả OCR cho các tài liệu tiêu chuẩn.
Video (Chung) MEDIA_RESOLUTION_LOW (hoặc MEDIA_RESOLUTION_MEDIUM) 70 (mỗi khung hình) Lưu ý: Đối với video, các chế độ cài đặt low và medium được xử lý giống nhau (70 mã thông báo) để tối ưu hoá việc sử dụng ngữ cảnh. Điều này là đủ cho hầu hết các tác vụ nhận dạng và mô tả hành động.
Video (Nhiều văn bản) MEDIA_RESOLUTION_HIGH 280 (mỗi khung hình) Chỉ bắt buộc khi trường hợp sử dụng liên quan đến việc đọc văn bản dày đặc (OCR) hoặc các chi tiết nhỏ trong khung hình video.
Âm thanh MEDIA_RESOLUTION_UNSPECIFIED (Mặc định) 25 (mỗi giây) cho Gemini 3; 32 (mỗi giây) cho Gemini 2.5 Âm thanh được mã hoá thành mã thông báo với tốc độ cố định mỗi giây trên tất cả các chế độ cài đặt độ phân giải được hỗ trợ (unspecified, low, medium và high).

Luôn kiểm thử và đánh giá tác động của các chế độ cài đặt độ phân giải khác nhau đối với ứng dụng cụ thể của bạn để tìm ra sự cân bằng tốt nhất giữa chất lượng, độ trễ và chi phí.

Mối quan hệ với các chế độ xử lý video

Các tham số media_resolution và tham số xử lý kiểm soát các khía cạnh khác nhau của dữ liệu đầu vào video:

  • media_resolution kiểm soát độ phân giải của từng khung hình (số lượng mã thông báo trên mỗi khung hình).
  • processing / media_processing kiểm soát nội dung nào trong video được tải vào ngữ cảnh.

Bạn có thể đặt cả hai tham số này trên cùng một dữ liệu đầu vào video. Ví dụ: bạn có thể sử dụng tính năng xử lý theo tác nhân với độ phân giải đa phương tiện thấp để giảm thiểu tổng mức sử dụng mã thông báo cho một video dài.

Để biết thông tin chi tiết về các chế độ xử lý video, hãy xem hướng dẫn về tính năng hiểu video theo tác nhân .

Tóm tắt về khả năng tương thích với phiên bản

  • Kiểu liệt kê MediaResolution có sẵn cho tất cả các mô hình hỗ trợ dữ liệu đầu vào đa phương tiện.
  • Số lượng mã thông báo liên kết với từng cấp độ kiểu liệt kê khác nhau giữa các mô hình Gemini 4 / Gemini 3 và các phiên bản Gemini trước đó.
  • Việc đặt media_resolution trên từng đối tượng Part được hỗ trợ trên các mô hình Gemini 4 và Gemini 3.

Các bước tiếp theo