Моделі комп'ютерного зору приймають зображення разом з текстом, щоб модель могла описувати, класифікувати та відповідати на запитання про те, що вона бачить.

Швидкий старт

ollama run gemma4 ./image.png whats in this image?

Використання через API Ollama

Надайте масив images. SDK приймають шляхи до файлів, URL-адреси або сирі байти, тоді як REST API очікує дані зображення, закодовані в base64.

cURL

# 1. Завантажте тестове зображення
curl -L -o test.jpg "https://upload.wikimedia.org/wikipedia/commons/3/3a/Cat03.jpg"

# 2. Закодуйте зображення
IMG=$(base64 < test.jpg | tr -d '\n')

# 3. Надішліть його до Ollama
curl -X POST http://localhost:11434/api/chat \
-H "Content-Type: application/json" \
-d '{
    "model": "gemma4",
    "messages": [{
    "role": "user",
    "content": "What is in this image?",
    "images": ["'"$IMG"'"]
    }],
    "stream": false
}'

Python

from ollama import chat
# from pathlib import Path

# Вкажіть шлях до зображення
path = input('Please enter the path to the image: ')

# Ви також можете передати закодовані в base64 дані зображення
# img = base64.b64encode(Path(path).read_bytes()).decode()
# або необроблені байти
# img = Path(path).read_bytes()

response = chat(
  model='gemma4',
  messages=[
    {
      'role': 'user',
      'content': 'What is in this image? Be concise.',
      'images': [path],
    }
  ],
)

print(response.message.content)

JavaScript

import ollama from 'ollama'

const imagePath = '/absolute/path/to/image.jpg'
const response = await ollama.chat({
  model: 'gemma4',
  messages: [
    { role: 'user', content: 'What is in this image?', images: [imagePath] }
  ],
  stream: false,
})

console.log(response.message.content)