ابزار Computer Use به شما امکان میدهد تا عاملهای کنترل مرورگر، موبایل و دسکتاپ بسازید که با وظایف تعامل داشته و آنها را خودکار میکنند. با استفاده از اسکرینشاتها، مدل میتواند صفحه کامپیوتر را "ببیند" و با تولید اقدامات خاص رابط کاربری مانند کلیک ماوس و ورودیهای صفحه کلید "عمل" کند. مشابه فراخوانی تابع، برای دریافت و اجرای اقدامات Computer Use به پیادهسازی محیط اجرای سمت کلاینت نیاز خواهید داشت.
برای لیست مدلهای پشتیبانیشده، به نسخههای مدل مراجعه کنید. مدلهای Gemini 3.x از چندین قابلیت پیشرفته پشتیبانی میکنند:
- پشتیبانی از چند محیط: ساخت عاملها برای محیطهای مرورگر، موبایل و دسکتاپ .
- اقدامات سادهشده با اهداف: اقدامات شامل یک فیلد
intentهستند که استدلال مدل را در پشت هر مرحله توضیح میدهد. - سیاستهای ایمنی قابل تنظیم: تنظیم دقیق رفتار ایمنی با دستهها و لغوهای سیاستهای داخلی.
- تشخیص تزریق سریع: اسکن اسکرینشات با قابلیت انتخاب برای شناسایی دستورالعملهای خصمانهی پنهان.
با استفاده از کامپیوتر، میتوانید عاملهایی بسازید که:
- خودکارسازی ورود اطلاعات تکراری یا پر کردن فرم در وبسایتها.
- انجام تست خودکار برنامههای وب و جریانهای کاربری
- انجام تحقیقات در وبسایتهای مختلف (مثلاً جمعآوری اطلاعات محصول، قیمتها و نظرات از سایتهای تجارت الکترونیک برای اطلاعرسانی در مورد خرید)
در اینجا یک مثال ساده از مقداردهی اولیه کلاینت و ارسال اعلان به مدل با ابزار computer_use فعال برای محیط مرورگر آورده شده است:
پایتون
from google import genai
client = genai.Client()
interaction = client.interactions.create(
model="gemini-3.7-flash",
input="Search for 'Gemini API' on Google.",
tools=[{"type": "computer_use", "environment": "browser"}]
)
print(interaction)
جاوا اسکریپت
import { GoogleGenAI } from '@google/genai';
const ai = new GoogleGenAI();
const interaction = await ai.interactions.create({
model: 'gemini-3.7-flash',
input: "Search for 'Gemini API' on Google.",
tools: