Yapay Zeka API

Otari

Kendinizin çalıştırdığı, açık kaynaklı, OpenAI uyumlu bir LLM ağ geçidi; sanal anahtarlar, bütçeler ve kullanım takibi ile 40'tan fazla sağlayıcı için tek bir uç nokta sunar.

Nedir Otari?

Otari, uygulamalarınızdan gelen LLM isteklerini tek bir OpenAI uyumlu uç nokta üzerinden 40'tan fazla sağlayıcıya yönlendiren, kimlik doğrulama, bütçe uygulama ve kullanım günlüğü işlemlerini üstlenen açık kaynaklı bir proxy sunucusudur.

Otari vs Benzer Araçlar

Fiyatlandırma ModeliÜcretsizÖzel fiyatlandırmaÜcretsizÜcretsiz
Ücretsiz Krediler
Temel özellikler
  • 40'tan fazla LLM sağlayıcısı için OpenAI uyumlu uç nokta
  • Kapsamlı izinler ve iptal ile sanal API anahtarları
  • Kullanıcı ve anahtar başına istek öncesi bütçe uygulama
  • Yüksek kullanılabilirliğe sahip kurumsal sınıf çalışma zamanı
  • Esnek kimlik ve erişim (SAML, OAuth)
  • İzole çalışma zamanları, kimlik bilgileri ve denetim günlükleri ile kiracı izolasyonu
  • Ollama, OpenAI ve llama.cpp API'lerini taklit eder
  • NVIDIA'nın OpenAI uyumlu API'sine şeffaf yönlendirme
  • Yapılandırılabilir TTL ve boyut ile isteğe bağlı yanıt önbellekleme
  • AI ajanları için saydam kimlik bilgisi enjeksiyonu
  • AES-256-GCM ile bekleyen şifreleme
  • Sırları uç noktalara yönlendirmek için ana bilgisayar ve yol eşleştirme
Artılar
  • Açık kaynak ve kendi sunucunuzda barındırılan, sağlayıcı anahtarlarını ve verilerinizi kendi ortamınızda tutar
  • Tek bir uç nokta, sağlayıcılar arasında istemci entegrasyonunu basitleştirir
  • Yerleşik kurumsal düzeyde güvenlik ve yönetişim
  • SaaS sağlayıcıları için çoklu kiracı izolasyonu
  • Hafif ve Docker ile kolay dağıtım
  • API çağrılarını ve gecikmeyi azaltmak için yanıtları önbelleğe alır
  • Açık kaynak ve kendi barındırılan, kimlik bilgileri üzerinde tam kontrol sağlar
  • Tek satırlı kurulum veya Docker ile kolay kurulum
Eksiler
  • Sunucunun ilk kurulumunu ve bakımını gerektirir
  • Kendi barındırma modu, yönetilen çoklu sağlayıcı yedeklemesinden yoksundur (otari.ai hesabıyla karma modda mevcuttur)
  • Fiyatlandırma şeffaf değildir ve satış ekibiyle iletişime geçmeyi gerektirir
  • İş akışlarını kurmak ve yapılandırmak için teknik uzmanlık gerektirir
  • Yalnızca NVIDIA API'sine yönlendirir; başka bulut sağlayıcı desteği yok
  • Geçerli bir NVIDIA API anahtarı gerektirir
  • Varsayılan olarak şu anda tek kullanıcılı yerel modla sınırlıdır; OAuth kurulumu ek yapılandırma gerektirir
  • Kendi barındırma altyapısı (Docker/PostgreSQL) gerektirir
Kimler için uygun
  • Birleşik bir LLM API ağ geçidine ihtiyaç duyan geliştiriciler ve ekipler
  • Ayrıntılı erişim kontrolü ve maliyet yönetimi gerektiren kuruluşlar
  • Güvenli, yönetilebilir bir entegrasyon platformuna ihtiyaç duyan işletmeler
  • Müşterileri için çoklu kiracı entegrasyonu gerektiren SaaS şirketleri
  • NVIDIA LLM'lerini mevcut iş akışlarına entegre eden geliştiriciler
  • NVIDIA modellerinden yararlanmak isteyen Open WebUI, curl veya SDK kullanıcıları
  • Güvenli API erişimine ihtiyaç duyan AI ajanları geliştiren geliştiriciler
  • Değişen kimlik bilgisi kapsamlarına sahip birden çok AI ajan dağıtımını yöneten ekipler

Nasıl kullanılır Otari?

  1. 1Otari'yi Docker kullanarak dağıtın (örneğin, sağlayıcı anahtarlarınız ve ana anahtarınızla docker run).
  2. 2Yönetim uç noktası veya başlangıç anahtarı aracılığıyla sanal bir API anahtarı oluşturun.
  3. 3OpenAI istemcinizi sanal anahtarla http://localhost:8000/v1 adresine yönlendirin.
  4. 4Herhangi bir model sağlayıcısını kullanarak istekler yapın (örneğin, openai:gpt-4o-mini).
  5. 5Kullanımı ve bütçeleri /v1/usage uç noktası aracılığıyla izleyin.

Otari Temel özellikler

  • 40'tan fazla LLM sağlayıcısı için OpenAI uyumlu uç nokta
  • Kapsamlı izinler ve iptal ile sanal API anahtarları
  • Kullanıcı ve anahtar başına istek öncesi bütçe uygulama
  • Sorgulanabilir geçmişle kullanım ve harcama günlüğü
  • Yerleşik araçlar: korumalı kod yürütme ve web araması
  • Girdi güvenliği için korkuluklar (örneğin, prompt enjeksiyonu tespiti)
  • Bulut yönetimiyle bağımsız veya karma mod

Otari Kullanım senaryoları

  • Birden çok LLM sağlayıcısı için API anahtarı yönetimini merkezileştirin
  • İstekler yürütülmeden önce bütçe belirleyerek maliyetleri kontrol edin
  • Sağlayıcı anahtarlarını ifşa etmeden LLM'lere güvenli erişim sağlayın
  • Ekipler ve uygulamalar arasında kullanımı takip edin
  • Herhangi bir modelle özel korkuluklar ve araçlar çalıştırın

Otari Fiyatlar ve ücretsiz krediler

Otari, Ücretsiz modeliyle çalışır.

Kendi Sunucunuzda Barındırılan Açık Kaynak

Ücretsiz

Otari açık kaynaklıdır (Apache 2.0) ve kendi altyapınızda hiçbir maliyet olmadan çalıştırılabilir.

Otari Artılar ve eksiler

Artılar

  • Açık kaynak ve kendi sunucunuzda barındırılan, sağlayıcı anahtarlarını ve verilerinizi kendi ortamınızda tutar
  • Tek bir uç nokta, sağlayıcılar arasında istemci entegrasyonunu basitleştirir
  • Çağrılardan önce bütçe uygulaması, beklenmeyen maliyetleri önler
  • Kapsamlı kullanım takibi ve günlüğü

Eksiler

  • Sunucunun ilk kurulumunu ve bakımını gerektirir
  • Kendi barındırma modu, yönetilen çoklu sağlayıcı yedeklemesinden yoksundur (otari.ai hesabıyla karma modda mevcuttur)
  • Bazı gelişmiş özellikler (örneğin, yerel sağlayıcı araçları) belirli modellerle sınırlıdır

Otari en çok ne için uygundur?

  • Birleşik bir LLM API ağ geçidine ihtiyaç duyan geliştiriciler ve ekipler
  • Ayrıntılı erişim kontrolü ve maliyet yönetimi gerektiren kuruluşlar
  • Satıcı bağımlılığından kaçınmak ve verileri gizli tutmak isteyenler

Otari hakkında SSS

Otari için ücretsiz alternatifler

YAFL logo

Ajandan ajana güvenli dosya aktarımı sağlayan, AI ajanları arasında MCP çağrılarıyla insan müdahalesi olmadan şifrelenmiş dosya paylaşımına olanak tanıyan bir araç.

Ücretsiz
TwelveLabs logo

TwelveLabs, geliştiricilerin güçlü yapay zeka modelleri aracılığıyla video içeriğini aramasını, analiz etmesini ve anlamasını sağlayan bir video zeka platformudur.

Ücretsiz
Agentcard logo

Agentcard, yapay zeka ajanları için ajan dostu kart çıkarma ve ödeme altyapısı sağlar, 5 dakikada kurulum ve otonom satın almalar sunar.

Ücretsiz
Opper AI logo

300'den fazla lider modele tek bir API ile erişim sağlayan, AB'de barındırılan, GDPR uyumlu ve OpenAI SDK ile uyumlu birleşik bir AI ağ geçidi.

Ücretsiz
D

Dike, AB'deki yapay zeka ürünleri için bir uyumluluk ağ geçididir ve basit bir proxy aracılığıyla denetim düzeyinde günlükleme, insan gözetimi ve olay raporlaması sağlar.

Ücretsiz
Music0 AI logo

Özgün şarkılar oluşturan ve bunları senkronize görsellerle muhteşem müzik videolarına dönüştüren ücretsiz bir AI müzik üreticisi ve müzik video yapımcısı.

Ücretsiz
XSDR logo

AI ajanları için düşük gecikmeli veri akışları ve webhook bildirimleri sağlayarak otomatik iş akışlarını tetikleyen gerçek zamanlı olay izleme altyapısı.

Ücretsiz

Otari için en iyi AI alternatifleri

Koodisi logo

Koodisi, API'leri, MCP sunucularını ve AI ajanlarını yerleşik güvenlik, yönetişim ve kiracı izolasyonuyla birbirine bağlayan kurumsal bir iPaaS ve iş akışı otomasyon platformudur.

llmproxy logo

Ollama, OpenAI ve llama.cpp API'lerini taklit eden, NVIDIA'nın uyumlu API'sine şeffaf yönlendirme yapan hafif ve yüksek performanslı bir LLM vekil sunucusu.

OneCLI logo

Açık kaynaklı kimlik bilgisi ağ geçidi ve gizli kasa; AI ajanlarının anahtarları açığa çıkarmadan API'lere erişmesini sağlar.

YAFL logo

Ajandan ajana güvenli dosya aktarımı sağlayan, AI ajanları arasında MCP çağrılarıyla insan müdahalesi olmadan şifrelenmiş dosya paylaşımına olanak tanıyan bir araç.

Ücretsiz
Millwright logo

Millwright, açık kaynaklı, kendinden barındırılan bir LLM yönlendiricisidir. Politikaya göre AI isteklerini en düşük maliyetli model sağlayıcılara yönlendirir, istem önbelleklerini korur ve harcamayı kontrol eder.

TwelveLabs logo

TwelveLabs, geliştiricilerin güçlü yapay zeka modelleri aracılığıyla video içeriğini aramasını, analiz etmesini ve anlamasını sağlayan bir video zeka platformudur.

Ücretsiz
FlexInference logo

Belirlenen bir zaman penceresi içinde daha ucuz hizmet katmanlarını otomatik olarak bularak AI çıkarım maliyetlerini azaltan, son teslim tarihine duyarlı bir LLM yönlendiricisi.

Agentcard logo

Agentcard, yapay zeka ajanları için ajan dostu kart çıkarma ve ödeme altyapısı sağlar, 5 dakikada kurulum ve otonom satın almalar sunar.

Ücretsiz