TypeSafe Jev .NET SDK 0.7.0: Deneysel Görüntü ve Bounding Box Desteği
Topluluk tarafından geliştirilen TypeSafe Jev .NET SDK'sı 0.7.0 sürümüyle deneysel görüntü girişi ve Box soru tipini ekledi. Box, bir görüntüdeki hedefin normalize edilmiş konumunu döndürür. Görüntü destekli isteklerin nasıl gönderildiğini ve yeni doğrulama ve sıkıştırma davranışlarını bilmek isteyen .NET geliştiricileri için önemli bir güncelleme.
Kilit noktalar
- Görüntü girişi için TypeSafe-Danger-Zone-Images: true başlığı gerekir; deneysel olduğu için yalnızca ihtiyaç duyan istemcilerde açın.
- Görüntü referansı içeren metinler için düz string interpolasyonu yerine TextWithAssets.Create kullanın.
- Box koordinatları 0-1 aralığında normalize edilmiştir; piksele çevirmek için dikey kenarları yükseklikle, yatay kenarları genişlikle çarpın.
- BoxAnswer.Confidence ve Usage.InputTokens/OutputTokens nullable'dır; null değeri sıfır anlamına gelmez.
- Box hedef yokken de kutu döndürebilir; varlık için ayrı bir Noul sorusuyla birlikte kullanın.
- Görüntüler PNG ve JPEG olarak sınırlıdır; 1.024 bayttan büyük istekler varsayılan olarak zstd ile sıkıştırılır ve Compression = false ile kapatılabilir.
TypeSafe'in JavaScript SDK'sı 0.7.0 sürümünde deneysel görüntü girişi ve Box soru tipini tanıttı. Bu özellikler topluluk tarafından hazırlanan .NET portuna da 0.7.0 olarak eklendi; iki sürüm numarası aynı olsa da bunlar ayrı yayınlardır ve .NET SDK'sı TypeSafe tarafından resmi olarak desteklenmemektedir. Görüntü girişi, TypeSafe-Danger-Zone-Images başlığı açıkça etkinleştirilmeden kullanılamaz.
Box sorusu, bir görüntüdeki hedefin normalize edilmiş Top, Bottom, Left ve Right koordinatlarını döndürür; değerler 0 ile 1 arasındadır ve piksel yerine kenar oranlarını ifade eder. Güven değeri nullable olduğu için yokluğu sıfır olarak yorumlanmamalıdır. Box, hedef olmadığında bile kutu döndürebildiğinden, varlık kontrolü için ayrı bir Noul sorusu eklenmelidir. Ayrıca SDK görüntülü istekleri multipart olarak gönderir ve büyük gövdeleri zstd ile sıkıştırır.
Gerçek dünyada kullanımı
- Destek talebine eklenen ürün fotoğraflarında hasarlı bölgeyi bulup insan incelemesine yönlendiren bir ticket sistemi.
- Yüklenen görsellerde belirli bir nesnenin varlığını ve konumunu Noul ile birlikte doğrulayan bir içerik moderasyon hattı.
- Vision yeteneğini prototip aşamasında deneyen ve yapılandırılmış yanıt döndüren bir ASP.NET Core arka ucu.
Neden önemli
Görüntü destekli Jev çağrıları C# tarafında Image ve TextWithAssets ile yazılabilir, ancak özellik deneyseldir ve Box yanıtlarını varlık kanıtı olarak değil, konum önerisi olarak ele almak gerekir. Üretim öncesi bu sınırları test etmek önemlidir.