GPT-OSS 120B ile ölçekte sayfa diff analizi: NLP Cloud destekli Page Deltas hikâyesi

Web sitesi değişiklik izleme, Page Deltas ve NLP Cloud hakkında

Web sürekli değişir. Rakipler fiyatlarını ayarlar, satıcılar hizmet şartlarını sessizce günceller, düzenleyiciler yeni kılavuzlar yayımlar ve dokümantasyon sayfaları herhangi bir duyuru olmadan evrilir. Birçok ekip için bu değişiklikleri günler veya haftalar sonra keşfetmek pahalıdır: kaçırılan bir fiyat hareketi, fark edilmeyen bir politika güncellemesi veya sessizce kullanımdan kaldırılan bir API gerçek iş sonuçları doğurabilir. Page Deltas tam olarak bu sorunu çözmek için inşa edildi. Bir ekip için önemli olan web sayfalarını sürekli izler, değişiklikleri tespit eder ve net, YZ tarafından üretilmiş özetleri doğrudan Slack, Microsoft Teams, Discord, e-posta veya webhook'lara iletir.

Perde arkasında, Page Deltas'ın zekâ katmanı NLP Cloud API üzerinde sunulan open-weight büyük dil modeli GPT-OSS 120B ile çalışır. Bu ortaklık, modern açık kaynak YZ'nin neleri mümkün kıldığını mükemmel gösterir: her gün binlerce sayfa diff'ini okuyan, hangilerinin gerçekten önemli olduğuna karar veren ve bunları sade dille açıklayan, veri gizliliğinden veya maliyet kontrolünden ödün vermeyen bir üretim özelliği.

Ölçekte sayfa diff analizi neden zordur

Bir sayfanın değiştiğini tespit etmek kolay kısımdır. Bir sayfanın iki sürümü arasındaki basit bir karşılaştırma neredeyse her çekimde bir şey işaretler: dönen banner'lar, trend makale widget'ları, çerez onay bildirimleri, güncellenmiş zaman damgaları, modern ön yüz çerçevelerinin ürettiği rastgele işaretleme veya A/B test varyasyonları. Zor kısım, bir değişikliğin gerçekten önemli olup olmadığına karar vermektir.

CSS seçici yok sayma listeleri ve değişiklik boyutu eşikleri gibi geleneksel kural tabanlı yaklaşımlar hızla sınırlarına ulaşır. Kırılgandırlar, her izlenen web sitesi için ayrı ayrı bakımları gerekir ve yeniden yazılmış bir paragrafın iade politikasına önemli bir güncelleme mi yoksa zararsız bir yazım hatası düzeltmesi mi olduğunu temelden ayırt edemezler. Bir diff'i anlamak, onu gerçekten okumayı gerektirir — büyük dil modellerinin iyi olduğu şey tam da budur.

Ancak sürekli izlenen binlerce URL ölçeğinde, her aday diff'i bir LLM'e göndermek yalnızca model aynı anda doğru, hızlı ve maliyet etkin olduğunda sürdürülebilir. GPT-OSS 120B'nin NLP Cloud üzerinde devreye girdiği yer burasıdır.

Page Deltas ham sayfa değişikliklerini eyleme geçirilebilir uyarılara dönüştürür

Page Deltas izlenen sayfaları bir programa göre çeker, her yeni sürümü bir önceyle karşılaştırır ve kullanıcıların her değişikliği görsel olarak doğrulayabilmesi için önce-sonra ekran görüntüleri alır. Sitemap keşif özelliği, yayınlandıkları anda tamamen yeni URL'leri bile tespit eder; bu da ürün lansmanlarını erken yakalamak için özellikle yararlıdır. Ekipler rol tabanlı erişimle monitörler üzerinde iş birliği yapabilir ve uyarıları zaten kullandıkları kanallara yönlendirebilir: Slack, Discord, Microsoft Teams, e-posta veya özel entegrasyonlar için webhook'lar.

Tipik kullanım senaryoları rakiplerin fiyat sayfalarını izlemek, ürün lansmanlarını ve changelog'ları takip etmek, uyumluluk için düzenleyici ve yasal sayfaları izlemek ve bir piyasayı anlamak için işe alım sayfalarını analiz etmektir. Her durumda vaat aynıdır: ham HTML diff'lerinden oluşan bir duvar yerine kullanıcılar, neyin değiştiğine ve neden önemli olabileceğine dair kısa, okunabilir bir özet alır — yalnızca gerçekten önemli olduğunda.

GPT-OSS 120B ile sayfa diff'lerini filtreleme ve özetleme

İzleme motorunun tespit ettiği her değişiklik için Page Deltas, diff'i biraz sayfa bağlamıyla birlikte NLP Cloud API üzerinden GPT-OSS 120B'ye gönderir. Model aynı anda iki rol oynar. Önce filtre gibi davranır: değişikliğin anlamlı mı yoksa sadece gürültü mü olduğunu değerlendirir, böylece ilgisiz güncellemeler kullanıcıya hiç ulaşmaz. İkinci olarak yazar gibi davranır: anlamlı değişiklikler için alarma giden kısa özeti üretir ve sayfada neyin değiştiğini sade dille açıklar.

GPT-OSS 120B bu iş yükü için özellikle uygundur. OpenAI tarafından izin verici Apache 2.0 lisansı altında yayınlanan bir mixture-of-experts modelidir: 117 milyar parametresinin token başına yalnızca yaklaşık 5 milyarı aktiftir; bu da ona çok daha küçük bir modelin gecikmesi ve maliyetiyle sınırlara yakın akıl yürütme ve talimat takip kalitesi kazandırır. Büyük bağlam penceresi, çevresindeki sayfa içeriğiyle birlikte büyük diff'leri bile rahatça sığdırır. Sayfa diff analizi gibi yüksek hacimli, her zaman açık bir görev için kalite, hız ve fiyat dengesi tam da ihtiyaç duyulandır.

GPT-OSS 120B'yi NLP Cloud üzerinde sunmak ek avantajlar getirir. Kullandıkça öde API, Page Deltas tarafında herhangi bir altyapı çalışması olmadan izlenen sayfa hacmiyle ölçeklenir ve API'ye gönderilen veriler asla başka modelleri eğitmek için kullanılmaz. GPT-OSS 120B açık kaynak olduğu için Page Deltas yol haritası üzerinde tam kontrolü elinde tutar: model daha sonra ilgili ve ilgisiz değişiklik örnekleri üzerinde ince ayarlanabilir veya hacimler arttıkça özel bir sunucuda dağıtılabilir — satıcı kilitlenmesi olmadan. NLP Cloud üzerinde GPT-OSS 120B gibi üretken YZ modelleri hakkında daha fazla bilgiyi burada bulabilirsiniz.

Page Deltas ve NLP Cloud için sırada ne var

Bu iş birliği daha yeni başlıyor. Page Deltas büyüdükçe iki ekip daha derin YZ yeteneklerini keşfediyor: değişikliklerin daha zengin kategorizasyonu, bir sayfanın ardışık sürümleri boyunca trend analizi ve birçok dilde web sitelerinin izlenmesi — NLP Cloud üzerinde sunulan modellerin çok dilli yeteneklerinin parladığı bir alan. NLP Cloud tarafında bu tür iş yükleri, büyük açık kaynak modellerin ölçekte hızlı ve uygun fiyatlı kalması için çıkarım yığınımızı optimize etmeye devam etmemizi sağlıyor.

Page Deltas, geliştiricilerin bugün odaklanmış bir ürünü basit bir API üzerinden sunulan gelişmiş açık kaynak YZ modelleriyle birleştirerek neler inşa edebileceğinin harika bir örneğidir.

Henüz yapmadıysanız, NLP Cloud'a buradan kaydolabilirsiniz.

Page Deltas'ı burada ücretsiz deneyebilirsiniz.

Jessica
NLP Cloud Pazarlama Müdürü