Okou üzerinde web kazıma
Bir ajana bir bağlantı verin ve sayfanın aslında ne dediğini temiz, okunabilir metinle geri getirir. Kayıt olmanız gereken bir kazıma satıcısı yok.
Web verileri · Kurulum yok · İki faturalandırma modu, standart ve gelişmiş
Bir ajanı herkese açık bir bağlantıya yönlendirin ve sayfanın kelimelerini, gezinme menülerini, çerez banner'larını ve altbilgilerini değil, sizin için okur. Sayfayı temiz metin olarak isteyin veya bir sonraki ne okunacağına karar verirken sadece üzerindeki bağlantı listesini isteyin.
Okuma Firecrawl üzerinde çalışır ve siz sorduğunuz anda oradadır: kurulum yok, anahtar yok, ekibinizin sürdürmesi gereken hiçbir şey yok. Bilinçli olarak dar kalır: istek başına bir sayfa. Sayfaları bulmak web aramasının işidir ve oturum açma veya tıklama arkasındaki her şey uzak tarayıcıya aittir.
Web kazıma nedir
Her araştırma görevi, bir arama sonucunun yeterli olmadığı ve sayfanın aslında ne dediğine ihtiyacınız olduğu noktaya ulaşır. Bunu doğru yapmak göründüğünden daha zordur. Sayfalar içeriklerinin yarısını komut dosyalarıyla yükler ve faydalı metin menüler, banner'lar ve reklamlar arasında yer alır.
Okou'de bu kısım sizin için zaten çözülmüştür. Ajan tek bir genel bağlantı gönderir ve sayfayı okuyup özetleyebileceği temiz metin olarak veya üzerindeki her bağlantının bir listesi olarak geri alır.
Bazı sayfalar normal okumaya direnir. Bunlar için daha güçlü bir mod vardır ve ajan bunu istemek zorundadır, çünkü sayfa başına daha pahalıdır ve bir iş akışının bunu ne zaman seçtiğini görebilmelisiniz.
İnsanların web kazıma API olarak alışveriş yaptığı şeyin aynısıdır. Fark şudur ki, alışveriş yapmak zorunda değilsiniz: zaten çalışmada, bu yüzden mesajda sayfayı istersiniz ve ajan üzerindekileri geri getirir.
Web kazıma ne yapabilir
Bir aracının onunla ne yapabileceği ve yaptığında ne geri döneceği.
Kapsam ve limitler
Ne yapmadığı, baştan söylendi, böylece kimse kapsam dışı bir şey etrafında bir iş akışı planlamaz.
Yalnızca herkese açık sayfalar
Giriş yapılmadığı için, bir girişin, ödeme duvarının veya bot duvarının arkasındaki bir sayfa kapsam dışıdır. Uzak tarayıcı bunun içindir.
Her seferinde bir sayfa
İşaret ettiğiniz sayfayı okur. Sitenin geri kalanında dolaşmaz, bu nedenle tüm bir siteyi okumak, sayfa sayfa sormak ve sayfa sayfa ödeme yapmak anlamına gelir.
Pahalı mod bir seçimdir
Çoğu sayfa normal şekilde okunur. Daha güçlü mod daha pahalıdır ve bir aracının bunu istemesi gerekir, bu nedenle bir iş akışı asla sessizce daha pahalı hale gelmez.
Geri gelen bilgi, emir değil
Bir web sayfasındaki metin, okunacak bir şey olarak ele alınır, asla takip edilecek talimatlar olarak değil. Bu, düşmanca bir sayfanın bir aracıyı başka bir şey yapmaya ikna etmesini engeller.
Web kazıma maliyeti
Web hizmetleri, token başına değil çağrı başına krediyle ücretlendirilir. Kontrol etmeniz gereken ayrı bir hizmet sağlayıcı faturası yoktur.
Firecrawlzero scrapeBir sayfayı okumak kredi tüketir ve daha güçlü mod normalden daha pahalıdır. Başka satın alınacak bir şey ve minimum yoktur, bu nedenle haftada üç sayfa okuyan bir iş akışı yalnızca yaptığı iş için ödeme yapar.
Ürün adları ve logoları sahiplerine aittir ve burada yalnızca bir hizmetin ne üzerinde çalıştığını belirtmek için görünürler. Herhangi bir onay veya ortaklık anlamına gelmezler.
Kurulum ve erişim
Kurulacak hiçbir şey yok
Bağlanacak hiçbir şey yok. Kayıt yok, yapıştırılacak anahtar yok, bağlayıcı listenize eklenen hiçbir şey yok. Bu, bununla Okou kataloğundaki Firecrawl bağlayıcısı arasındaki farktır: bağlayıcı, zaten bir Firecrawl hesabınız olduğunda kendi Firecrawl hesabınıza karşı çalışır ve bu, herhangi bir ajanın kullanması için basitçe oradadır.
Kimler kullanabilir
Web sayfalarını okumak, her ajanın sahip olduğu bir şey değil, verdiğiniz bir izindir. İhtiyacı olan ajanlara ve kişilere, ihtiyaç duydukları sürece verin ve ajanın yapabileceği başka hiçbir şeye dokunmadan geri alın.
Ekipler Web kazıma'yi ne için kullanır?
Bir arama sonucunun arkasındaki sayfayı okuma
Arama size bir başlık ve iki satır verir. Çoğu işin gövdeye ihtiyacı vardır, bu nedenle desen önce arama yapmak, önemli olan iki veya üç sonucu seçmek ve ardından yalnızca bunları okumaktır.
Başka hiçbir yolu olmayan sayfaları izleme
Rakip fiyatlandırması, değişiklik günlükleri, durum sayfaları, düzenleyici bildirimler. Planlanmış bir aracı sayfayı okur, geçen haftayla karşılaştırır ve yalnızca bir şey değiştiğinde size bildirir.
Uzun bir belgeyi çalışma materyaline dönüştürme
Bir şartname, yıllık rapor, bir yardım merkezi. Temiz metin, belgenin bir özeti ile navigasyon menüsünün bir özeti arasındaki farktır.
Web kazıma ne zaman kullanılmamalıdır
Sayfa oturum açma, tıklama veya form gerektirdiğinde atlayın ve bunun yerine uzaktan tarayıcıyı kullanın. Tüm bir siteyi okumak için atlayın, burada sayfa başına maliyet, cevabın değerinden daha hızlı artar. Ve kaynak kendi doğru verilerini yayınladığında atlayın, bu neredeyse her zaman sayfalarını okumaktan daha kararlıdır.
Bunun başka yerlerde ne dendiği
Aynı şey piyasada birkaç isimle anılır. Bunlardan birini aradıysanız, burada ne elde ettiğinizle nasıl eşleştiği budur.
Web kazıma API
Bir hizmete bir sayfa getirmesi ve metnini geri vermesi için ödeme yapmanın olağan adı budur. Tam olarak budur. Hesap ve anahtar size değil, Okou'ye aittir.
Kazıyıcı yazmadan kazıma
İnşa edilecek hiçbir şey ve bakımı yapılacak hiçbir şey yok. Bir mesajda sayfayı istersiniz ve getirme ve temizleme işlemi çalıştırma içinde gerçekleşir.
HTML'den Markdown'a
İnsanların genellikle kendilerinin yazdığı dönüşüm: bir sayfa HTML içeri, temiz Markdown dışarı. Bu, metin aracıya ulaşmadan önce gerçekleşir, bu yüzden bir model dikkatini işaretlemeye değil içeriğe harcar.
AI veya LLM web kazıma
Çıktısı kod tarafından ayrıştırılmak yerine bir model tarafından okunması amaçlanan kazıma. Aynı getirme işlemidir, seçicinin hala eşleşip eşleşmediğine değil, metnin okunabilir olup olmadığına göre değerlendirilir.
Kodsuz web kazıma
Burada kimse bir kazıyıcı yazmaz. Bir mesajda sayfayı istersiniz ve aracı getirme işlemini yapar, ki insanlar kodsuz kazıma aradıklarında aradıkları şey budur.
Web kazıma karşılaştırıldı
Web kazıma vs kendi kazıyıcınızı inşa etmek
Aynı çıktı, çok farklı miktarda iş. Kendi başınıza, seçilecek bir hizmet veya yazılacak bir getirici, birinin güvende tutması gereken bir anahtar ve bir sayfa şekil değiştirdiğinde her zaman bakım gerektiren bir şeydir. Burada soruyu sorar ve cevabı okursunuz, erişim ise paylaşılan bir sır yerine bir izindir.
Web kazıma vs Firecrawl bağlayıcısı
Okou ayrıca bir Firecrawl bağlayıcısı da gönderir ve eğer zaten bir Firecrawl hesabınız varsa ve kullanımı orada istiyorsanız veya bu hizmetin kapsamadığı bir şeye ihtiyacınız varsa bu doğru seçimdir. Yerleşik olanı, sadece sormak ve sayfayı almak istediğinizde doğrudur.
Web kazıma vs bir tarayıcıyı kendiniz sürmek
İşlettiğiniz bir tarayıcı daha yeteneklidir ve çok daha fazla iş gerektirir ve yine de sayfayı daha sonra okunabilir metne dönüştürmeniz gerekir. İş gerçekten tıklama gerektirdiğinde uzaktan tarayıcıyı kullanın ve sayfanın ne dediğine ihtiyacınız olduğunda bunu kullanın.
Kısa versiyonu
Okou'de bir web sayfasını okumanın varsayılan yolu. Sayfa herkese açıksa ve üzerindeki içeriği istiyorsanız, bu tek bir adımdır, hesap gerektirmez ve sayfa başına ücretlendirilir. Oturum açma veya tıklama gerektiren her şey uzak tarayıcıya aittir.
Sıkça sorulan sorular
Firecrawl hesabına ihtiyacım var mı?
Hayır. Bir sayfayı okumak, herhangi bir ajanın zaten yapabileceği bir şeydir, bu yüzden sadece sorarsınız. Oluşturulacak bir hesap ve tutulacak bir anahtar yoktur.
Bu, Firecrawl bağlayıcısından ne kadar farklı?
Bağlayıcı, zaten bir Firecrawl hesabınız varsa ve kullanımı orada yapmak istiyorsanız kendi Firecrawl hesabınıza karşı çalışır. Yerleşik hizmet, yapılandırılacak hiçbir şey olmadan kullanıma hazırdır.
Girişin arkasındaki sayfaları okuyabilir mi?
Hayır. Oturum açmadan herkese açık sayfaları açar. Oturum açık kalabilen ve bir kişi tarafından yarı yolda devralınabilen uzaktan tarayıcıyı kullanın.
Tüm bir web sitesini okuyabilir mi?
Kendi başına değil. Her okuma bir sayfadır, bu nedenle bir siteyi kapsamak sayfa sayfa sormak anlamına gelir ve her sayfa ücretlendirilir. Bir sınır belirlemeye değer.
Bir sayfa okumanın maliyeti nedir?
Başarılı okuma başına krediler, normal bir okumaya direnen sayfalarda kullanılan daha güçlü mod için daha yüksek bir ücret. Bu mod asla sessizce seçilmez.
Geri dönenlere göre hareket etmek güvenli mi?
Bunu bilgi olarak ele alın. Okou, bir web sayfasındaki metni, takip edilecek talimatlar yerine okunacak materyal olarak ele alır, bu da bir sayfanın onu okuyan temsilciyi yönlendirmesini engeller.
Hala bir kazıma aracına ihtiyacım var mı?
Bir iş akışındaki bir sayfadan temiz metin için hayır: bir ajana sorabilir ve alabilirsiniz. Bir kazıma satıcısının kendi panosunu ve tam özellik setini istiyorsanız, bunun yerine bağlayıcı aracılığıyla kendi hesabınızı bağlayın.
Maliyet, kendi kazıma planımla nasıl karşılaştırılır?
Kazıma araçları genellikle minimum aylık planlar satar. Burada bir sayfayı okumak, aylık taahhüt olmadan kredi tüketir, bu da haftada birkaç sayfa okuyan ve çok yüksek hacimde ölçülmeye değer bir iş akışına uygundur.
Bir modelin okuması için Markdown döndürebilir mi?
Evet. Temiz Markdown varsayılan şekildir, bu da bir sayfayı işaretleme duvarı yerine bağlam olarak kullanılabilir kılar.
Bir kazıyıcı yazmak veya seçicileri sürdürmek zorunda mıyım?
Hayır. Yazılacak hiçbir şey yok ve bir sayfa yeniden tasarlandığında hiçbir şey bozulmaz, çünkü belirli bir öğenin içeriğini değil, sayfanın metnini istiyorsunuz.
Web kazıma'yi nasıl istersin
Ne istediğinizi sade bir dille anlatırsınız. Ajan, hangi hizmete ihtiyaç duyduğunu belirler ve çağrıları yapar.
“Bu sayfayı okuyun ve bana önemli olan beş şeyi, her biri için tam ifadeyle verin.”
“Bu dokümantasyon dizinindeki bağlantıları çekin, ardından fiyatlandırma hakkındaki üçünü okuyun ve karşılaştırın.”
“Her Pazartesi rakibimizin fiyatlandırma sayfasını kontrol edin ve sadece bir değişiklik olursa bana bildirin.”
