Bağlantı çürümesini denetleyin

Bağlantı çürümesine ne yol açar

Bağlantılar sıradan nedenlerle ölür: barındırma faturaları ödenmeyi bıraktığında siteler kapanır, şirketler satın alınır ve bloglarını kapatır, içerik yönetim sistemi geçişleri her URL’yi yönlendirme olmadan yeniden adlandırır, makaleler ücretli duvarın arkasına alınır veya sessizce yayından kaldırılır ve bütün alan adlarının süresi dolar ve ele geçirenler tarafından satın alınır. Ölçek sezgilerin düşündüğünden büyüktür — bağlantı çürümesi çalışmaları, on yıl öncesine ait bağlantıların kabaca dörtte birinin veya daha fazlasının artık hiçbir yere çıkmadığını defalarca bulmuştur. Birkaç yıldan eski her yer imi koleksiyonu ölü bağlantılar içerir; tek soru kaç tane olduğudur. Bu nedenle, özellikle yıllardır biriktirdiğiniz koleksiyonlarda, düzenli aralıklarla küçük bir denetim yapmak, bir gün bütün koleksiyonu temizlemeye çalışmaktan çok daha kolaydır.

Denetleyici nasıl çalışır

İstekler tarayıcınızdan değil, Marqly’nin sunucusundan yapılır — ve bu bir tasarım tercihi değil, dürüst sonuçlar almanın tek yoludur. Tarayıcılar CORS uygular: bu sayfadaki bir betiğin başka alan adlarından yanıt durumlarını okumasına izin verilmez; dolayısıyla yalnızca istemci tarafında çalışan bir denetleyici sağlıklı bağlantıların çoğunu başarısız gösterirdi. Bunun yerine yapıştırdığınız URL’ler Cloudflare altyapısındaki Marqly’nin kendi sunucusuna gider; sunucu her birini getirir ve durumunu döndürür. URL başına sunucu şunları yapar:

• önce bir HEAD isteği gönderir — yalnızca başlıklar, sayfa gövdesi yok — denetleyiciyi tanıtan ve bu sayfaya geri bağlantı veren bildirilmiş bir kullanıcı aracısıyla (MarqlyLinkChecker/1.0);
• sunucu HEAD’i reddederse (durum 405 veya 501) GET ile yeniden dener — bazı siteler HEAD’i basitçe uygulamaz;
• yönlendirmeleri adım adım izler, en fazla sekiz kez; böylece “yönlendirilen adres” sütunu ilk adımı değil son hedefi gösterir;
• yanıt vermeyen bir bağlantıda yaklaşık altı saniye sonra vazgeçer, bütün grubu asılı bırakmak yerine onu ulaşılamıyor olarak bildirir;
• gruptaki tüm URL’leri paralel çalıştırır; 25 bağlantının genellikle birkaç saniye içinde dönmesinin nedeni budur.

Yalnızca sıradan herkese açık web adresleri kabul edilir — standart bağlantı noktalarında http veya https, gömülü kimlik bilgisi olmadan ve asla özel ya da dahili ana bilgisayarlar olmadan. Bu, ücretsiz aracın dokunmaması gereken makinelere yöneltilmesini önler; aynı zamanda intranet bağlantılarının burada tasarım gereği denetlenemeyeceği anlamına gelir.

Nasıl kullanılır

1. URL’leri toplayın — bir belgeden ya da yer imlerinizden: bunları dışa aktarın ve bağlantılarıyer imi dosyası görüntüleyiciyle (İngilizce) aranabilir bir liste olarak çıkarın.
2. Bunları yukarıya, her satırda bir tane olacak şekilde, çalıştırma başına en fazla 25 olmak üzere yapıştırın.
3. Bağlantıları denetle düğmesine basın ve sonuç tablosunu bekleyin.
4. Her satırı okuyun: hüküm (sağlam, gitmiş, yönlendirilmiş ya da “insan kontrolü gerekli”), sunucunun başarıyla yanıt verip vermediğini gösteren bir ✓/✗ ve bağlantı yönlendirildiyse son URL.
5. Harekete geçin: 404/410’ları silin veya değiştirin, belirsiz olanları kendi tarayıcınızda doğrulayın ve bir yönlendirmenin şimdi nereye indiğini kontrol edin — sitenin ana sayfasında biten bir bağlantı, hiçbir şey “başarısız olmamış” olsa bile genellikle makalesini kaybetmiştir.

Sonuçlar nasıl okunur

• 200’lü aralık — sağlam. ✓ sunucunun başarıyla yanıt verdiği anlamına gelir.
• Yönlendirmeler — sayfa taşındı; “yönlendirilen adres” sütunu nereye indiğini gösterir. Genellikle zararsızdır (http→https, www değişiklikleri), ama bir ana sayfaya yönlendirme çoğu kez makalenin kendisinin gittiği anlamına gelir.
• 404 / 410 — güvenilir biçimde ölü. Sunucu hayatta ve sayfanın olmadığını söylüyor.
• 403, 429, 999 — belirsiz. Birçok site insanlara sorunsuz hizmet verirken otomatik denetleyicileri reddeder. Bir şeyi silmeden önce bunları tarayıcınızda doğrulayın.
• Ulaşılamıyor — hiç HTTP yanıtı yok: ölü alan adı, çökmüş sunucu veya zaman aşımı. Neredeyse her zaman gerçekten gitmiştir.

HTTP durum referansı

Sonuç tablosundaki hüküm bu eşlemeden gelir — herhangi bir tarayıcının geliştirici araçlarında denetleyebileceğiniz aynı mantık:

Bağlantı denetimi ne zaman yapılmalı

• Eski içeriği yeniden yayımlamadan veya geri dönüştürmeden önce — beş yıllık bir yazıyı ölü kaynaklarla yeniden gönderen bir bülten, taşıdığı haberden daha kötü görünür.
• Her içerik yönetim sistemi geçişinden sonra — sizinki ya da başkasınınki: yer imlerinizdeki ve notlarınızdaki URL’ler artık her şeyi yeniden adlandırmış bir siteye işaret ediyor olabilir.
• Bir yer imi klasörünü budarken — önce kesinlikle ölü olanları silin; dosya en hızlı bu şekilde küçülür ve daha az çöp eşitlenir.
• Araştırmadaki veya bir okuma listesindeki kaynakları doğrularken — bir kaynakçadaki 404’ü, üzerine inşa etmeden önce bilmeye değer.
• Bütün kütüphanenizi taşımadan önce — tarayıcı yer imi taşıma rehberine (İngilizce) bakın; yinelenen yer imi bulucuyla (İngilizce) bir yineleme taraması ve bu araçla bir ölü bağlantı geçişi, iki ucuz kazançtır.

Gizlilik: neler gönderilir, neler saklanır

Gönderilenler: yapıştırdığınız URL’ler, tarayıcınızdan Marqly’nin sunucusuna ve oradan denetleyicinin kullanıcı aracısını taşıyarak her hedef siteye. Makinenizden veya oturumunuzdan başka hiçbir şey onlarla birlikte gitmez. Saklananlar: sizi tanımlayan hiçbir şey yok — hesap, geçmiş, kayıtlı grup yok; yanıt no-store işaretiyle döner ve tutulan tek sayaçlar, betiklerin aracı yormasını engelleyen uç (edge) hız sınırlarıdır. İki pratik sonuç: denetlediğiniz siteler Cloudflare altyapısından bir istek görür; bu yüzden erişimin kendisi hassas olan URL’leri yapıştırmayın; ve özel veya dahili adresler burada hiç denetlenemez, çünkü herhangi bir istek yapılmadan önce reddedilirler.

Dürüst sınırlar

Bu araç çalıştırma başına en fazla 25 URL denetler — daha fazlasını yapıştırırsanız fazlalıklar atlanır ve sayılır, sessizce göz ardı edilmez. Sınır vardır, çünkü her URL sunucumuzdan yapılan gerçek bir istektir: sınırsız gruplar, aracı herkes için yavaşlatacak türden betikli kötüye kullanıma davetiye çıkarır. Hesap ve günlük kota yoktur (kayıt gerekmez); dolayısıyla daha büyük bir liste yalnızca daha fazla gruptur. Sunucunun şu anda söylediğini bildirir; bu her zaman içerik hakkındaki gerçek değildir: bir sayfa 200 döndürürken metni bir alan adı park reklamıyla değiştirilmiş olabilir (“yumuşak 404”ler yalnızca durum kodlarından anlaşılamaz). Bütün bir yer imi dışa aktarımını denetlemek için önce URL’leriyer imi dosyası görüntüleyiciyle (İngilizce) çıkarın ve gruplar hâlinde geçirin.

• Yavaş siteler ölü görünür. Yaklaşık 6 saniyelik zaman aşımı, yavaş ama yaşayan bir sayfanın “ulaşılamıyor” olarak dönebileceği anlamına gelir — inanmadan önce yeniden çalıştırın.
• Bot duvarları ölü görünür. 403 veya 999, sitenin sayfayı değil bir robotu reddetmesidir; bunları elle doğrulayın.
• JavaScript ile oluşturulan sayfalar, çizilmeden önce yanıt verir. Bir denetleyici HTTP yanıtını görür, tarayıcınızın sonunda çizdiğini değil.
• Yaşayan bağlantılar yarın ölür. Durum, şu anın anlık görüntüsüdür; kayıtlı bir kütüphane birkaç ayda bir yeniden denetlenmeye değer.
• Fazla zorlarsanız duraklatılırsınız. Art arda hızlıca grup gönderirseniz IP başına hız sınırı “çok fazla istek” yanıtı verir — bir dakika bekleyin ve devam edin.

Çürüyen yer imleri için daha derin çözüm

Bir bağlantı denetleyici size bir sayfanın öldüğünü söyler; sayfanın ne söylediğini söyleyemez. URL’den fazlasını kaydetmenin gerekçesi budur: Marqly kayıtlarınıza bir yapay zekâ özeti ekler; böylece kütüphanenizdeki ölü bir bağlantı bile içeriğinin özünü taşımaya devam eder veanlamsal arama onu yine anlamına göre bulur.

Geleneksel yer imi araçları yalnızca ham URL’yi ve başlığı saklar (nasıl karşılaştığımızıMarqly ve Raindrop karşılaştırmamızda görün, İngilizce).Marqly tarayıcı eklentisiyle sayfalar kaydedildiği anda özetlenir, yapay zekâ ile etiketlenir ve dizinlenir; böylece bağlantı çürümesi bilginizi asla silmez. Verileriniz her iki durumda da sizindir; bkz. verilerimi dışa aktarabilir miyim (İngilizce).

İlgili araçlar ve rehberler

• Denetlemeden önce iki kez kaydedilmiş bağlantıları kaldırın (İngilizce) — yinelenenler grubu boş yere iki kat uzatır.
• Denetlenecek URL’leri çekmek için yer imi dışa aktarımınızı aranabilir bir tablo olarak açın (İngilizce).
• Tarayıcı mı değiştiriyorsunuz? (İngilizce) Taşıma rehberi dışa aktarma, temizleme ve içe aktarmayı baştan sona kapsar.
• Özetleri koruyan bir sonra oku düzeni (İngilizce), bağlantı çürümesine yapısal yanıttır.
• Ölü bir bağlantı size bir klasörlük güveni değil, tek bir girdiyi kaybettirsin diye yer imleri nasıl düzenlenir (İngilizce).
• Marqly’nin ücretsiz planı — başlayın ve sonraki on bağlantıyı özet eklenmiş olarak kaydedin.