Revisione e valutazione di Deepcrawl

DeepCrawl ha aumentato un po 'il prezzo da quando lo abbiamo visto per la prima volta. Lo strumento ora inizia a $ 89 al mese, fatturato di mese in mese; $ 81, 50 quando fatturato annualmente). Sono circa $ 10 in più rispetto al costo precedente, quindi non dovrebbe essere un problema per la maggior parte dei clienti degli strumenti di ottimizzazione dei motori di ricerca (SEO). Ciò che potrebbe lanciarti, tuttavia, è il suo focus sul design: questo strumento è pensato per una cosa e una sola cosa: la scansione del sito Web da cima a fondo, dall'alto verso il basso. Gli strumenti SEO possono generalmente essere raggruppati in tre categorie principali. Innanzitutto c'è la ricerca di parole chiave ad hoc, che ti aiuta a trovare le pagine di ricerca più opportune per i tuoi contenuti per un posizionamento più alto. Successivamente, è in corso il monitoraggio della posizione, che è il modo in cui tieni traccia delle tue posizioni di ricerca per identificare dove stai guadagnando e perdendo terreno. Infine, c'è la scansione, in cui i web bot analizzano un singolo sito Web o eseguono la scansione e l'indicizzazione sistematica dell'intera Internet. DeepCrawl non esegue ricerche per indicizzazione su Internet, ma fornirà al tuo sito Web una "scansione completa" SEO completa.

Questo tipo di scansione approfondita del sito è utile per le aziende in vari modi. DeepCrawl è uno strumento sia per gli utenti inesperti che desiderano evidenziare i problemi del sito sia per gli utenti esperti che personalizzano le proprie ricerche per indicizzazione, ma senza alcuna limitazione all'accesso ai dati. La scansione inoltre semplifica il monitoraggio dell'integrità del sito sia in tempo reale che in contesto storico, offrendo alle aziende la possibilità di confrontare le ricerche per indicizzazione anno dopo anno e approfondire le varie tendenze e tipi di report. In genere è necessario utilizzare una combinazione di più strumenti tra le tre categorie di SEO per la strategia più efficace, e i crawler del sito sono il modo in cui si identificano i punti di forza e di debolezza del proprio sito Web e delle pagine di destinazione.

Gli strumenti SEO scelti dalla redazione Moz Pro, SpyFu e AWR Cloud hanno una profondità molto maggiore nel monitoraggio delle parole chiave e della posizione, ma non hanno quasi la capacità di scansione e controllo del sito. Quindi, ad esempio, se hai utilizzato uno degli strumenti di Scelta dell'editore o un prodotto specifico per parola chiave come KWFinder.com per identificare una pagina dei risultati del motore di ricerca di destinazione (SERP) e individuare l'ideale per il posizionamento dei tuoi contenuti, eseguiresti quindi una scansione DeepCrawl dell'architettura del tuo sito per generare interruzioni di pagina e identificare i problemi SEO specifici che il tuo sito deve migliorare e risolvere per il posizionamento di quella pagina. Lo stesso vale per capire perché i tuoi contenuti stanno perdendo terreno nelle classifiche di ricerca rilevati in uno strumento di monitoraggio come AWR Cloud o conducendo alcune analisi della causa principale sul perché il tuo sito è stato colpito con una penalità di ricerca di Google e su come puoi recuperare. Prima o poi, una strategia SEO torna sempre a controllare il tuo sito. Questo è l'unico ed unico lavoro di DeepCrawl.

Prezzi e piani

Come detto, DeepCrawl inizia a $ 81, 50 al mese, fatturato annualmente ($ 89 da un mese a mese) per il suo piano di avvio, che viene fornito con 100.000 URL attivi, cinque progetti attivi, oltre all'accesso API (Application Programming Interface) completo. La maggior parte degli strumenti SEO riservano l'accesso alle API per i livelli aziendali, il che è decisamente un vantaggio per gli utenti di DeepCrawl che desiderano una personalizzazione più profonda senza il prezzo da pagare a livello aziendale.

Un altro cambiamento che è accaduto dall'ultima revisione dello strumento è che la società ha eliminato altri piani tariffari. Per coloro che vogliono iscriversi online per il servizio, c'è il piano di avviamento e basta. Funzionalità più avanzate e maggiori opzioni di servizio sono ora disponibili in un solo altro tipo di piano: il piano aziendale. Non ci sono molti dettagli qui, a parte i prezzi "su misura", che supponiamo significhi una chiamata a un rappresentante dell'azienda in modo che possano personalizzare un servizio e un piano tariffario in base alle tue esigenze.

Scansione del sito Web

Il processo di ricerca per indicizzazione del sito in DeepCrawl inizia con una rapida configurazione in quattro passaggi. In ogni ricerca per indicizzazione puoi includere fino a cinque fonti, sitemap, siti Web, analisi, backlink ed elenchi di URL. L'idea è quella di semplificare l'identificazione delle lacune nell'architettura del tuo sito, con metriche specifiche che non troverai in altri strumenti di scansione come Orphaned Pages Driving Traffic. DeepCrawl è progettato per offrire agli utenti una panoramica completa dello stato tecnico del loro sito Web, con dati fruibili e approfondimenti per aumentare la visibilità SEO e trasformare il traffico organico in entrate.

Quando ti registri per una prova gratuita di DeepCrawl, l'interfaccia ti porta prima alla dashboard del progetto. Per impostare il mio progetto Test PCMag, ho inserito PCMag.com come dominio principale. Il secondo passo è scegliere le origini dati per la ricerca per indicizzazione, che includono il sito Web stesso, le sitemap di PCMag e le analisi a cui è possibile accedere con un account Google Analytics attivo. Puoi anche aggiungere specifici parametri di backlink e target URL all'interno del dominio (ad esempio, se hai identificato pagine target in uno strumento di ricerca per parole chiave) caricando file CSV di backlink specifici o elenchi URL. C'è anche una finestra pop-up nella parte inferiore della pagina per guardare un tutorial video su come impostare progetti e ricerche per indicizzazione DeepCrawl.

Il passaggio tre consente di impostare i parametri per la ricerca per indicizzazione stessa. Sono stato in grado di attivare o disattivare la velocità di scansione da un URL a 50 URL al secondo. Da lì, ho avuto la possibilità di impostare il numero di "livelli di ricerca per indicizzazione" in profondità che la scansione dovrebbe passare dalla home page di PCMag e di impostare il numero massimo di URL in corrispondenza dei quali interrompere la ricerca per indicizzazione. La mia prova gratuita era per il piano di avviamento, quindi i miei URL erano limitati a 100.000. Il passaggio finale consiste nell'impostare se si tratta di una ricerca per indicizzazione una tantum o ricorrente, che può essere oraria, giornaliera, settimanale, bisettimanale, mensile o trimestrale, con l'opzione di impostare gli orari di inizio e fine per la scansione.

Questa è una funzione importante da impostare se hai bisogno di regolari controlli del sito ma fai attenzione ai limiti del tuo URL a seconda del piano che scegli. Esistono anche impostazioni più avanzate per restrizioni di ricerca per indicizzazione più approfondite, URL esclusi, riscrittura degli URL e callback API, ma un utente SEO non tecnico non dovrà necessariamente inserirli. Da lì, ho fatto clic su Avvia scansione e ho ricevuto un'e-mail pochi minuti dopo quando la scansione è stata completata.

Nel pannello di ricerca per indicizzazione completato, ti trovi immediatamente di fronte a un muro di informazioni. Se sai cosa stai cercando, ci sono due barre di ricerca nella parte superiore per trovare un URL specifico o trovare il rapporto su una particolare area dell'architettura del sito; potrebbe trattarsi di qualsiasi cosa, dai contenuti del corpo e tag sociali agli URL non riusciti e ai reindirizzamenti dei siti Web. Complessivamente, DeepCrawl ha pubblicato 175 rapporti sui miei URL, che nella versione di prova gratuita si sono rivelati limitati a poco più di 10.000, e ha scoperto 30 problemi del sito e sottoposto a scansione sei "livelli" o collegamenti in profondità dalla homepage.

La pagina principale del dashboard fornisce una suddivisione in elenco di tutti i problemi attuali del sito, da cui è possibile eseguire il drill down agli URL specifici in cui DeepCrawl evidenzierà errori di pagina come contenuto duplicato, pagine interrotte, collegamenti in eccesso o pagine con titoli, descrizione e metadati che necessitano di miglioramento SEO. Accanto a quell'elenco, ho trovato un'analisi interattiva della pagina del grafico a torta dei problemi più comuni tra le oltre 10.000 pagine sottoposte a scansione.

DeepCrawl ha anche aggiornato la sua interfaccia utente (UI) dalla nostra recensione iniziale, aggiungendo briciole di pane in ogni pagina per rendere più semplice la navigazione verso altre parti della piattaforma e l'aggiunta di una sezione dashboard per valutare tutte le ricerche per indicizzazione in esecuzione in un unico posto. Per il mio dominio, ho scoperto che, sebbene non ci fossero problemi rilevanti con il 49 percento delle mie pagine (la maggior parte delle quali erano pagine "primarie"), il 30 percento delle mie pagine sotto la superficie riguardavano errori del server 5xx, il cinque percento delle pagine ha URL non riusciti e il 16 percento delle pagine erano "non indicizzabili". Secondo DeepCrawl, gli errori 5xx probabilmente si sono verificati a causa del blocco del sito PCMag da parte degli aspetti della ricerca per indicizzazione o della scansione troppo veloce da gestire per il server. DeepCrawl ha anche chiarito che le pagine contrassegnate come primarie non sono necessariamente prive di problemi e possono ancora essere riviste per includere pagine mancanti, escludere pagine di basso valore e annotate con consigli SEO in-page.

Alcuni degli altri strumenti di scansione che ho testato, tra cui Ahrefs e Majestic, offrono anche questo tipo di suddivisione, inclusi problemi di base del sito e indicizzazione dei backlink, ovvero i collegamenti ipertestuali in arrivo da altri siti ai tuoi. Ciò che gli altri non fanno del tutto è approfondire fino al punto che DeepCrawl fa, in particolare con guasti come le pagine che sono protette con il protocollo HTTPS più sicuro rispetto a HTTP, qualcosa che l'algoritmo di Google prende in considerazione quando classifica le pagine.

DeepCrawl offre anche raggruppamenti di pagine intellettuali (che puoi trovare in Impostazioni avanzate durante l'impostazione di una scansione), il che significa che il campionamento si basa su una percentuale di pagine anziché su un numero. Raggruppare le pagine in questo modo è importante in quanto ti fornisce un campionamento coerente attraverso le ricerche per indicizzazione. Pensalo come un esperimento scientifico: se sei un sito di e-commerce scansiona il 20 percento delle pagine dei tuoi prodotti, nella scansione seguente, Deepcrawl scansionerà lo stesso 20 percento per le pagine che sono state aggiunte, rimosse, mancanti o modificate all'interno ogni rapporto. Ciò riduce anche i tempi e i costi di scansione, poiché stai indirizzando la scansione verso il sottoinsieme specifico di pagine a cui sei interessato.

Allo stesso modo, le Estrazioni personalizzate di DeepCrawl possono essere utilizzate per includere o escludere i parametri di tua scelta. Questa è una funzionalità più avanzata progettata per ricerche più specifiche per affinare le tue aree di messa a fuoco. La società ha anche aggiunto estrazioni personalizzate preimpostate per utenti non tecnici, poiché la scrittura di estrazioni personalizzate richiede la conoscenza del linguaggio delle espressioni regolari (Regex).

Reporting avanzato

Oltre all'integrazione GSC, i miglioramenti più importanti a DeepCrawl sono nelle sue capacità di reporting, per i quali DeepCrawl ha aggiunto 75 nuovi report nell'ultimo anno. Oltre alle nozioni di base: condivisione ed esportazione di report o aggiunta di un'attività per quel report, è possibile fare clic sul pulsante Condividi per ottenere un link condivisibile a tale report. È quindi possibile inviare il rapporto via e-mail a un numero qualsiasi di destinatari. Puoi anche scaricare il rapporto come file CSV o sitemap XML e personalizzare i rapporti con marchio personalizzato.

La funzionalità basata su attività è particolarmente utile. DeepCrawl mi ha permesso di aggiungere un'attività per report specifici - in questo caso, l'elenco degli errori del server 5xx - per agire su quella vulnerabilità SEO. DeepCrawl ti consente non solo di pianificare e personalizzare le ricerche per indicizzazione, ma utilizzando Task Manager puoi monitorare l'avanzamento e gestire i flussi di lavoro relativi a problemi e scadenze. Il segno di un buon strumento è uno che non solo scopre un problema o un'opportunità, ma ti aiuta ad agire con raccomandazioni mirate. Mi è stata data la possibilità di impostare un'attività aperta o fissa; designare una priorità bassa, media, alta o critica; fissare una scadenza e assegnare tale compito a persone specifiche della mia squadra. DeepCrawl mi ha dato un percorso tangibile per risolvere i problemi SEO con il mio sito. Solo le raccomandazioni mirate di SpyFu e KWFinder.com hanno fornito la stessa capacità di agire sui rapporti SEO e nessuno degli altri crawler ha incluso questo tipo di funzione di azione basata su attività.

DeepCrawl ha migliorato la barra di ricerca di navigazione a sinistra per trovare anche i rapporti utilizzando parole chiave (anche se le parole chiave non compaiono nel titolo effettivo dei rapporti) e filtrare i rapporti in base a qualsiasi URL pertinente o metrica di collegamento. Esistono anche una serie di nuove visualizzazioni dei dati nelle schermate del report e delle categorie, tra cui grafici di suddivisione, grafici correlati, nuovi grafici di tendenza e miglioramenti della UX come lo scorrimento e la commutazione dei grafici, nonché spiegazioni interattive su metriche specifiche che compaiono in un dato grafico. Anche l'interfaccia utente del dashboard dei report è flessibile, il che significa che è possibile trascinare e rilasciare i report che si desidera visualizzare.

Facendo clic su qualsiasi URL in qualsiasi rapporto si ottengono metriche dettagliate per pagina. In tutti i suoi rapporti URL per URL, DeepCrawl utilizza una metrica personalizzata chiamata DeepRank, che misura il "peso interno" di un collegamento calcolato in modo simile all'algoritmo PageRank di Google. È la metrica dell'autorità URL di DeepCrawl, su una scala da 0 a 10, che mostra i tuoi URL più importanti o quelli che necessitano del maggior miglioramento. Pertanto, mentre la pagina iniziale e le pagine principali di PCMag erano tutte classificate nell'intervallo 8-10, alcune pagine cariche di problemi sono rimaste con un DeepRank vicino allo zero.

Oltre alla sincronizzazione con Google Analytics, DeepCrawl include anche una sezione di dati che suddivide le pagine desktop e mobili non solo per il web design reattivo, ma tutte le configurazioni mobili tra cui pagine mobili e desktop separate, pagine dinamiche e pagine AMP. Questi tipi di guasti principali sui dispositivi mobili si trovano anche in SpyFu e SEMrush, ma non in base alla metrica di DeepCrawl e non in nessuno degli altri strumenti di tracciamento di crawler e backlink che ho testato, incluso LinkResearchTools.

Il più grande aggiornamento di funzionalità a DeepCrawl dalla nostra recensione iniziale è l'integrazione con Google Search Console (GSC) e ancora più avanzate esperienze utente pagina per pagina (UX) e metriche delle prestazioni del sito. L'integrazione consente di collegare le informazioni sulle prestazioni del sito esistenti di DeepCrawl con le informazioni di ricerca organiche dal rapporto di Google Analytics per la ricerca. Aggiungendo la proprietà di Search Console come sorgente URL nelle impostazioni di ricerca per indicizzazione, DeepCrawl è ora in grado di fornire metriche relative a impressioni, clic, percentuale di clic (CTR) e posizione media per ogni pagina indicizzata visualizzata nei risultati di ricerca. Il rapporto di Google Analytics per la ricerca viene fornito con un limite di 1.000 URL nell'interfaccia GSC, ma accedendo al rapporto tramite DeepCrawl ti aggira.

Altri strumenti SEO come SEMrush e Majestic si integrano anche con Google Search Console, ma l'integrazione di DeepCrawl è l'unico tra gli strumenti che abbiamo testato per utilizzarlo per fornire metriche SERP specifiche del dispositivo. Attraverso l'integrazione, DeepCrawl ha rilasciato 10 nuovi report, due nuovi grafici e confronti più profondi desktop / mobile / tablet. I guasti e i confronti dei dispositivi ora raccolgono i dati GSC su base Paese, Paese, impressioni di ricerca ed efficacia per pagine indicizzabili e non indicizzabili, pagine di scansione che ottengono traffico dalla ricerca di immagini e metriche su pagine AMP di Google.

Una caratteristica unica qui è una misura delle pagine mobili / AMP che ricevono traffico desktop e viceversa, il che significa che DeepCrawl mostrerà se le tue pagine sono classificate sul dispositivo sbagliato. Ciò significa che DeepCrawl esegue la scansione di tutti gli URL mobili o AMP separati per evidenziare differenze e discrepanze tra contenuto desktop e mobile. I rapporti verificano che tutte le pagine di alto valore esistano sui dispositivi mobili.

DeepCrawl fornisce anche dati sul social tagging, come le pagine con schede Twitter valide, oltre a una scheda che mostra semplicemente le prestazioni della pagina in termini di tempo di caricamento o del tempo impiegato per "recuperare" una pagina. Infine, lo strumento fornisce report sulla migrazione dei siti Web per analizzare i siti Web live e di gestione temporanea durante una migrazione e generare report specifici sulle pagine HTTP e HTTPs. Queste sono metriche che troverai negli strumenti di monitoraggio dei siti Web, ma in termini di SEO, possono essere utili semplicemente per identificare le pagine in cui la UX è scarsa e garantire migrazioni fluide del sito Web.

Sotto il microscopio a scansione del sito

DeepCrawl è il miglior strumento di scansione che abbiamo testato con ampio margine. Fornisce la massima profondità di scansione del dominio e report SEO con dati e metriche estremamente granulari che, per un principiante SEO, possono essere onestamente travolgenti. Gran parte della mappatura dell'architettura del sito e dell'analisi del dominio che fornisce è probabilmente più adatta per sviluppatori e IT. PCMag non esamina le funzionalità beta, ma DeepCrawl sta anche testando una modalità sperimentale di esplorazione del sito che consente di esplorare visivamente l'architettura del sito.

Come per il dominio di KWFinder.com nella ricerca di parole chiave ad hoc, l'attenzione laser di DeepCrawl sulla scansione è sia la sua benedizione che la sua maledizione. Questo ambito ristretto della sua funzionalità impedisce a DeepCrawl di guadagnare un cenno alla Scelta degli editori insieme a piattaforme SEO più complete a pieno titolo Moz Pro e SpyFu. Ma in termini di capacità di scansione autonoma per scansionare il tuo sito Web o i siti dei tuoi concorrenti da cima a fondo, DeepCrawl è un microscopio SEO ad alta potenza.