Hexomatic: web scraping per fare marketing automation del tuo business

Hexomatic è il tool che ti permette di fare scraping web e rendere automatiche molte attività di business che ti porterebbero via troppo tempo.

Introduzione

Internet è una fonte inesauribile di dati, ma se non hai un metodo preciso e gli strumenti giusti per elaborarli, rischi di perderti in un mare d’informazioni.

Quante volte ti sarà capitato di dover cercare notizie, URL ed e – mail ed altro e di rimanere bloccato dalla troppa documentazione trovata, oppure dal tempo necessario a fare le tue analisi.

Per fortuna ci sono dei preziosi tool che vengono in aiuto; quello che voglio segnalarti oggi è uno di quelli sicuramente più completi nelle proprie funzionalità e più facile da usare.

Si tratta di HEXOMATIC, un tool di marketing automation che permette di fare web scraping di cui vedremo caratteristiche e modalità di funzionamento.

Ti premetto che la filosofia che muove questo nuovo prodotto è un ibrido tra i classici tool di automation come IFTTT (qui puoi trovare le alternative migliori a IFTTT) e tool di scraping sui social come Phantombuster o Texau.

In parole povere è in grado di automatizzare gran parte delle operazioni facendo data scraping su dati strutturati.

Non sono stato chiaro? Vediamo allora insieme cosa può fare Hexomatic per te.

Cosa puoi fare con Hexomatic

Hexomatic è strumento di web scraping che permette di risparmiare tempo e risorse nell’estrarre i dati e reperire informazioni sul web, con il vantaggio di poter usare ciò che trovi per diversi scopi e funzioni aziendali.

Alcuni utilizzi che puoi fare con questa piattaforma:

• Generazione di lead: attraverso ricerche per posizione geografica e/o nicchia di mercato, è possibile trovare nuovi lead, completando le informazioni con profili Social e con l’uso della funzione WHOIS di cui parleremo più avanti.
• E- commerce: se hai un e – commerce e vuoi capire cosa fanno i tuoi competitor, puoi estrarre dati e schede prodotto, salvandole in fogli Excel o Google, od anche file CSV
• Marketing: la piattaforma ti permette di trovare tracce della tua pubblicità sul web, sintetizzando il tutto in fogli di calcolo.
• SEO: puoi trovare i backlink su altri siti web ed estrarre metatag raccolti, in liste scaricabili.
• Ricerca ed Inserimento dati: puoi anche creare un bot che ricerca qualsiasi dato possa servirti in tutto il web
• Web design: puoi acquisire schermate di siti web, ottenendone anche gli URL che verranno raccolti in fogli di calcolo.

Le funzioni principali di Hexomatic

Entrando più nel dettaglio, vediamo cosa può farti realizzare questo software:

• Cattura automatica delle email sui siti internet
• Estrazione dei link dalle pagine web; puoi decidere se estrarre tutti i link, oppure solo gli esterni o gli interni
• Estrazione del contenuto visibile ed invisibile delle pagine, se hai bisogno di dare un occhiata al codice sorgente.
• Conteggio delle parole di un intero sito o nelle singole pagine
• Esecuzione di ricerche su Google o Google Map ottenendo i risultati della SERP
• Estrazione dei Meta Tag SEO, che siano titoli, descrizioni snippet, o URL canonici
• Estrazione dei profili social di qualsiasi pagina web
• Tipo di tecnologia utilizzata dal sito ed anche dai servizi di terze parti.
• Traduzioni DeepL e Google
• Dettagli dei nomi a dominio, come intestazione, scadenza (funzione WHOIS)
• Dati sul traffico di qualsiasi URL
• Conversione dei formati data e ora
• Conversione di unità di misura (puoi convertire lunghezze, temperatura, tempo, area, volume e pesi)
• Trasformazione di numeri (formato UE o USA) e di testo (maiuscole/minuscole)
• Notifiche Discord
• Notifiche telegram
• Possibilità di inserire testo, URL o File per farne uno scraping
• Esportazione o sincronizzazione dei dati Google
• Cattura degli Screenshot per qualsiasi URL, potendo scegliere anche la dimensione dello schermo
• Estrazione delle mappe del sito
• Controllo dello stato degli URL, per capire quali URL sono attivi.

Come funziona Hexomatic

Il tool è abbastanza semplice da usare; vediamo come iniziare da una funzione semplice, considerando che le altre hanno un funzionamento analogo.

Per cominciare occorre creare un nuovo workflow, selezionandolo prima dal menù a sinistra:

 

Da qui si aprirà una schermata in cui possiamo decidere il tipo di funzione che vogliamo usare, dal menu sulla destra:

 

 

In questo caso, ad esempio potremo scegliere di ottenere i risultati in SERP per una determinata keyword, visualizzando che risultati otteniamo da desktop (ma possiamo scegliere anche se vogliamo ottenerli da mobile) e decidendo anche il paese.

 

Dopo qualche minuto di attesa, affinché il robot faccia la sua ricerca, possiamo ricaricare la pagina; Il risultato ottenuto potrà essere scaricato in un foglio di calcolo Google, od un file .CSV.

fase di elaborazione

Elaborazione effettuata

A questo tipo di ricerca, nelle versioni a pagamento è poi possibile aggiungerne altre: negli screenshot che seguono abbiamo fatto una ricerca finalizzata all’estrazione e-mail e ad una ricerca WHOIS:

Anche in questo caso, dopo una breve attesa sarà possibile scaricare i dati ottenuti – con le stesse modalità – da una schermata analoga alla precedente.

I prezzi di Hexomatic

L’abbonamento di Hexomatic prevede tre piani, così organizzati:

1. Un piano a 49$/mese che permette di creare 10 workflow e fornisce 4.500 crediti per automazioni.
2. Un piano a 99$/mese che consente workflow illimitati e offre 10.000 crediti di automazione.

a questi si aggiungono i crediti relativi alle operazioni con l’intelligenza artificiale a partire da9,99$/mese.

Conclusioni

Si tratta di una piattaforma completa, che per i costi di utilizzo è accessibile a liberi professionisti, agenzie e piccole aziende, che hanno necessità di estrarre valore dai dati, senza spendere cifre troppo alte per capire il mercato di riferimento ed i concorrenti con i quali confrontarsi. 

Tutorial per web scraping

Come eseguire scraping e fare download di file PDF

Se stai ricercando aziende, prodotti o servizi, probabilmente scoprirai che questi solitamente forniscono i loro white paper, cataloghi di prodotti, set di dati, report o infografiche in formato PDF.

Il problema è che trovare e scaricare questi documenti è un processo noioso e che richiede tempo, specialmente quando si devono visitare molte pagine e siti web.

La buona notizia è che Hexomatic ha un’automazione super-facile per trovare file e documenti, che può rilevare file PDF su qualsiasi sito web ed eseguirne lo scraping in pochi minuti. Puoi poi utilizzare la nostra automazione per comprimere i file e salvarli direttamente sui tuoi dispositivi.

Segui i passaggi per farlo in modo automatico.

Se non sei ancora un utente, registrati su Hexomatic.

Passo 1: Crea un nuovo workflow Per iniziare, crea un nuovo workflow vuoto e scegli l’automazione di input dei dati come punto di partenza.

Passo 2: Aggiungi l’URL della pagina web Successivamente, aggiungi l’URL della pagina web, selezionando l’opzione List of inputs/ Manual paste.

Qui, puoi aggiungere un elenco di URL. Nota che ogni nuova riga è considerata un nuovo URL.

Passo 3: Aggiungi l’automazione di Files & Documents finder, selezionando l’input dei dati come fonte. Specifica il tipo di file (in questo caso, è PDF).

Se non trovi il tipo di file desiderato nell’elenco a discesa, puoi specificarlo nel campo delle opzioni personalizzate.

Questa automazione eseguirà lo scraping e restituirà i link ai file PDF rilevati sulla pagina.

Segui i prossimi passaggi per vedere come puoi salvare i file direttamente sul tuo dispositivo.

Passo 4: Aggiungi l’automazione Files compressor, selezionando tutti i link ai file come fonte.

Con questa automazione, tutti i link rilevati verranno memorizzati in un unico file zip.

Poi, clicca su Continua.

Passo 5: Esegui o programma il tuo workflow

Passo 6: Visualizza e salva i risultati

Una volta che il workflow ha terminato l’esecuzione, puoi visualizzare i risultati.

Qui, abbiamo ottenuto tutti i link ai file PDF e il link di archiviazione per i file compressi. Cliccando su questo link, scaricherai il file zip contenente i file eseguiti in scraping.

Puoi anche esportare i link in Google Sheets o CSV.

Come fare scraping di email da qualsiasi sito web

Le informazioni di contatto dei potenziali clienti e lead sono vitali per qualsiasi business.

Tutti noi abbiamo bisogno degli indirizzi email dei potenziali clienti per incrementare le vendite e migliorare le campagne di email marketing, arricchire il CRM, ottenere feedback su prodotti o servizi, ecc.

Ci sono due modi possibili:

• ottenere le email dai siti web manualmente

• utilizzare uno strumento di web scraping.

La raccolta manuale di email richiede tempo e può aumentare i costi dell’email marketing poiché potrebbe essere necessario impiegare diverse risorse per portare a termine il lavoro. Con risorse limitate, può diventare ancora più impegnativo, lungo e improduttivo.

La strategia più veloce è estrarre le email utilizzando web scraper come Hexomatic.

In questo tutorial, vedremo come ottenere indirizzi email dai siti web in due modi diversi utilizzando Hexomatic:

1. Tramite l’automazione Emails Scraper per estrarre indirizzi email trovati su qualsiasi pagina web.
2. Tramite l’automazione Email Discovery per eseguire una ricerca su internet per andare a cercare indirizzi email.

Il risparmio di tempo è una delle parti fondamentali del flusso di lavoro al giorno d’oggi, quindi queste automazioni sono fondamentali per gestire il tempo in modo efficiente.

Come estrarre indirizzi email da un elenco di pagine web

In questa sezione, vedremo come estrarre facilmente le email già identificate su qualsiasi pagina web utilizzando Emails Scraper.

Passo 1: Crea un nuovo flusso di lavoro Per iniziare, crea un nuovo flusso di lavoro scegliendo l’opzione “Blank”.

Passo 2: Aggiungi il tuo elenco di URL

Scegli l’automazione di input dei dati come punto di partenza. Quindi, aggiungi l’URL della pagina web da cui desideri estrarre le email utilizzando l’automazione di input dei dati e l’opzione List of inputs/ Manual paste.

Passo 3: Aggiungi l’automazione Emails Scraper

Successivamente, aggiungi l’automazione Emails Scraper, selezionando Input dati come fonte. Poi, imposta il limite predefinito per dominio e se vuoi un proxy, la modalità desiderata. Clicca su Continua.

Per questa automazione, puoi scegliere tra le opzioni Veloce e Standard. Nota che l’opzione Veloce carica i risultati più rapidamente ma potrebbe avere un tasso di errore maggiore.

Passo 4: Esegui o programma il flusso di lavoro Puoi eseguire il tuo flusso di lavoro o programmarlo.

Passo 5: Visualizza e salva i risultati Una volta terminata l’esecuzione del flusso di lavoro, puoi visualizzare i risultati ed esportarli in CSV o Google Sheets. Assicurati sempre di verificare gli indirizzi email per evitare problemi di deliverability o essere inserito nella lista nera.

Come utilizzare l’automazione Emails Discovery per trovare indirizzi email per qualsiasi nome di dominio

Il sito web da cui hai bisogno degli indirizzi email non pubblica i loro indirizzi email?

In questa sezione, vediamo come utilizzare Discover Emails per eseguire una ricerca approfondita e trovare gli indirizzi email di dipendenti e dipartimenti di qualsiasi sito web.

Passo 1: Crea un nuovo flusso di lavoro Per iniziare, crea un nuovo flusso di lavoro scegliendo l’opzione “Vuoto”.

Passo 2: Aggiungi l’URL del sito web target Scegli l’automazione di input dei dati come punto di partenza. Successivamente, aggiungi l’URL del sito web da cui intendi estrarre le email utilizzando l’opzione List of inputs/ Manual paste.

Passo 3: Aggiungi l’automazione Email Discovery

Aggiungi l’automazione Email Discovery, selezionando input dati come fonte. Poi, seleziona il limite dei risultati per dominio e clicca su Continua.

Questa automazione cercherà sul web per trovare qualsiasi indirizzo email pubblicato per un dato nome di dominio.

Passo 4: Esegui o programma il flusso di lavoro Puoi eseguire il tuo flusso di lavoro o programmarlo.

Passo 5: Visualizza e salva i risultati Una volta terminata l’esecuzione del flusso di lavoro, puoi visualizzare i risultati ed esportarli in CSV o Google Sheets.

Come catturare screenshot e schermate di siti web in massa

Le schermate dei siti web sono ideali per archiviare le landing page dei competitor, salvare un’istantanea di una pagina, eseguire test visivi o semplicemente raccogliere ispirazione da rivedere in seguito.

In questo tutorial, vedremo come catturare manualmente una schermata di un sito web sul tuo computer e come automatizzare o programmare questa operazione su larga scala utilizzando Hexomatic.

Come catturare schermate manualmente sul tuo computer

I computer Windows e Mac sono dotati di scorciatoie integrate per catturare manualmente le schermate, vediamo rapidamente come accedervi:

Come fare uno screenshot sul tuo Mac

Per fare uno screenshot, premi e tieni premuti contemporaneamente questi tre tasti: Shift, Control, Command e 4.

Seleziona le dimensioni dello screenshot e verrà salvato per impostazione predefinita sul desktop.

Come fare uno screenshot sul tuo computer Windows

Per fare uno screenshot, premi e tieni premuti contemporaneamente questi tre tasti: tasto Windows + Shift + S. Nelle ultime versioni di Windows è presenta anche l’applicazione “Cattura” che ti permette di salvare porzioni di schermo sia come immagine che come video.

Ma cosa puoi fare se vuoi catturare schermate di centinaia di pagine web e automatizzare il processo?

Come catturare schermate automaticamente utilizzando un workflow predefinito di Hexomatic

Hexomatic ha un flusso di lavoro predefinito che consente a chiunque di catturare schermate da un elenco di URL. Vai semplicemente alla sezione Modelli di flusso di lavoro del sito web e cerca il workflow “Capture screenshots of a list of URLs”.

Clicca sul pulsante “Run Workflow” e sarai reindirizzato alla pagina del flusso di lavoro.

Puoi fornire un elenco di URL e generare automaticamente una schermata di ogni pagina in uno dei 7 diversi formati di schermo, da piccoli dispositivi mobili a desktop 4K, in pochi minuti.

Copia e incolla gli URL nel campo pertinente ed esegui il flusso di lavoro in pochi minuti!

In pochi minuti, avrai tutte le schermate degli URL menzionati catturate nella dimensione del dispositivo preferita.

Come catturare schermate e screenshot in massa da zero

Invece di utilizzare il workflow predefinito, puoi anche crearlo da zero seguendo i passaggi indicati di seguito:

Passo 1: Crea un nuovo workflow

Crea un nuovo workflow vuoto dalla dashboard di Hexomatic.

Scegli l’automazione “Data Input automation” come punto di partenza.

Passo 2: Fornisci un elenco di URL

Ora scegli come vuoi fornire i tuoi URL:

– Puoi caricare un file CSV con gli URL dei siti web

– Puoi caricare un file TXT

– Oppure puoi copiare e incollare un elenco di URL

Passo 3: Aggiungi l’automazione Screenshot capture

Aggiungi l’automazione Screenshot capture al tuo workflow scegliendo la dimensione dello schermo del dispositivo e se catturare l’intera pagina o solo la parte visibile.

Passo 4: Esegui o programma il tuo flusso di lavoro

Quando il tuo flusso di lavoro è completato, potrai scaricare un file CSV contenente tutte le schermate nel formato richiesto.

Quando serve catturare screenshot in massa

• Assicurarsi della qualità dello sviluppo del nostro sito: I team di sviluppo possono utilizzare l’automazione di cattura schermata per documentare modifiche e miglioramenti effettuati durante gli aggiornamenti del sito web. Questo può essere particolarmente utile per verificare i cambiamenti visivi in diverse fasi del processo di sviluppo o in diversi ambienti browser.
• Sales: Per i team di vendita e SDR, puoi utilizzare questo per creare in massa schermate del dominio o delle landing page dei potenziali clienti da includere in email di contatto o rapporti speciali.
• E-commerce: Se sei un’azienda di e-commerce, puoi archiviare le landing page o le pagine prodotto dei concorrenti una volta o su base programmata per una revisione futura.
• Marketing e Branding: I team di marketing possono utilizzare l’automazione di cattura schermata per monitorare i cambiamenti nel loro branding su varie piattaforme online. Può anche essere utilizzata per garantire che i siti partner stiano visualizzando correttamente i materiali di brand aggiornati.
• Monitoraggio SEO e SEM: I team SEO possono automatizzare la cattura delle pagine dei risultati dei motori di ricerca (SERP) per monitorare l’efficacia delle loro strategie SEO nel tempo. Analogamente, i team SEM possono catturare schermate dei loro annunci in vari contesti per analizzare la visibilità e l’aspetto delle pubblicità online.
• Documentazione del supporto clienti: I team di supporto possono creare guide passo-passo per la risoluzione dei problemi o tutorial catturando schermate dei passaggi necessari. Questo contenuto visivo può migliorare l’efficacia della documentazione di supporto, rendendola più facile da seguire e comprendere.
• Analisi dei competitor: I marketer possono utilizzare le catture di schermate automatiche per mantenere un record delle modifiche al sito web dei concorrenti, delle attività promozionali e delle strategie di prezzo. Questo record continuo può fornire preziose informazioni sulle tendenze del mercato e sui comportamenti dei concorrenti.
• Formazione e Educazione: In contesti educativi, le schermate automatiche possono aiutare nella creazione di materiali di formazione, catturando importanti lezioni online o archiviando risorse educative per l’apprendimento asincrono.

FAQ

Q: Cos’è Hexomatic?

A: Hexomatic è un software di automazione del marketing che utilizza strumenti di web scraping per estrarre dati dalle pagine web e automatizzare vari compiti di marketing.

Q: Come funziona Hexomatic per il web scraping?

A: Hexomatic funziona come un web scraper, utilizzando bot di scraping per raccogliere dati dai siti web di destinazione. Può estrarre informazioni in tempo reale e analizzare i dati raccolti.

Q: Quali tipi di dati posso estrarre con Hexomatic?

A: Con Hexomatic, puoi estrarre grandi quantità di dati dal web, inclusi dati non strutturati, dati in tempo reale e tipo di dati correlati ad articoli e contenuti web.

Q: Come posso correlare i dati estratti con Hexomatic?

A: Hexomatic offre funzionalità per correlare i dati estratti dai siti web, permettendoti di analizzare e utilizzare i dati in modo efficace per strategie di marketing personalizzate.

Q: Hexomatic è sicuro da usare per il web scraping?

A: Sì, Hexomatic rispetta le politiche e i termini di servizio dei siti web di destinazione. Tuttavia, è importante utilizzare il web scraper in modo responsabile e rispettare le normative vigenti.

Q: Posso usare Hexomatic con altri database?

A: Sì, i dati estratti da Hexomatic possono essere facilmente integrati con altri database, permettendoti di analizzare e utilizzare i dati in combinazione con altre fonti di dati.

Q: Quali benefici offre l’automazione del marketing con Hexomatic?

A: L’automazione del marketing con Hexomatic consente di risparmiare tempo, raccogliere e analizzare grandi quantità di dati web in modo efficiente e implementare strategie di marketing personalizzate in tempo reale.

Q: Hexomatic è adatto a tutti i tipi di aziende?

A: Sì, Hexomatic è un versatile strumento di web scraping e automazione del marketing che può essere facilmente adattato a diverse esigenze di business, indipendentemente dalla dimensione o dal settore.

Q: Come posso iniziare a usare Hexomatic?

A: Per iniziare a usare Hexomatic, è necessario registrarsi sulla piattaforma, configurare i bot di scraping e iniziare a estrarre dati dai siti web di interesse. La piattaforma offre guide dettagliate e supporto per facilitare l’uso.

Q: Hexomatic supporta l’analisi di dati in tempo reale?

A: Sì, Hexomatic può estrarre dati in tempo reale dai siti web, permettendoti di ottenere informazioni aggiornate e attuabili per le tue campagne di marketing.

Q: Cos’è il web scraping e come funziona in Hexomatic?

A: Il web scraping è una tecnica di raccolta di dati da un sito web. In Hexomatic, lo scraping dei dati viene effettuato utilizzando strumenti di scraping avanzati che permettono di estrarre i dati automaticamente da vari siti web.

Q: Come posso utilizzare Hexomatic per fare web scraping?

A: Puoi utilizzare Hexomatic come uno strumento di web scraping configurando i suoi crawler per raccogliere dati da siti specifici. Ti permette di personalizzare le tue attività di scraping in base alle tue esigenze di business.

Q: Quali sono i migliori strumenti di web scraping offerti da Hexomatic?

A: Hexomatic offre alcuni dei migliori strumenti di web scraping, inclusi web crawler e data scraper, per facilitare l’estrazione dei dati in maniera efficiente e automatizzata.

Q: È legale utilizzare Hexomatic per il scraping dei dati?

A: L’utilizzo di Hexomatic e di altri strumenti di scraping deve essere sempre conforme alle leggi locali e ai termini di servizio del sito web da cui si desidera estrarre i dati. È importante effettuare lo scraping in maniera etica e responsabile.

Q: Posso effettuare lo scraping di javascript con Hexomatic?

A: Sì, Hexomatic è in grado di gestire il scraping di dati anche da siti web che utilizzano javascript, grazie ai suoi strumenti avanzati che possono navigare pagine dinamiche.

Q: Come gestisce Hexomatic l’indirizzo IP durante il processo di web scraping?

A: Hexomatic offre opzioni per ruotare e mascherare l’indirizzo IP durante le attività di scraping, riducendo il rischio di blocchi o restrizioni da parte dei siti web target.

Q: Quali sono le applicazioni comuni del processo di web scraping con Hexomatic?

A: Le applicazioni comuni includono ricerche di mercato, monitoraggio dei prezzi, raccolta di recensioni e analisi competitive. Hexomatic ti permette di automatizzare queste attività per migliorare l’efficienza del tuo business.

Q: Hexomatic può fare scraping senza violare i termini di servizio di un sito?

A: Sì, Hexomatic è progettato per operare in modo conforme, ma è fondamentale che l’utente verifichi sempre i termini di servizio di un determinato sito web prima di iniziare l’attività di scraping.

Q: Quali sono i vantaggi dell’utilizzo di Hexomatic per l’estrazione dei dati?

A: I vantaggi includono l’automazione del processo di web data extraction, la possibilità di raccogliere dati da siti complessi e l’integrazione con altri strumenti di marketing per ottimizzare le tue strategie di business.