Matomo - importazione dati da Google Analytics - help!

[scerifforosso]

Matomo - importazione dati da Google Analytics - help!

Ciao a tutti (per semplicità taggo già l'esperto @kal )!

Dopo aver con successo installato Matomo OnPremise ora il prossimo step è l'importazione diei dati da GA. Seguendo la guida ufficiale (il video è un po' obsoleto, gli screenshot della guida testuale sono più aggiornati) sono arrivato fino alla fine dello step2, ossia ho creato le credenziali Oauth2 su Google API, scaricato il file json di configurazione che ho importato con successo in Matomo e autorizzato correttamente Matomo ad accedere.
Ora il problema è che non compare nessuna opzione nel menu "schedule an import". Ho cercato online qualche info a riguardo ma senza successo. (nota bene: il messaggio azzurro in alto compare sempre, anche prima di caricare il file json con le credenziali e autorizzare l'accesso).
Qualcuno ha già affrontato e risolto questo problema? Grazie a tutti per l'aiuto!

[kal]

@scerifforosso io ho in programma di farlo nei prossimi giorni!! Quando ho fatto sicuramente avrò dei feedback da dare.

[kal]

Allora, ho finalmente fatto il primo test... ed in quella scheda "Programma un'Importazione" io vedo tutto il modulo da compilare...

E infatti inserite le configurazioni è andato tutto liscio...

Mi sa che mi ci vorrà un po' perché sul mio sito ho dati dal 2012!!!

E visto questo dettaglio qua:

Nota: lo eseguiamo quotidianamente poiché esiste un limite giornaliero di richieste API che Google applica. Una volta raggiunto, non possiamo continuare a importare fino al giorno successivo. (Questo limite è raggiunto, in genere, dopo avere importato 4 mesi di dati).

Sono circa 3gg per un anno di dati.

Per me che ho 10 anni da importare, mi ci vorrà un mese intero!!!

Wow.

Questo comunque perché ho usato il tier gratuito delle API. In teoria pagando si fa prima.

---

EDIT: per la cronaca, sta già macinando...

Altro ninjaedit così tengo nota delle cose... l'import è partito abbomba ma nei report non si vede ancora nulla. Credo sia normale perché nella schermata di riepilogo ora ho:

Vediamo come prosegue!

[kal]

Per la cronaca: l'import sta andando avanti pian pianino da solo:

Per il momento non riesco a vedere i dati nei rapporti, anche se è segnato come "Archiviato". Devo capire se è una cosa normale o no.

[sabaxaba]

Sono perplesso.
Anch'io sono riuscito a far partire l'importazione di google analytics su un sito di test che non ha tanto traffico

Io i dati nei report li vedo, anche se non capisco perchè alcune cose le importa e alcune no.
Ad esempio importa le visite, il tempo di visita, country, resolution, time, pages, ma non ertry pages , exit pages.
Importa nei channels i seach engines ma non i website

Sono solo alcuni esempi su cose che mi aspettavo importasse senza dover mappare le dimensioni a mano
Mi sembra strano con non importi i siti di riferimento ad esempio

Inoltre nonostante sia arrivao a meno di 10000 chiamate api si è fermato (esattamente a 4 mesi di dati importati) .
Quindi non si ferma quando riceve l'errore di rate_limit, ma importa 4 mesi alla volta. Poi ripartirà da solo domani o lo dovrò far ripartire io a mano?

[kal]

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Quindi non si ferma quando riceve l'errore di rate_limit, ma importa 4 mesi alla volta. Poi ripartirà da solo domani o lo dovrò far ripartire io a mano?

Riparte domani. Sono 4 mesi al giorno nel tier gratuito.

Se hai usato l'opzione senza Google Workspace (come ho fatto io per testare) dovrai poi rifare l'auth ogni 7gg.

RIP per me che ho provato ad importare dati dal 2012

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Io i dati nei report li vedo

Interessante, hai fatto l'import su una proprietà pulita?

In teoria da documentazione dovrebbe importare anche i goal, anche se non ho ancora potuto verificare.

[sabaxaba]

@kal si. Ha creato da solo una nuova proprietà. È riportato anche in documentazione

[scerifforosso]

@kal purtroppo dopo settimane nel mio caso la schermata di configurazione è sempre vuota, temo dipenda dal fatto che la mia implementazione l'ho fatta usando Wordpress nativo anzichè installare l'on-premisis stand-alone. Ho anche visto che invece usando Matomo Cloud le opzioni ci sono tutte, tuttavia non intendo switchare a tale versione. Comunque grazie mille per le dritte fino ad ora!

[sabaxaba]

@kal ha detto in Matomo - importazione dati da Google Analytics - help!:

Riparte domani. Sono 4 mesi al giorno nel tier gratuito.

pensavo che la limitazione fosse nella quota delle api di google analytics ed invece è nel plugin
In produzione pensavo di aumentare la quota delle chiamata giornaliera alle api ma ciò non risolve.

Non ho trovato nessuna documentazione relativa alla rimozione del limite dei 4 mesi nel plugin

Ne sai qualcosa?

[kal]

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Ha creato da solo una nuova proprietà. È riportato anche in documentazione

Ma che pirla. Ovviamente ho due proprietà con lo stesso nome e non mi sono reso conto della cosa.

Ti confermo che

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Importa nei channels i seach engines ma non i website

E adesso mi metto in cerca per capire il perché.

Per quanto riguarda questo, invece...

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

pensavo che la limitazione fosse nella quota delle api di google analytics ed invece è nel plugin

Mi sembra strana questa cosa, non è menzionata da nessuna parte.

Qua invece scrivono:

Note: Google imposes a daily limit on the number of API requests you can make each day (at most 50,000). The import will hit this limit after importing about 4 months of data where every day has data. This takes just a couple of hours.

https://matomo.org/faq/general/running-the-google-analytics-import/

Quindi secondo me è normale. Rimuovendo il limite dovrebbe andare avanti finché hai utilizzi disponibili.

[kal]

Ok, cercando di capire come fare per fare il merge di due proprietà... non c'è un metodo documentato, ma...

https://github.com/matomo-org/matomo/issues/7650#issuecomment-759959670

Basta:

1. aggiornare gli ID nelle tabelle del sito che vuoi unire
2. modificare le date di partenza nel campo ts_created (rif.)

Ovviamente backuppare prima, sicuramente testerò.

[kal]

@kal ha detto in Matomo - importazione dati da Google Analytics - help!:

Qua invece scrivono:

Note: Google imposes a daily limit on the number of API requests you can make each day (at most 50,000). The import will hit this limit after importing about 4 months of data where every day has data. This takes just a couple of hours.

https://matomo.org/faq/general/running-the-google-analytics-import/
Quindi secondo me è normale. Rimuovendo il limite dovrebbe andare avanti finché hai utilizzi disponibili.

Effettivamente i conti non tornano nel pannello di Google Cloud:

Il plugin a quanto pare si ferma a 10.000 e non a 50.000.

[sabaxaba]

@kal Ho visto il tuo post in aggiunta al mio sul forum di matomo. Speriamo ci rispondano.
Ho anche cercato se il plugin google analytics importer fosse presente tra quelli premium nel marketplace di matomo, magari a pagamento toglieva i limiti. Ma non l'ho trovato.

[kal]

@sabaxaba ho provato a scartabellare un poco nei sorgenti PHP del plugin ma c'è troppa roba e ho poco tempo al momento.

Di buono c'è da dire che è ben commentato.

Speriamo che nel frattempo qualcuno risponda!

[sabaxaba]

@kal ha detto in Matomo - importazione dati da Google Analytics - help!:

Ti confermo che
@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Importa nei channels i seach engines ma non i website

non ti sembra strano anche a te dover fare

[kal]

@sabaxaba sì che è strano. Mi aspettavo fossero supportate.

Anche perché quel mapping lì se ho capito bene va a pesare sulle custom dimension (che sono comunque limitate, per quanto tu possa alzare il limite) e non usa le dimensioni standard di Matomo.

Comunque io le pagine di entrata e uscita le ho importate:

Ma ti confermo che mancano i siti referenti:

Manca la metrica "Azioni nel sito" e "Azioni per visita" ma in realtà la prima ha un equivalente in GA che è banalmente la metrica "ga:hits" quindi anche questa mi sarei aspettato venisse importata.

Mi sa che il plugin ha bisogno di un bel contributo della community

[kal]

Aggiungo, il messaggio che si riceve nel backend quando ha finito l'importazione giornaliera è questo:

Quindi effettivamente uno viene portato a pensare che abbia fatto 50.000 chiamate API.

Ma poi su Google Cloud risultano circa 10.000.

[sabaxaba]

@kal Ho appena farto partire una nuova importazione su un altro sito.
Voglio verificare se fa 4 mesi su entrambi i siti in importazione al giorno e se il mapping su questo nuovo sito avvenga come ha fatto a te quindi entry page ed exit page presenti... ti faccio sapere

[sabaxaba]

@sabaxaba
Ti confermo che nonostante la prima importazione oggi dica che ha raggiunto il rate limit, la seconda importazione è partita senza problemi e sta importando.
Quindi suppongo che il plugin importi 4 mesi max al giorno a prescindere dalla hit disponibili sulle api

Inoltre mi sono reso conto che nei report mancanti viene indicato un errore

Si credo che questo plugin abbia bisogno di un bel pò di revisione

Per essere chiari, uso l'ultima versione di tutto sulla mia macchina di test

Ubuntu 22.04.1 LTS

[kal]

@sabaxaba ha detto in Matomo - importazione dati da Google Analytics - help!:

Quindi suppongo che il plugin importi 4 mesi max al giorno a prescindere dalla hit disponibili sulle api

Sì, infatti.

Comunque c'è sicuramente un modo per rimuovere il limite, va solo trovato