Laste inn Teamleader-tabell InvoiceLinesAll i Itgenboe161

For en kunde forvalter vi et Power BI-dashbord som har kjørt problemfritt i over et år og henter data via Teamleader-API-et. De siste dagene har vi imidlertid gjentatte ganger fått meldingen «Too many requests» fra Invantive, noe som gjør at dashbordet ikke lenger oppdateres.

I går deaktiverte vi midlertidig den automatiske oppdateringen for å unngå at vi i dag umiddelbart ville støte på oppdateringsgrensen igjen. Via live-overvåkingen har vi fastslått at tabellen Teamleader.V2Flat.InvoiceLinesAll er årsaken til problemene. På denne tabellen ser vi lastetider på flere millioner millisekunder, mens tabellen bare inneholder omtrent 5000 rader.

I morges undersøkte vi hva som forårsaker denne ekstreme forsinkelsen. Vi startet kun kallet til tabellen Teamleader.V2Flat.InvoiceLinesAll uten noen transformasjoner i tabellen, for å se om problemet lå her. Etter lang ventetid ble tabellen ikke lastet inn. Dette er bemerkelsesverdig, ettersom det her ikke utføres noen komplekse operasjoner som kan forklare denne oppførselen.

I tillegg utfører Power Query automatisk en «topp 1000»-rader-spørring. Også denne spørringen viste i overvåkingen en lastetid på over én million millisekunder, enda før tabellen var fullstendig lastet inn. Av den grunn avbrøt vi oppdateringene i forkant.

Kan dere hjelpe oss med dette?

itgenboe161
Nedlastingen av dataene ble avbrutt etter 15 minutter og 23 sekunder, sannsynligvis av brukeren.

Visningen InvoiceLinesAll utfører ganske komplekse operasjoner, men dette er ikke synlig utenfra. Den henter først alle fakturaer (Invoices). Deretter henter den InvoiceLines per Invoice (ved hjelp av tabellfunksjonen InvoiceLinesById). Avhengig av antall fakturaer kan dette bety at det kreves tusenvis av API-forespørsler for å hente all informasjonen.

Siden det ikke finnes et eget API for å hente alle fakturalinjer, er det dessverre svært ineffektivt å hente all data, noe som kan ta lang tid.

Maksimal hastighet er 200 rader per minutt. I praksis er ytelsen dårligere, og man støter raskt på fair use-grensene til Invantive Cloud. På bildet kan man se at det ble hentet 3 490 rader; dette kostet (forutsatt tom cache) 3 490 API-kall og dermed minst 17,5 minutter (1 047 000 millisekunder).

Anbefalingen er å angi et datointervall som filtertrinn.

De brukte API-kallene kan ses via knappen “Sesjon I/U-er”.

For større volumer anbefales det å kontakte Teamleader Support for å foreslå optimaliseringer, eller eventuelt bytte til et annet produkt enn Teamleader Focus. Et vanligere alternativ til Teamleader Focus er Odoo.

Se også:

Takk for forklaringen.

Da hadde jeg et spørsmål til om InvoicesLinesAll-visningen. Blir de komplekse operasjonene i denne tabellen utført av Invantive, eller blir de levert slik fra Teamleader? En løsning kan eventuelt også være at vi henter disse tabellene separat og gjør transformasjonene selv.

Visningsdefinisjonen beskriver transformasjonen:

select p.*
,      l.* prefix with 'invoice_'
from   Teamleader.V2.Invoices l
join   Teamleader.V2.InvoiceLinesById(l.id) p

Hvis det filtreres som beskrevet i lenken på et felt fra Invoices, vil tabellfunksjonen kun bli tilgjengelig ETTER filtrering.

Dette spørsmålet ble automatisk lukket etter 1 uke uten aktivitet. Det siste svaret som ble gitt, er merket som løsning.

Vennligst still et nytt spørsmål i et eget emne hvis problemet oppstår igjen. Vennligst inkluder en lenke til dette emnet i det nye spørsmålet ved å lime inn URL-en i teksten.