Problemer med oppdatering av Teamleader- og Twinfield-data

Vi bruker et Power BI-dashbord som er koblet til Teamleader og Twinfield. Dette dashbordet har kjørt i over et år uten endringer i datamodellen.

Siden i går har vi imidlertid opplevd problemer med å oppdatere dataene. Prosessen tar betydelig lengre tid enn normalt (mer enn 1 time), og til slutt mottar vi følgende feilmelding:

image

I tillegg merker vi at grensene for vår lisens blir nådd, noe vi ikke har opplevd tidligere.

Er det kjent med et problem ved henting av data fra Teamleader eller Twinfield?

Aanvullen informatie

Is het mogelijk om een (geanonimiseerde) schermafdruk van de details van het verzoek in Invantive Bridge Online Monitoring toe te voegen zoals beschreven in Meer inzicht met nieuwe Bridge Online Monitoring?

De details vindt u door te klikken op het downloadverzoek welke het onderwerp van dit onderwerp representeert.

Het downloadverzoek heeft meestal een SQL-statement waarin de tabelnaam zichtbaar is.

Gelieve tenminste de volgende gegevens zichtbaar te laten van beide kolommen:

  • de titelbalk met de request ID,
  • de statuscode, netwerkgrootte, pad en tijdstippen in de linkerkolom,
  • de foutcode en foutmelding helemaal onderaan in de linkerkolom,
  • de gehele rechterkolom inclusief het SQL statement, tabelnaam en parameterwaardes.

Bijvoorbeeld:

Controleer juiste server en gebruiker

Controleer zorgvuldig dat u zich aanmeldt op de Bridge Online-website die ook gebruikt wordt vanuit Power BI en met dezelfde gebruikersnaam. U ziet alleen de verzoeken van de Invantive Cloud-gebruiker waarmee u zich aanmeldt op de website.

Er zijn vier servers in gebruik:

  • bridge-online.cloud
  • app-online.cloud
  • bridge-online.invantive.com
  • app-online.invantive.com

De gebruikte server ziet u in uw script of broncode van rapportage.

Controleer juiste aanvraag en details

Zorg ervoor dat u het verzoek eerst selecteert om de details weer te geven. Er hoort maar één verzoek zichtbaar zijn in de schermafbeelding.

Controleer ook zorgvuldig of het verzoek een pad heeft met odata4 of apps. Verzoeken met andere paden zijn over het algemeen niet relevant voor dit doel.

Foutmelding en tips per e-mail

Daarnaast zal de Invantive Cloud-gebruiker die de foutmelding heeft op zijn e-mailadres veelal een e-mail ontvangen met een foutmelding en tips als er sprake is van een foutmelding in Power BI, Power Query, Azure Data Factory, Qlik of Tableau.

Advies is om de spam van de betrokken gebruiker te controleren op dergelijke e-mails verzonden vanaf support@invantive.com.

Vi støter fortsatt på dette problemet, hver gang vi henter data stopper det etter omtrent 1 time.

I meldingen har jeg sett følgende:
image

Jeg kjører for øyeblikket en ny dataoppdatering for å se hvor feilkodene vises i monitoroversikten. Hva kan hjelpe med å løse dette?

Den essensielle feilkoden her er itgentmm007. Dette betyr at Power BI-tjenesten starter flere prosesser enn det maksimale antallet som kan kjøres samtidig, og at de i tillegg tar ekstremt lang tid.

Det finnes noen løsningsmuligheter:

  • Gå over til et abonnement med flere parallelle nedlastinger. Vanligvis kan dette gjøres ved å bytte til det nåværende 2025 Invantive Office-abonnementet. Dette øker antallet kanaler fra 4 til 6, men begrenser antallet partisjoner for samme beløp til 25.
  • Utføre tunge nedlastinger mindre parallelt, for eksempel ved å spre dem over tid.
  • Optimalisere nedlastinger med filtre eller smartere hentemetoder.

Takk for svaret. Men etter litt undersøkelse tror jeg at problemet også ligger et annet sted. Det er nemlig veldig merkelig at etter nesten et år med å hente de samme tabellene, er det plutselig problemer med grensene (med en overskridelse på 500%).

Dette ga meg mistanke om at det er noe galt i beregningen av antall brukte sekunder per dag. Av denne grunn har jeg de siste dagene slått av oppdateringen slik at vi kan starte dagen med grensene på 0%. Deretter begynte jeg å teste i Power Query, som anvender en grense på 1000 rader på tabeller, hvor høye grensene ble for å hente noen tabeller (disse ble altså ikke utført parallelt). Innlasting av disse tabellene tok ganske lang tid, og en av dem fullførte jeg med vilje ikke for å ikke sprenge grensene. Deretter laget jeg en Excel-utskrift fra bridge online monitoring:

image

Bridge online monitoring viser altså at det er oppdatert i 579 sekunder. Men da jeg deretter så på grensene, sto det en verdi på 1677 sekunder.

image

Deretter prøvde jeg å hente tabellen Teamleader.V2.Companies@tlr. På denne tabellen var det ikke gjort noen transformasjoner, bare en filtrering på de hentede kolonnene for å hente så lite data som mulig. Dette tok 20 sekunder for 900 rader.

Etter en ny titt på bridge online monitoring så jeg at i bakgrunnen ble tabellen jeg ikke ønsket å laste inn, kjørt med en ‘top 1000’ uttalelse. Dette resulterte i verdier mellom 200.000 og 500.000 ms, mens det i disse tabellene utføres få transformasjoner.

Jeg hentet til slutt en top 1000 fra 5 tabeller. Etter en ny utskrift fra overvåkingen kom jeg ut på omtrent 2000 sekunder. Dette synes jeg er ganske høyt for en top 1000 fra 5 tabeller:

image

Merkelig nok viser overvåkingen feil antall:

image

Kan dere sjekke hva som går galt her?

Og for å komme tilbake til dette svaret fra dere:
‘gå over til en abonnementsform med flere parallelle nedlastinger. Vanligvis kan dette gjøres ved å bytte til den nåværende 2025 Invantive Office-abonnementsformen. Dette øker antall kanaler fra 4 til 6, men begrenser antall partisjoner for samme beløp til 25’

Er det ekstra kostnader forbundet med dette? Siden vi bare henter et lite antall partisjoner, er det mer ønskelig å bruke flere kanaler.

Jeg hører gjerne fra dere.

Basert på den tilgjengelige informasjonen er det ingen grunn til å anta at det er en avvik, siden det både er tidsforskjeller når det gjelder oppdateringstidspunkter og autorisasjoner. Til slutt skal alt konvergere; dette tar normalt maksimalt 15 minutter.

Overgangen fra den tradisjonelle Invantive Office-abonnementsformen til Invantive Office 2025-abonnementsformen medfører ingen ekstra kostnader. Den tradisjonelle formen tilbys ikke lenger, men eksisterende abonnementer er ikke automatisk konvertert. Dette kan muligens skje over lengre tid.

Deze vraag is automatisch gesloten na 1 week inactiviteit. Het laatste gegeven antwoord is gemarkeerd als oplossing.

Gelieve een nieuwe vraag te stellen via een apart topic als het probleem opnieuw optreedt. Gelieve in de nieuwe vraag een link naar dit topic op te nemen door de URL er van in de tekst te plakken.