Simplicate tabel kan niet worden geladen in Power BI-service

Ik heb een probleem. Ik gebruik Simplicate als bron en de PowerBI-service als bestemming.

In Simplicate is er een tabel Simplicate.Timeline.TimelineLinkedMessages@spe die niet geladen kan worden naar de Power BI service datamart.

Standaard gebruik ik filters in de datamart, en het filtercriterium wordt doorgevouwen (folded) naar de serverkant. De filters zijn meestal datums om alleen de gegevens van de laatste dagen op te halen, bijvoorbeeld:

([created] >= "2023-10-01")

Voor deze tabel kan het filter niet gefold worden, en na een tijdje begint Invantive de hele tabel te downloaden. Met meer dan 100.000 records is dat niet haalbaar.

Hier is een voorbeeld van Bridge Online Monitoring:

  • Tabelnaam Simplicate.Timeline.TimelineLinkedMessages
  • SQL-statement
select t.* from Simplicate.Timeline.TimelineLinkedMessages@spe t where ([created] >= :w1) limit 100
  • Parameterwaarden
w1 = 2023-11-25 (string)
  • From Cache (3.600 sec)
  • Cache Only
  • Rows 0
  • Total Duration (ms) 89.043
  • Processing Duration (ms) 89.043

Het proces stopt bij “start yielding data”, en na een tijdje begint een nieuwe download zonder toegepast filter.

Heeft iemand een idee wat hiervan de oorzaak kan zijn, en wat de oplossing is? Ik kan op verzoek meer details geven.

The reason for a new download starting without a filter applied is probably something from the dataset definitions. Invantive Bridge Online does not itself trigger new downloads.

Given the query:

select t.*
from   Simplicate.Timeline.TimelineLinkedMessages@spe t 
where  ([created] >= :w1) 
limit  100

the filter is being included. Depending on the platform connected to and it’s capabilities, this filter can be forwarded to the platform (“server-side filtering”).

The actual call being made can be found in the view SessionIOs@DataDictionary after running and canceling the query on Simplicate before. See also What API calls did Invantive SQL actually perform?.

It is recommended to check that data dictionary view for the actual behaviour.

Probably based upon the text of the comment, created is not included in the filters sent to the Simplicate API-server.

In that case it is recommended to check whether there are any other filter criteria that are server-side filterable, and return a subset neede, encompassing all the data using the filter on created.

Please make sure that (specifically for Simplicate) the dates are specified as text (see Limit Data load from Simplicate on Invantive Cloud to Azure Data Factory - 6 van forums).

In case assistance is needed, it is recommended to use a short consult to get assistance.