Siste nytt i Fabric

Databases 

• Introducing Fabric SQL database (public preview): SQL Database er tilgjengelig som native solution i Fabric. Den er også den første løsningen på det nye «Database» workloadet i Fabric. Les mer her 

Data Warehouse 

• Cold query performance improvement: Minsker cold query overhead med 40% på spørringer på data som ikkje ligger i cache. 

• Service principal support for Fabric Data Warehouse: Service Principal tilgjengelig for Data warehouse. Dette fører blant annet til at bedre integrasjon med f.eks. SQL Server Management Studio og bedre muligheter for granular access control. 

Data Engineering 

• Fabric API for GraphQL is now generally available with exciting new features (generally available): Fabric API for GraphQL gjør at man enkelt kan sette opp API på sine data, med kun eit par tastetrykk. Azure SQL og Fabric SQL er lagt inn som nye kilder. Les mer her 

• Support of spaces and special characters in Delta table names: Mellomrom og spesialkarakterer er nå tilgjengelig I tabellnavn på Delta tables. Noen begrensninger gjelder. 

Data Science 

• Introducing low code AutoML(preview): AutoML gir brukere mulighet til å utvikle maskinlærings-modeller. Det kan forenkle prosesser som hyperparameter tuning og feature engineering. Les mer her 

Data Factory 

• Table and partition refreshes added to semantic model refresh (preview): I pipelines finnes det nå en aktivitet som gir mulighet til å oppdatere semantisk modell og spesifisere hvilke tabeller og partisjoner som skal oppdateres. Les mer her 

• Import and export your Fabric Data Factory pipelines: Gir mulighet til å eksportere og importere pipelines, som gjør at man f.eks. kan gjenbruke pipelines i andre workspaces uten å måtte bygge den opp fra scratch. 

• New connectors improvements: Forbedringer på Snowflake, Dataverse, PostgreSQL og Azure PostgreSQL connectorene. 

• New capabilities in Copilot for Data Factory to efficiently build and maintain your Data pipelines (preview): Copilot er nå tilgjengelig for Data Pipelines i Data Factory. Copilot kan bistå med å bygge, forklare og feilsøke komplekse Data Pipelines. Les mer her 

• OneLake datahub is now the OneLake catalog in Modern Get Data experience: OneLake datahub har nå blitt omdøpt til OneLake Catalog. Foreløpig vil det være mye av den same funksjonen, men i fremtiden vil Microsoft utvide funksjonalitet slik at Data Scientists, Engineers, Analysts og beslutningstakere vil utforske og oppdage data på en og samme plass. Les mer her 

Real-Time Intelligence 

Real-Time Intelligence is now generally available (GA): 

En rekke funksjoner for sanntidsanalyse og varslinger i Fabric er nå generelt tilgjengelige – de er altså offisielt klar for å tas i bruk i produksjonsmiljøer. Dette omfatter blant annet Real-Time Hub, forbedret Eventstream, Real-Time Dashboards og Activator. Noen funksjoner i Real-Time Intelligence er fremdeles i forhåndsvisnings-status. Les mer her 

Workspace monitoring (preview): 

Dette er en ny funksjonalitet for å overvåke aktiviteter i workspacet. Workspace monitoring samler inn aktivitetslogger for følgende Fabric gjenstander: Power BI semantiske modeller, Eventhouse og GraphQL. Kusto (KQL) og Real-Time Dashboards kan brukes for å analysere dataene og muliggjør varsling. Støtte for overvåking av flere typer Fabric gjenstander vil bli lagt til etter hvert. Les mer her 

Core 

• Trusted workspace and Managed private endpoints in any Fabric capacity: Trusted workspace gir tilgang til Azure storage accounts som er lukket bak brannmur. Man “whitelister” et workspace slik at det kan få tilgang til å lese fra storage accounten. Managed private endpoints gir Fabric tilgang til datakilder som er lukket bak en brannmur eller som ikke er tilgjengelig på det åpnet internettet. Begge disse funksjonene trengte man tidligere F64 eller høyere for å få tilgang til. Les mer her og her. 

• Git integration (generally available): Git er nå generally available i Fabric. Les mer her 

One Lake 

• Access Databricks Unity Catalog tables from Fabric (public preview): Nå kan man nå tabeller fra Databricks Unity Catalog direkte i Fabric. Les mer her. 

• Google Cloud Storage shortcuts and S3 Compatible shortcuts (generally available): Shortcuts til Google Cloud Storage og Amazon S3 er nå generally available. Les mer her 

Data Warehouse 

• Copilot for Data Warehouse (public preview): Copilot er tilgjengelig i public preview. Copilot for Data Warehouse gir assistanse i å utforske data og gi innsikt ved hjelp av T-SQL analyse. Kan bidra med å blant annet generere T-SQL kode, forklare kodesnutter og rette opp i feil som oppstår. Les mer her 

• TSQL Notebook (public preview): T-SQL Notebooks gir mulighet til å skrive spørringer og transformasjoner ved hjelp av notebooks. Det kan lese fra warehouse og SQL endepunkt. Ved å ta i bruk T-SQL notebooks får man de kraftige verktøyene fra notebooks tilgjengelig, som visualisering, dokumentering av kode og komplekse T-SQL spørringer. Les mer her 

• JSON support enhancements: Forbedringer for JSON funksjonalitet i Datawarehouse, SQL endpoints for Lakehouse og mirrored databaser. Forbedringene inkluderer «FOR JSON» spørring, som formater resultat av T-SQL spørringer til JSON tekst. «JSON_OBJECT» og «JSON_ARRAY» gir bruker mulighet til å formatere celler som JSON objekter og lister, og man slipper da pakke ut JSON objekter. 

Data Engineering 

• High Concurrency mode for Notebooks in Pipelines (public preview): High concurrency mode betyr at Notebooks kan dele spark session i pipelines. Dette betyr mindre oppstartstid for notebooks som kjører sekvensielt og kan føre til at pipelines kjører raskere. Er dog noen begrensninger, som at sesjonen kan kun brukes av samme bruker, i samme workspace og samme pipeline. Les mer her 

• Session Expiry Control in Workspace Settings for Notebook Interactive Runs (public preview): Man kan nå styre hvor lang tid det tar før en spark sesjon stopper. Dette kan være hendig å justere slik at man slipper å komme tilbake fra lunsj og måtte starte en ny sesjon. Default er 20 minutter. Man kan også se mer informasjon om en sesjon, som hvor lenge det er igjen før den timer ut og hvilke runtime som kjøres. Les mer her 

• Native Execution Engine on Runtime 1.3 (public preview): Native Execution Engine kan øke ytelse av Spark jobber og spørringer. Microsoft sier at man vil se økningene hvis man jobber med data i Parquet og Delta format, jobber med komplekse spørringer og transformasjoner som utnytter engine’s kolonne prosessering og vektoriseringsmuligheter.  Les mer her 

Data Science 

• Announcing Public Preview: Share Feature for Fabric AI Skill (public preview): Gir mulighet til å dele AI Skill med andre brukere. Man kan invitere brukere til å samarbeide på samme AI Skill og utvikle den videre. Andre kan se konfigurasjonen man har satt på AI Skills uten å måtte endre noe. Andre kan sende spørringer og få svar fra allerede utviklede AI Skill. Les mer her 

• Data Wrangler now supports Spark DataFrames and PySpark code generation (generally available): Data Wrangler, som er it verktøy for å utforske data, kan nå brukes på Spark DataFrame og pandas DataFrames. PySpark kode kan også genereres for å utforske dataen, da det før kun var python kode som kunne genereres. Les mer her 

Data Factory 

• Fabric Pipeline Integration in On-premise Data Gateway (generally available): Dette gir oss tilgang til å direkte koble kilder som er on-premise i Data Factory Pipelines. Brukere kan beholde data sikkert on-premise, men likevel ta i bruk Microsoft Fabric. Les mer her 

• Mirroring Azure SQL Database: Gir flere muligheter til innenfor SQL’s Dynamic Definition Language. Man kan nå bruke funksjoner som Drop table, Rename Table med mer, når tabellen fortsatt blir speilet. Les mer her 

• New Azure Data Factory Item: Nå kan man integrere tidligere Azure Data Factory instanser i Fabric Data Factory. Dette betyr at man kan trigge, utfør og monitorere pipelines man har i Azure Data Factory. Dette kan være en veldig fin start på å starte migreringen over til Fabric slik at man kan gjenbruke det man allerede har, men likevel drive nyutvikling i Fabric. Les mer her 

Real-Time Intelligence 

• Creating a Real time Dashboard by Copilot: Copilot kan nå brukes for å lage Real time Dashboard direkte i Real-Time huben. Copilot vil se gjennom tabellene og automatisk lage dashboard med to faner. En med innsikt i dataen og en med data profil som inneholder et utdrag av data, mer informasjon som ligger i tabellene og tabellskjema. Les mer her 

• Eventstream’s Integration with Managed Private Endpoint: Dette gir oss mulighet til å streame data fra Azure ressurser som tidligere har vært lukka bak en brannmur. Data blir sikkert flyttet via et privat nettverk. Les mer her 

• Real-Time Dashboards Integration with GitHub: Real-Time Dashboards er tilgjengelig for git. Dette fører til enklere samarbeid på Real-Time Dashboards og gir versjonskontroll. Les mer her 

Annet 

• DP-700 Fabric Data Engineer Associate certification: Microsoft har lansert ny sertifisering, denne gang rettet mer mot Data Engineering i Fabric. Den ble lansert i beta 22.oktober. Les mer her