Datu replicēšana Azure SQL Database, izmantojot datu eksportēšanas pakalpojumu

Datu eksportēšanas pakalpojums ir pievienojumpakalpojums, kas ir pieejams Microsoft Marketplace, kas pievieno iespēju replicēt datus no Microsoft Dataverse datu bāzes uz Azure SQL Database krātuvi klientam piederošā Azure abonementā. Atbalstītie mērķa galamērķi ir Azure SQL Database un SQL Server Azure virtuālajās mašīnās. Data Export Service sākotnēji viedi sinhronizē visus datus un pēc tam pastāvīgi sinhronizē veiktās izmaiņas (delta izmaiņas) sistēmā. Tas palīdz iespējot vairākus analīzes un pārskatu scenārijus papildus datiem, izmantojot Azure datu un analīzes pakalpojumus, un paver jaunas iespējas klientiem un partneriem veidot pielāgotus risinājumus.

Informāciju par programmatisko interfeisu Data Export Service konfigurācijas un administrēšanas pārvaldībai skatiet rakstā Data Export Service izstrādātāja rokasgrāmatā.

Data Export Service izmantošanas priekšnosacījumi

Lai sāktu izmantot Data Export Service, nepieciešami šādi priekšnosacījumi.

Azure SQL Database pakalpojums

• Klientam piederošs Azure SQL Database abonements. Šim abonementam ir jānodrošina sinhronizētais datuma apjoms.

• Ugunsmūra iestatījumi. Ieteicams izslēgt Atļaut piekļuvi Azure pakalpojumiem un norādīt atbilstošās klienta IP adreses, kas norādītas šajā tēmā. Papildinformācija: Azure SQL datu bāzes statiskās IP adreses, ko izmanto datu eksportēšanas pakalpojums

  Varat arī ieslēgt Atļaut piekļuvi Azure pakalpojumiem lai atļautu piekļuvi visiem Azure pakalpojumiem.

  SQL Server operētājsistēmā Azure VM ir jābūt iespējotai opcijai "Izveidot savienojumu ar SQL Server, izmantojot internetu". Papildinformācija: Azure: savienojuma izveide ar SQL Server virtuālo mašīnu Azure

  Turklāt konfigurējiet ugunsmūra kārtulas, lai atļautu saziņu starp datu eksportēšanas pakalpojumu un SQL Server.

• Datu bāzes lietotājam jābūt atļaujām datu bāzes un shēmas līmenī saskaņā ar tālāk redzamajām tabulām. Datu bāzes lietotājs tiek izmantots datu eksportēšanas connection string.

  Nepieciešamās datu bāzes atļaujas.

  Atļaujas tipa kods	Atļaujas nosaukums
  CRTB	IZVEIDOT TABULU
  CRTY	IZVEIDOT TIPU
  CRVW	IZVEIDOT SKATU
  CRPR	IZVEIDOT PROCEDŪRU
  ALUS	MAINĪT JEBKURU LIETOTĀJU
  VWDS	SKATĪT DATU BĀZES STATUSU

  Nepieciešamās shēmas atļaujas.

  Atļaujas tipa kods	Atļaujas nosaukums
  AL	MAINĪT
  IN	IEVIETOT
  DL	DELETE
  SL	ATLASĪT
  UP	ATJAUNINĀT
  EX	IZPILDĪT
  RF	ATSAUCES

Azure Key Vault pakalpojums

• Klientam piederošs Key Vault abonements, kas tiek izmantots, lai droši uzturētu datu bāzes connection string.

• Piešķiriet PermissionsToSecrets atļauju lietojumprogrammai ar ID "b861dbcc-a7ef-4219-a005-0e4de4ea7dcf". To var pabeigt, palaižot tālāk norādīto komandu AzurePowerShell, un tā tiek izmantota, lai piekļūtu Key Vault, kas satur connection string noslēpumu. Papildinformācija: Kā iestatīt Azure Key Vault

• Noslēpumi Key Vault ir jāatzīmē ar organizācijas (OrgId) un nomnieka ID (TenantId). To var veikt, izpildot tālāk redzamo AzurePowerShell komandu. Papildinformācija: Kā iestatīt Azure Key Vault

• Konfigurējiet ugunsmūra kārtulas, lai atļautu saziņu starp datu eksportēšanas pakalpojumu un Azure Key Vault.

Customer engagement programmas

• Versijas 9.0 vai jaunāka versijas vide.

• Jābūt instalētam Data Export Service risinājumam.

  • Dodieties uz Iestatījumi>Microsoft Marketplace> vai pārlūkojiet Microsoft Dynamics 365 - Datu eksportēšanas pakalpojums un pēc tam atlasiet Iegūt tūlīt.
  • Vai arī atrodiet to Microsoft Marketplace.

• Entītijām, kuras tiks pievienotas eksportēšanas profilam, jābūt iespējotām ar izmaiņu izsekošanu. Lai nodrošinātu, ka standarta vai pielāgotās entītijas var sinhronizēt, atveriet sadaļu Pielāgošana>Pielāgot sistēmu un pēc tam atlasiet entītiju. Cilnē Vispārīgi pārliecinieties, ka ir iespējota opcija Izmaiņu izsekošana sadaļā Datu pakalpojumi.

• Ir nepieciešama sistēmas administratora drošības loma vidē.

pārlūks

Iespējojiet domēna https://discovery.crmreplication.azure.net/ uznirstošos logus savā tīmekļa pārlūkprogrammā. Tas ir nepieciešams, lai veiktu automātisko pierakstīšanos, pārejot uz sadaļu Iestatījumi > Datu eksports.

Nepieciešamie pakalpojumi, akreditācijas dati un atļaujas

Lai izmantotu līdzekli Data Export Service, ir nepieciešami šādi pakalpojumi, akreditācijas dati un atļaujas.

• Abonements. Tikai lietotāji, kuriem ir piešķirta sistēmas administratora drošības loma programmā, var iestatīt eksportēšanas profilu vai veikt tajā izmaiņas.

• Azure abonements, kas ietver šādus pakalpojumus.

  • Azure SQL Database vai AzureSQL Server Azure virtuālajās mašīnās.

  • Azure Key Vault.

Kas jāzina pirms datu eksportēšanas pakalpojuma lietošanas

• Eksportēšanas profili ir jādzēš un pēc tam jāizveido atkārtoti, veicot vidē kādu no tālāk minētajām darbībām.

  • Atjaunot vidi.
  • Vides kopēšana (pilna vai minimāla kopija).
  • Atiestatīt vidi.
  • Vides pārvietošana uz citu valsti vai reģionu.

  Lai to izdarītu, izdzēsiet eksportēšanas profilu skatā EKSPORTĒŠANAS PROFILI, pēc tam izdzēsiet tabulas un iekļautās procedūras, un pēc tam izveidojiet jaunu profilu. Papildu informācija: Kā dzēst visas Data Export Profile tabulas un glabātās procedūras

• Data Export Service nedarbojas smilškastei vai ražošanas vidēm, kas ir konfigurētas ar ieslēgtu opciju Iespējot administrācijas režīmu. papildinformāciju skatiet sadaļā: Administrēšanas režīms

• Datu eksportēšanas pakalpojums neizmet (neizdzēš) saistītās tabulas, kolonnas vai saglabātās procedūras objektus mērķa Azure SQL datu bāzē, ja tiek veiktas tālāk norādītās darbības.

  • Entītija tiek dzēsta.

  • Lauks tiek dzēsts.

  • Entītija tiek noņemta no eksportēšanas profila.

    Šie vienumi ir manuāli jādzēš. Kā izdzēst datu eksportēšanas profila tabulas un saglabātās procedūras konkrētai entītijai Metadatu dzēšanas paziņojumi tiek reģistrēti mapē unprocessablemessages. Kļūdu apstrāde un uzraudzība

Eksportēšanas profils

Lai eksportētu datus no klientu piesaistīšanas programmām, administrators izveido eksportēšanas profilu. Var izveidot un aktivizēt vairākus profilus, lai vienlaicīgi sinhronizētu datus dažādās mērķa datu bāzēs.

Eksportēšanas profils ir pakalpojuma Data Export Service galvenā koncepcija. Eksportēšanas profils apkopo iestatīšanas un konfigurācijas informāciju, lai sinhronizētu datus ar mērķa datu bāzi. Eksportēšanas profila ietvaros administrators sniedz entītiju sarakstu, kuras paredzēts eksportēt uz mērķa datu bāzi. Pēc aktivizēšanas eksportēšanas profils sāk automātisku datu sinhronizāciju. Sākotnēji tiek eksportēti visi dati, kas atbilst katrai atlasītajai entītijai. Pēc tam, izmantojot pašpiegādes mehānismu, gandrīz reāllaikā nepārtraukti tiek sinhronizētas tikai datu izmaiņas entītiju ierakstos vai metadatos klientu piesaistīšanas programmās. Tādēļ nav nepieciešams iestatīt grafiku, lai izgūtu datus no klientu piesaistīšanas programmām.

Eksportēšanas profilā var pievienot tikai entītijas ar iespējotu izsekošanu. Ņemiet vērā, ka lielākajai daļai standarta entītiju, kuras tver datus, ir iespējota izmaiņu reģistrēšana. Pielāgotām entītijām ir skaidri jāiestata izmaiņu reģistrēšana, pirms tās var pievienot eksportēšanas profilā. Papildinformācija: Izmaiņu reģistrēšanas iespējošana, lai pārvaldītu datu sinhronizāciju

Data Export Service veic gan metadatu, gan datu sinhronizēšanu. Katra entītija tiek pārveidota par vienu tabulu, un katrs lauks tiek pārveidots par mērķa datu bāzes tabulas kolonnu. Tabulu un kolonnu nosaukumiem tiek izmantots metadatu shēmas nosaukums.

Pēc aktivizēšanas eksportēšanas profils apkopo statistiku datu sinhronizācijai, kas palīdz saistībā ar eksportēto darbības redzamību un diagnostiku.

Ar eksportēšanas profilu pieejamā datu sinhronizācija

Eksportēšanas profila izveide

Pirms eksportēšanas profila izveides pārliecinieties, ka ir izpildītas šādas prasības.

• Jūsu vidē ir instalēts risinājums Data Export Service.

• Uzturiet SQL datu bāzes connection string Key Vault un kopējiet Key Vault vietrādi URL, kas jānorāda eksportēšanas profilā. Papildinformācija: Azure: darba sākšana ar Azure Key Vault

• Entītijas, kuras tiks pievienotas eksportēšanas profilam, tiek iespējotas izmaiņu izsekošanai. Papildinformācija: Izmaiņu reģistrēšanas iespējošana, lai pārvaldītu datu sinhronizāciju

• Jūsu SQL datu bāzes pakalpojumā ir pietiekami daudz krātuves vietas, lai glabātu datus.

• Jūs esat vides sistēmas administrators.

1. Atveriet sadaļu Iestatījumi>Datu eksportēšana.

2. Pārskatiet paziņojumu un atlasiet Turpināt vai Atcelt, ja nevēlaties eksportēt datus.

3. Lai izveidotu jaunu eksportēšanas profilu, atlasiet Jauns.

4. Darbībā Properties ievadiet tālāk norādīto informāciju un pēc tam atlasiet Next, lai turpinātu bez savienojuma izveides ar Key Vault. Atlasot Validate tiek izmantots Key Vault URL, ko sniedzāt, lai izveidotu savienojumu ar Key Vault.

   • Vārds. Unikāls profila nosaukums. Šis lauks ir obligāts.

   • Key Vault Savienojuma URL. Key Vault URL, kas norāda uz connection string, kas saglabāts ar akreditācijas datiem, kas izmantoti, lai izveidotu savienojumu ar mērķa datu bāzi. Šis lauks ir obligāts. Papildinformācija: Kā iestatīt Azure Key Vault

     Svarīgi

     Key Vault savienojuma URL ir reģistrjutīgs. Ievadiet Key Vault savienojuma URL tieši tā, kā tas tiek parādīts pēc Windows PowerShell komandu palaišanas šajā tēmā.

   • Shēma. Alternatīvas datubāzes shēmas nosaukums. Ir derīgas tikai burtciparu rakstzīmes. Šis lauks nav obligāts. Pēc noklusējuma mērķa SQL datu bāzei tiek izmantota shēma dbo.

   • Prefikss. Prefikss, ko paredzēts izmantot mērķa datu bāzē izveidoto tabulu nosaukumiem. Tas palīdz viegli identificēt tabulas, kas izveidotas eksportēšanas profilam mērķa datu bāzē. Pārliecinieties, ka norādītā prefiksa garums ir mazāks par 15 rakstzīmēm. Šis lauks nav obligāts, un ir atļauts izmantot tikai burtciparu rakstzīmes.

   • Atkārtotu mēģinājumu skaits. Atkārtotu ierakstīšanas mēģinājumu skaits, ja neizdodas ievietošana vai atjaunināšana mērķa tabulā. Šis lauks ir obligāts. Pieņemamās vērtības ir no 0 līdz 20, un noklusējuma vērtība ir 12.

   • Atkārtotu mēģinājumu intervāls. Sekunžu skaits pirms atkārtota mēģinājuma kļūmes gadījumā. Šis lauks ir obligāts. Pieņemamās vērtības ir no 0 līdz 3600, un noklusējuma vērtība ir 5.

   • Rakstīt Dzēst žurnālu. Papildu iestatījums dzēstu ierakstu reģistrēšanai.

   

5. Darbībā Atlasīt entītijas atlasiet entītijas, kuras vēlaties eksportēt uz mērķa SQL datu datubāzi, un pēc tam atlasiet Tālāk.

   

6. Darbībā Atlasīt relācijas varat sinhronizēt M:M (daudzi pret daudziem) attiecības, kas pastāv ar iepriekšējā darbībā atlasītajām entītijām. Atlasiet Tālāk.

   

7. Darbībā Kopsavilkums atlasiet Izveidot un aktivizēt lai izveidotu profila ierakstu un izveidotu savienojumu ar Key Vault, kas sāk sinhronizācijas procesu. Pretējā gadījumā noklikšķiniet uz Izveidot, lai saglabātu eksportēšanas profilu un aktivizētu vēlāk.

   

Esoša eksportēšanas profila modificēšana

Varat pievienot vai noņemt entītijas un relācijas esošajā eksportēšanas profilā, kuru vēlaties atkārtot.

1. Atveriet sadaļu Iestatījumi>Datu eksportēšana.

2. Skatā Visi datu eksportēšanas profili atlasiet eksportēšanas profilu, kuru vēlaties mainīt.

   

3. Darbību rīkjoslā atlasiet PĀRVALDĪT ENTĪTIJAS, lai pievienotu vai noņemtu entītijas datu eksportēšanai. Lai pievienotu vai noņemtu entītiju relācijas, atlasiet PĀRVALDĪT RELĀCIJAS.

   

4. Atlasiet entītijas vai entītiju relācijas, ko vēlaties pievienot vai noņemt.

   

5. Atlasiet Atjaunināt, lai savas izmaiņas iesniegtu eksportēšanas profilā.

Detalizēta informācija par mērķa Azure SQL Database tabulu

Data Export Service veic gan metadatu, gan datu sinhronizēšanu. Tabula tiek izveidota katrai entītijai un sinhtronizētai relācijai M:M.

Kad eksportēšanas profils ir aktivizēts, šīs tabulas tiek izveidotas mērķa datubāzē. Tās ir sistēmas tabulas, un tajās netiks pievienoti lauki SinkCreatedTime un SinkModifiedTime.

Sinhronizācijas problēmu novēršana

Pat pēc vairākiem atkārtotiem mēģinājumiem, var rasties ierakstu sinhronizācijas kļūmes, ko izraisījuši datubāzes krātuves ierobežojumi vai tabulas bloķēšana ilglaicīgu vaicājumu dēļ. Lai novērstu šīs kļūmes, var veikt tikai nesekmīgo ierakstu piespiedu atkārtoto sinhronizāciju vai visu ierakstu atkārtoto sinhronizāciju.

1. Skatiet savus eksportēšanas profilus, lai meklētu, vai kādā no tiem nav radušās ierakstu sinhronizācijas kļūmes. Tas tiek darīts, apskatot datu profilus apgabalā Sinhronizācija vai atverot eksportēšanas profilu, piemēram, šo profilu, kuram ir kontaktpersonas entītijas ieraksta sinhronizācijas kļūme.

   

2. Pārbaudiet sinhronizācijas kļūmes avotu un novērsiet kļūmi. Papildu informācija: Kļūdu apstrāde un uzraudzība

3. Pēc tam, kad problēma ir atrisināta, atkārtoti sinhronizējiet nesekmīgos ierakstus.

   Piezīmes

   Nesekmīgo ierakstu sinhronizācija ir publiskā priekšskatījuma līdzeklis.

   • Priekšskatījuma funkcijas nav paredzētas lietošanai ražošanā, un to funkcionalitāte var būt ierobežota. Šie līdzekļi ir pieejami pirms oficiālā laidiena, lai klienti varētu priekšlaikus piekļūt līdzeklim un sniegt atsauksmes.
     • Šī līdzekļa darbībā tiks ieviestas izmaiņas, tāpēc tas nav domāts komerclietošanai. Izmantojiet līdzekli tikai testēšanas un izstrādes vidēs.
     • Korporācija Microsoft nenodrošina šī priekšskatījuma līdzekļa atbalstu. Microsoft Dynamics 365 tehniskais atbalsts nevarēs palīdzēt, ja radīsies problēmas vai jautājumi. Priekšskatījuma līdzekļi nav paredzēti ražošanai, un uz tiem attiecas atsevišķi papildu lietošanas noteikumi.

   1. Pierakstieties savā vidē un atveriet Iestatījumi>Datu eksportēšana.

   2. Atveriet eksportēšanas profilu, kurā ir ierakstu sinhronizācijas kļūmes.

   3. Rīkjoslā Eksportēšanas profils atlasiet NESEKMĪGU IERAKSTU ATKĀRTOTA SINHRONIZĒŠANA.

   4. Atlasiet apstiprinājuma dialogā Labi pēc nesekmīgo ierakstu veiksmīgas atkārtotas sinhronizācijas.

   

   5. Pārbaudiet, vai eksportēšanas profilā nav neveiksmīgu ierakstu paziņojumu, atverot datu eksportēšanas profilu un cilnē REKVIZĪTI un PĀRSKATS skatiet neveiksmīgo paziņojumu skaitītāju , kuram jābūt 0 . Rīkjoslā Eksportēšanas profils atlasiet ATSVAIDZINĀT, lai pārliecinātos, ka skaitītājam Neizdevušies paziņojumi tiek rādīta aktuālā vērtība.

   

4. Ja ierakstu sinhronizēšanas kļūmes nepazūd pēc tam, kad esat izmēģinājis atkārtotu sinhronizēšanu, izpildot iepriekš aprakstītās darbības, sazinieties ar Microsoft klientu atbalsta dienestu.

Kļūdu apstrāde un uzraudzība

Lai skatītu eksportēšanas profila sinhronizācijas statusu, atveriet sadaļu Iestatījumi>Datu eksportēšana un atveriet eksportēšanas profilu. Cilnē ENTĪTIJAS tiek rādīts sinhronizācijas statuss, ieskaitot kolonnu Neveiksmīgie ieraksti tādiem ierakstiem, kurus neizdevās sinhronizēt. Neveiksmīgu ierakstu gadījumā var lejupielādēt šādu ierakstu sarakstu, ieskaitot statusa iemeslu, atlasot NEVEIKSMĪGI IERAKSTI komandjoslā.

Eksporta profilā varat atlasīt REKVIZĪTI un PĀRSKATS , lai parādītu profila rekvizītus. Atlasiet RELĀCIJAS, lai skatītu relāciju sinhronizācijas statusu.

Detalizētas informācijas skatīšana par ierakstiem, kurus neizdevās sinhronizēt

Skatot nesekmīgo ierakstu žurnālus, var noteikt sinhronizācijas kļūmju cēloni. Lai skatītu neveiksmīgos ierakstus mērķa Azure mērķa datu bāzē, izmantojiet Azure Storage Explorer, bezmaksas savrupu programmu, kas ļauj ērti strādāt ar Azure Storage datiem. Vairāk informācijas: Azure Storage Explorer.

1. Atveriet sadaļu Iestatījumi>Datu eksportēšana.

2. Skatā Visi datu eksportēšanas profili atlasiet eksportēšanas profilu, kuram ir neizdevušies paziņojumi.

   

3. Darbību rīkjoslā atlasiet NEVEIKSMĪGIE IERAKSTI.

   

4. Dialoglodziņā Neveiksmīgo ierakstu lejupielāde atlasiet Kopēt Blob vietrādi URL un pēc tam atlasiet Labi.

   

   Piezīmes

   BLOB URL ir derīgs līdz 24 stundām. Ja URL pārsniedz 24 stundu periodu, atkārtojiet iepriekš aprakstītās darbības, lai ģenerētu jaunu Blob URL.

5. Startējiet Azure Storage Explorer.

6. Sadaļā Azure Storage Explorer atlasiet Izveidot savienojumu ar Azure Storage.

7. Ielīmējiet vietrādi URL no starpliktuves lodziņā Izveidot savienojumu ar Azure Storage un pēc tam atlasiet Tālāk.

8. Lapā Savienojuma kopsavilkums atlasiet Izveidot savienojumu.

9. Azure Storage Explorer izveido savienojumu ar mērķa datu bāzi. Ja eksportēšanas profilam ir neveiksmīgi ieraksti, Azure Storage Explorer parāda neveiksmīgas ierakstu sinhronizācijas mapes.

Detalizētas informācijas skatīšana par ierakstiem, kurus neizdevās sinhronizēt (priekšskatījums)

Tagad varat lejupielādēt neizdevušos ierakstus tieši no Data Export Service lietotāja saskarnes. Šis līdzeklis pašlaik ir priekšskatījuma režīmā un būtu lieliski, ja Jūs to izmēģinātu un sniegtu atsauksmes.

Neveiksmīgo ierakstu lejupielādes darbības:

1. Nosakiet profilu ar nesekmīgiem ierakstiem.

   

2. Atlasiet profilu un augšējās izvēlnes joslā atlasiet Lejupielādēt nesekmīgus ierakstus (priekšskatījuma versija).

   

3. Dialoglodziņā Lejupielādēt nesekmīgus ierakstus redzēsi sakārtotu sarakstu ar pēdējiem 20 (maksimālais skaits) BLOB failiem. Atlasiet to, kuru vēlaties lejupielādēt, un tad atlasiet Labi.

   

4. Kad fails ir lejupielādēts, atveriet to vēlamajā teksta redaktorā (piemēram, Notepad) un skatiet detalizētu informāciju par kļūmēm.

   

Nesekmīgo ierakstu sinhronizācijas mapju struktūra un žurnālfaili

Neveiksmīgo ierakstu Azure BLOB krātuves URL norāda uz atrašanās vietu, kurai ir šāda mapju struktūra:

• dati. Šajā mapē ir paziņojumi par nesekmīgiem datiem un saistīto JSON ieraksta datiem.

• metadati. Šajā mapē ir paziņojumi par nesekmīgiem metadatiem un saistīto JSON metadatiem.

• kļūmju žurnāls. Šajā mapē ir žurnāli, kas sniedz informāciju par sinhronizācijas kļūmi un tās rašanās iemeslu.

• forcerefreshfailurelog. Šī mape satur kļūdas no Data Export Service nesekmīgo ierakstu komandas pēdējās palaišanas, kas tika izmantota, lai atkārtoti sinhronizētu nesekmīgos ierakstus.

• neapstrādājami ziņojumi. Šī mape satur datu paziņojumus, kas netika apstrādāti sakarā ar datu vai metadatu dzēšanu un saistīto JSON.

  Mapes failurelog un forcerefreshfailurelog ir strukturētas šādi Gads\Mēnesis\Diena\Stunda, lai varētu ātri atrast jaunākās kļūmes. Visi kļūmju ieraksti, kas vecāki par 30 dienām, tiek dzēsti.

  Tālāk minēts žurnāldatnes piemērs, kas norāda kontaktpersonas entītijas ieraksta sinhronizācijas kļūmi.

Entity: contact, RecordId: 459d1d3e-7cc8-e611-80f7-5065f38bf1c1, NotificationTime: 12/28/2016 12:32:39 AM, ChangeType: Update, FailureReason: The database 'tempdb' has reached its size quota. Partition or delete data, drop indexes, or consult the documentation for possible resolutions.  
The statement has been terminated.  

Ierakstu sinhronizācijas kļūmju izplatītākie iemesli

Tālāk minēti daži iemesli, kāpēc var rasties ierakstu sinhronizācijas kļūmes.

• Nepietiekams krātuves mērķa datubāzes apjoms . Pirms mēģināt atkārtoti sinhronizēt neveiksmīgos ierakstus, palieliniet vai atbrīvojiet Azure SQL Database krātuvi. Ja rodas šī problēma, kļūmju žurnālā tiek ierakstīts ziņojums, kas ir līdzīgs šim.

  Datu bāze “databasename” ir sasniegusi lieluma kvotu. Nodaliet vai dzēsiet datus, atmetiet indeksus vai skatiet dokumentācijā informāciju par iespējamiem risinājumiem.

• Sinhronizācijas taimauts ar Azure SQL Database. Tas var notikt datu eksportēšanas profila sākotnējās sinhronizācijas laikā, kad vienlaicīgi tiek apstrādāts liels datu apjoms. Ja rodas šī problēma, atkārtoti sinhronizējiet nesekmīgos ierakstus. Sinhronizācijas problēmu novēršana

Labākā prakse, izmantojot Azure SQL Database ar datu eksportēšanu

• Lai izvairītos no sinhronizācijas kļūdām resursu ierobežošanas dēļ, ieteicams izmantot Azure SQL Database Premium P1 vai labāku plānu, kad izmantojat datu eksportēšanas pakalpojumu. Papildinformācija: Azure SQL Database resursu ierobežojumi un SQL datu bāzes cena

• Iestatiet Azure SQL Database, lai izmantotu lasīšanas momentuzņēmumu izolāciju (RCSI) darba slodzēm, kas vienlaikus darbojas mērķa datu bāzē un izpilda ilgstošus lasīšanas vaicājumus, piemēram, atskaišu veidošanas un ETL darbus. Tas samazina laika pārrāvuma kļūdu rašanos, kas var notikt Data Export Service lasīšanas\rakstīšanas konfliktu dēļ.

• Lai palīdzētu uzlabot vaicājumu rezultātus, iesakām Data Export Service datu bāzi ar maksimālo paralēlismu (MAXDOP) 1. Papildinformācija: MSDN: Servera atmiņas opcijas

• Bieži izvērtējiet fragmentācijas apjomu un, ja nepieciešams, pārveidojiet Data Export Service datu bāzes rādītājus. Papildinformācija: Indeksu pārkārtošana un atkārtota izveidošana

• Periodiski atjauniniet datu bāzes statistiku tabulās un indeksētajos skatos, kas atrodas Data Export Service datu bāzē. Papildinformācija: Statistikas atjaunināšana

• Pārraugiet Data Export Service datu bāzes lietojumu. Papildinformācija: Veiktspējas pārraudzīšana

Par datu sinhronizācijas latentumu

Risinājuma Data Export Service arhitektūra ir veidota tā, lai datu izmaiņas tiktu sinhronizētas ar mērķa datu bāzi, izmantojot pašpiegādes mehānismu un klausoties izmaiņas, tām notiekot klientu piesaistīšanas programmās.. Šis serviss cenšas datus piegādāt dažu minūšu laikā, bet pastāv vairāki faktori, kas var ietekmēt vispārējo sinhronizācijas latentumu.

Tālāk ir uzskaitīti faktori, kas ietekmē sinhronizācijas ilgumu:

• Pašreizējā darba slodze klientu piesaistīšanas programmās.
• Datu izmaiņu īpatsvars klientu piesaistīšanas programmās.
• Katram eksportēšanas profilam un to atribūtiem pievienoto entītiju skaits.
• SQL Server veiktspēja. Piemēram:
  • SQL savienojuma iestatīšanas laiks.
  • SQL priekšraksta izpildīšanas laiks.

Pamatojoties uz mūsu veikto servisa pārraudzīšanu, ir novērots, ka vairums notiekošo delta sinhronizāciju beidzas 15 minūšu laikā, ja serviss darbojas tālāk aprakstītajos apstākļos:

• Notiekošā sinhronizācija ir delta sinhronizācija, nevis sākotnējā sinhronizācija. Delta sinhronizācija tiek veikta tikai datu izmaiņu operācijām, kas ietver ierakstu izveidošanas, atjaunināšanas un dzēšanas darbības. Ņemiet vērā, ka delta sinhronizācija sākas pēc tam, kad ir pabeigta sākotnējā sinhronizācija.
• Maksimālais datu izmaiņu ātrums klientu piesaistīšanas programmās visām entītijām eksporta profilā ir mazāks par 3000 ierakstiem stundā. Jebkāds pēkšņs datu izmaiņu ātruma pieaugums, kurš rodas ierakstu lielapjoma izmaiņu dēļ un pārsniedz maksimālo izmaiņu ātrumu, izraisa papildu latentumu.
• Katrai eksporta profilam pievienotajai entītijai ir mazāk par 150 atribūtiem.
• Datubāzes savienojuma vai SQL priekšraksta izpilde beidzas mazāk nekā 10 sekunžu laikā. Ja šis ierobežojums tiek pārsniegts, tiek izraisīts papildu latentums.
• Sinhronizācijas laikā nenotiek mērķa datu bāzes savienojuma vai SQL izpildes kļūdas.

Ja iepriekš minētie nosacījumi tiek izpildīti, 15 minūtes ir tipisks sinhronizācijas latentums. Microsoft nenodrošina nekādu servisa līmeņa līgumu (service level agreement — SLA) risinājumam Data Export Service nesniedz nekādas garantijas vai apgalvojumus attiecībā uz sinhronizācijas latentuma laikiem.

Kā iestatīt Azure Key Vault

Palaidiet Windows PowerShell skriptu, kas šeit aprakstīts kā Azure konta administrators, lai piešķirtu atļauju datu eksportēšanas pakalpojuma līdzeklim, lai tas varētu piekļūt jūsu Azure Key Vault. Šis skripts parāda atslēgas seifa URL, kas nepieciešams, lai izveidotu eksportēšanas profilu, kas tiek izmantots, lai piekļūtu connection string.

Pirms skripta palaišanas aizstājiet vietturus ar šādiem mainīgajiem lielumiem.

• $subscriptionId. Key Vault resursu grupa, kuru vēlaties izmantot. Ja resursu grupa vēl neeksistē, tiks izveidota jauna grupa ar Jūsu norādīto nosaukumu. Šajā piemērā tiek lietots nosaukums ContosoResourceGroup1.

• $location. Norādiet vietu, kur atrodas resursu grupa vai kur tai jāatrodas, piemēram, ASV rietumi.

• $connectionString. connection string uz Azure SQL Database. Varat izmantot ADO.NET connection string kā tas tiek parādīts jūsu Azure informācijas panelī.

• $organizationIdList = Ar komatu atdalīts saraksts, kurā minētas atļautās organizācijas, kuras norādītas pēc organizācijas ID (organizationId) un kuras paredzēts iespējot pakalpojumam Data Export Service. Lai atrastu organizācijas ID, programmā atveriet Iestatījumi>Pielāgojumi>Izstrādātāju resursi. Organizācijas ID atrodas sadaļā vides atsauces informācija.

• $tenantId. Norāda Azure Active Directory nomnieka ID, uz kuru attiecas Key Vault abonements.

# -------------------------------------------------------------------------------- #
    #  Provide the value for the following parameters before executing the script
$subscriptionId = 'ContosoSubscriptionId'    
$keyvaultName = 'ContosoKeyVault'
    $secretName = 'ContosoDataExportSecret'
    $resourceGroupName = 'ContosoResourceGroup1'
    $location = 'West US'
    $connectionString = 'AzureSQLconnectionString'
$organizationIdList = 'ContosoSalesOrg1_id, ContosoSalesOrg2_id'
$tenantId = 'tenantId'
    # -------------------------------------------------------------------------------- #

# Login to Azure account, select subscription and tenant Id
Connect-AzAccount -Tenant $tenantId -Subscription $subscriptionId

# Create new resource group if not exists.
$rgAvail = Get-AzResourceGroup -Name $resourceGroupName -Location $location -ErrorAction SilentlyContinue
if(!$rgAvail){
    New-AzResourceGroup -Name $resourceGroupName -Location $location
}

# Create new key vault if not exists.
$kvAvail = Get-AzKeyVault -VaultName $keyvaultName -ResourceGroupName $resourceGroupName -ErrorAction SilentlyContinue
if(!$kvAvail){
    New-AzKeyVault -VaultName $keyvaultName -ResourceGroupName $resourceGroupName -Location $location
    # Wait few seconds for DNS entry to propagate
    Start-Sleep -Seconds 15
}

# Create tags to store allowed set of Organizations.
$secretTags = @{}
foreach ($orgId in $organizationIdList.Split(',')) {
    $secretTags.Add($orgId.Trim(), $tenantId)
}

# Add or update a secret to key vault.
$secretValue = ConvertTo-SecureString $connectionString -AsPlainText -Force
$secret = Set-AzKeyVaultSecret -VaultName $keyvaultName -Name $secretName -SecretValue $secretValue -Tags $secretTags

# Authorize application to access key vault.
$servicePrincipal = 'b861dbcc-a7ef-4219-a005-0e4de4ea7dcf'
Set-AzKeyVaultAccessPolicy -VaultName $keyvaultName -ServicePrincipalName $servicePrincipal -PermissionsToSecrets get

# Display secret url.
Write-Host "Connection key vault URL is "$secret.id.TrimEnd($secret.Version)""

Visu datu eksportēšanas profila tabulu un iekļauto procedūru dzēšana

-----------------------------------------------------------------
-- Provide the value for the following parameters
DECLARE @prefix nvarchar(32) =''
DECLARE @schema nvarchar(32) ='dbo'
-----------------------------------------------------------------

DECLARE @sql nvarchar(max) = '';

SELECT @sql += 'DROP TABLE ' + QUOTENAME([TABLE_SCHEMA]) + '.' + QUOTENAME([TABLE_NAME]) + ';'
FROM [INFORMATION_SCHEMA].[TABLES]
WHERE [TABLE_TYPE] = 'BASE TABLE' AND [TABLE_NAME] like @prefix + '_%' AND [TABLE_SCHEMA]= @schema;

PRINT @sql
EXEC SP_EXECUTESQL @sql;

PRINT 'Finished dropping all tables. Starting to drop all stored procedures now.'

SELECT @sql='';
SELECT @sql += 'DROP PROCEDURE ' + QUOTENAME([ROUTINE_SCHEMA]) + '.' + QUOTENAME([ROUTINE_NAME]) + ';'
FROM [INFORMATION_SCHEMA].[ROUTINES]
WHERE [ROUTINE_TYPE] = 'PROCEDURE' AND [ROUTINE_NAME] like @prefix + '_%' AND [ROUTINE_SCHEMA]= @schema;
PRINT @sql
EXEC SP_EXECUTESQL @sql;

PRINT 'Finished dropping all stored procedures. Starting to drop all types now.'

SELECT @sql=''; 
SELECT @sql += 'DROP TYPE ' + QUOTENAME(SCHEMA_NAME([SCHEMA_ID])) + '.' +  QUOTENAME([NAME]) + ';'
FROM SYS.TYPES
WHERE is_user_defined = 1 AND [NAME] LIKE @prefix + '_%' AND [SCHEMA_ID]=SCHEMA_ID(@schema);

PRINT @sql
EXEC SP_EXECUTESQL @sql;

Datu eksportēšanas profila tabulu un iekļauto procedūru dzēšana noteiktai entītijai

-----------------------------------------------------------------
-- Provide the value for the following parameters
DECLARE @prefix nvarchar(32) ='crm'
DECLARE @schema nvarchar(32) ='dbo'
DECLARE @entityName nvarchar(32) ='lead'
-----------------------------------------------------------------
DECLARE @sql nvarchar(max) = '';

IF @prefix != '' 
BEGIN
       SET @prefix = @prefix + '_'
END

SELECT @sql += 'DROP TABLE ' + QUOTENAME([TABLE_SCHEMA]) + '.' + QUOTENAME([TABLE_NAME]) + ';'
FROM [INFORMATION_SCHEMA].[TABLES]
WHERE [TABLE_TYPE] = 'BASE TABLE' AND [TABLE_NAME] like @prefix + @entityName  AND [TABLE_SCHEMA]= @schema;
PRINT @sql
EXEC SP_EXECUTESQL @sql;
PRINT 'Finished dropping the entity. Starting to drop the types associated with the entity'

SELECT @sql='';
SELECT @sql += 'DROP TYPE ' + QUOTENAME(SCHEMA_NAME([SCHEMA_ID])) + '.' + QUOTENAME([NAME]) + ';'
FROM SYS.TYPES
WHERE
  is_user_defined = 1
  AND (
    [NAME] LIKE @prefix + @entityName +'Type' 
    OR [NAME] LIKE @prefix + @entityName +'IdType'
  )
  AND [SCHEMA_ID] = SCHEMA_ID(@schema);
PRINT @sql
EXEC SP_EXECUTESQL @sql;

Kā atinstalēt Data Export Service no administrēšanas Power Platform

1. Naviģējiet uz Papildu iestatījumiem.
2. Atlasiet Iestatījumi > Pielāgojumi un pēc tam atlasiet Risinājumi.
3. Izvēlieties Microsoft Dynamics 365 publicēto DataExportService un pēc tam atlasiet Delete.

Atrodiet Microsoft Entra nomnieka ID savam nomniekam

1. Pierakstieties Azure portālā.
2. Sadaļā Azure pakalpojumi atlasiet Nomnieka rekvizīti.
3. Laukā Nomnieka ID atlasiet vērtību.

Azure SQL datu bāzes statiskās IP adreses, ko izmanto datu eksportēšanas pakalpojums

Sadaļā Azure SQL Database atlasiet Iestatīt servera ugunsmūri, ieslēdziet Atļaut piekļuvi Azure pakalpojumiem uz OFF, atlasiet Add client IP un pēc tam pievienojiet IP adreses, kas atbilst jūsu vides reģionam. Papildinformācija: Azure: Azure SQL Database servera līmeņa ugunsmūra kārtulas konfigurēšana, izmantojot Azure Portal

Zināmās problēmas

Izdzēstie ieraksti var tikt atkal ievietoti entītiju tabulā pēc sinhronizācijas kļūmes

Veicot atkopi no sinhronizācijas kļūmēm, iepriekš dzēstie ieraksti var tikt ievietoti atpakaļ sākotnējā entītiju tabulā. Lai atrisinātu šo problēmu, kad rodas sinhronizācijas kļūmes, rīkojieties šādi.

1. Izveidojiet eksportēšanas profilus, kuriem iespējota opcija Rakstīt dzēšanas žurnālu. Atkārtoti izveidojiet esošus eksportēšanas profilus, kuriem nav iespējota opcija Rakstīt dzēšanas žurnālu.

2. Izveidojiet un izpildiet SQL vaicājumu Azure SQL mērķa datu bāzei, kas meklē ierakstus tabulā DeleteLog. Ja tiek atrasts viens vai vairāki ieraksti, tas liecina par dzēstu ierakstu klātbūtni.

3. Ja tabulā DeleteLog pastāv viens vai vairāki ieraksti, izveidojiet un palaidiet SQL vaicājumu, kurš konstatē vides, kur kāds tabulas DeleteLog ieraksta ID atbilst tabulā EntityName esoša ieraksta ID un šī ieraksta vērtība versionNumber tabulā deleteLog ir lielāka par tabulā EntityName esošā ieraksta vērtību versionNumber. Ierakstu ID atbilstības gadījumā dzēsiet ierakstu no EntityName tabulas. Piemēram, ja ieraksta ID tabulas DeleteLog kolonnā AccountId atbilst kāda ieraksta ID entītiju tabulas AccountBase kolonnā AccountId un tabulā DeleteLog vērtība versionNumber ir lielāka par vērtību versionNumber tabulā Account, izdzēsiet ierakstu no entītiju tabulas AccountBase.

   Svarīgi

   Atkarībā no Jūsu uzņēmuma vajadzībām un prasībām SQL vaicājumus par ierakstu dzēšanu ieteicams izpildīt bieži, bet ne darba laikā.

   Vaicājuma piemērs vaicājumam par entītijas ieraksta dzēšanu.

DELETE A FROM [dbo].[prefix_account] A
WHERE id IN (SELECT CONVERT(uniqueidentifier, recordid) FROM [dbo].[prefix_DeleteLog] DL WHERE DL.entityname ='account'
AND DL.VersionNumber > A.VersionNumber)

Entītijas, kurām netiek atbalstīta datu eksportēšana

Šeit uzskaitītās entītijas atbalsta izmaiņu reģistrēšanu, tomēr tās neatbalsta datu eksportēšanu, izmantojot Data Export Service.

Nevar izveidot rindu, kas pārsniedz maksimālo pieļaujamo rindas lielumu (8K)

Ja kļūdu žurnālos tiek parādīts “Nevar izveidot rindu, kuras izmērs (izmērs) ir lielāks par maksimālo pieļaujamo rindas lielumu 8060”, rodas problēma, jo pārsniedzat maksimālo pieļaujamo rindas lieluma ierobežojumu. Datu eksportēšanas pakalpojums neatbalsta rindas lielumu, kas pārsniedz maksimālo pieļaujamo rindas lielumu (8k). Lai to apietu, nepieciešams ievērot rindas lieluma ierobežojumu.

Virknes garums avotā pārsniedz parametra ColumnName mērķa shēmu

Ja kļūdu žurnālā tiek parādīta kļūda "Virknes garums avotā pārsniedz parametra [Kolonnas_nosaukums, MaxDataLength] mērķa shēmu”, rodas problēma, jo avota datu virknes garums pārsniedz mērķa virknes garumu. Ja avota datu virknes garums pārsniedz mērķa virknes garumu, rakstīšana mērķī neizdosies. Lai apietu šo problēmu, nepieciešams samazināt datu apjomu vai manuāli palielināt kolonnas garumu, kas datu bāzē lielāks par MaxLength.

Pielikumi netiek atbalstīti

Anotācijas tabulā netiek atbalstīta pielikumu, piemēram, documentbody, eksportēšana.

Paziņojums par konfidencialitāti

Izmantojot datu eksportēšanas pakalpojumu, aktivizējot datu eksportēšanas profilu programmā Dynamics 365, profilam pievienoto entītiju dati tiek nosūtīti uz Azure. Sākotnējā sinhronizācijā tiek ietverti visi dati, kas saistīti ar eksportēšanas profilam pievienotajām entītijām, bet pēc tam tiek sinhronizētas tikai jaunās izmaiņas, kas nepārtraukti tiek nosūtītas uz datu eksportēšanas pakalpojumu. Datu eksportēšanas pakalpojumam nosūtītie dati tiek īslaicīgi glabāti Azure Service Bus un Azure Storage, apstrādāti Azure Service Fabric un visbeidzot sinhronizēti (ievietoti, atjaunināti vai dzēsti) ar mērķa datu bāzi, kas norādīta jūsu Azure abonementā. Kad dati ir sinhronizēti, tie tiek izdzēsti no Azure Service Bus un Azure Storage. Ja datu sinhronizācijas laikā rodas kļūme, Azure Storage tiek glabāti minimālie dati, kas atbilst entītijas tipam, ieraksta ID un sinhronizācijas laika zīmogam, lai varētu lejupielādēt neatjaunināto ierakstu sarakstu.

Administrators var deaktivizēt datu eksportēšanas profilu jebkurā brīdī, lai pārtrauktu datu sinhronizāciju. Turklāt administrators var dzēst eksportēšanas profilu, lai noņemtu jebkādus neizdevušos ierakstu žurnālus, un var atinstalēt datu eksportēšanas pakalpojuma risinājumu, lai pārtrauktu datu eksportēšanas pakalpojuma lietošanu.

Datu sinhronizācija starp Dynamics 365 un datu eksportēšanas pakalpojumu notiek nepārtraukti drošā veidā. Dati tiek šifrēti, jo tie tiek nepārtraukti apmainīti starp Dynamics 365 un datu eksportēšanas pakalpojumu.

Azure komponenti un pakalpojumi, kas ir saistīti ar datu eksportēšanas pakalpojumu, ir detalizēti aprakstīti nākamajās sadaļās.

Microsoft Azure drošības kontroles centrs

Azure Service Fabric

Tas nodrošina API un skaitļošanas Azure VM, lai apstrādātu ierakstu sinhronizācijas paziņojumus, kas saņemti no Dynamics 365, un pēc tam tos apstrādātu, lai ievietotu, atjauninātu vai dzēstu ierakstu datus mērķa datu bāzē. Mikropakalpojumi, kas tiek izvietoti virtuālajās mašīnās, ko pārvalda Azure Service Fabric izpildlaiks, apstrādā visus skaitļošanas pakalpojumus, kas saistīti ar datu sinhronizāciju.

Azure Service Bus

Tas nodrošina ziņojumu kopni, kurā Dynamics 365 ievieto sinhronizācijas paziņojumu ziņojumus, kurus apstrādā skaitļošanas mezgli Azure Service Fabric. Katrā ziņojumā ir saglabāta informācija, piemēram, organizācijas identifikators un ieraksts, kam tiek veikta datu sinhronizācija. Dati Azure Service Bus ir šifrēti miera stāvoklī, un tiem var piekļūt tikai datu eksportēšanas pakalpojums.

Azure Blob krātuve

Dati tiek īslaicīgi glabāti Azure Blob Storage, ja ierakstu sinhronizācijas paziņojuma dati ir pārāk lieli, lai tos saglabātu ziņojumā, vai rodas īslaicīga kļūme, lai apstrādātu sinhronizācijas paziņojumu. Šie blobi tiek šifrēti, izmantojot jaunāko Azure Storage SDK līdzekli, kas nodrošina simetrisku un asimetrisku šifrēšanas atbalstu un integrāciju ar Azure Key Vault.

Azure SQL

Azure SQL Database glabā datu eksportēšanas profila konfigurāciju un datu sinhronizācijas metriku.

Skatiet arī:

Elementu attiecību pārskats
Datu eksportēšanas pakalpojums
Komandas emuārs: Ievads datu eksportēšanas pakalpojumā