QQinfo

Această ultimă ediție a Qlik™ Replicate este versiunea inițială pentru luna mai 2023 și aduce noi endpoints  și o serie de îmbunătățiri în ceea ce privește endpoint-urile, tipurile de date și partea de server.

Endpoint-uri noi

Noul endpoint țintă Google Cloud Pub/ Sub – Qlik™ este încântat să anunțe suportul pentru replicarea datelor din orice sursă suportată către Google Cloud Pub/ Sub. Acesta a fost un endpoint țintă de streaming mult așteptat de mulți clienți.
Noul Google Cloud AlloyDB pentru endpoint-uri PostgreSQL – Ca parte a parteneriatului tehnic și comercial permanent dintre Qlik™ și Google, Qlik™ are plăcerea de a adăuga suport pentru Google Cloud AlloyDB pentru PostgreSQL atât ca endpoint sursă, cât și ca endpoint țintă.

 Îmbunătățiri ale Endpoint-urilor

SAP ODP (Operational Data Provisioning) ca Sursă

• Suport pentru SAP SLT – Qlik™ Replicate mai 2023 introduce suport pentru replicarea datelor de la un server de replicare a transformării peisajului SAP, acest lucru va ajuta în mod dramatic clienții care au investiții existente în SAP SLT și va îmbunătăți performanța generală prin valorificarea endpoint-ului Qlik™ Replicate SAP ODP.
• Îmbunătățiri ale procesării Delta – Acum este disponibil un control mai mare asupra procesării delta. Modul „Date istorice” a fost adăugat ca mod implicit, în care toate datele vor fi aplicate ca INSERTS, păstrând astfel versiunile anterioare ale înregistrărilor. Noi opțiuni suplimentare sunt acum disponibile cu acest mod: Apply original primary key (Aplică cheia primară originală), Reverse summable fields (Inversează câmpurile însumabile) și Current data (Date curente) – Atunci când este selectat acest mod, operațiunea de modificare efectivă (INSERT, UPDATE sau DELETE) va fi efectuată pe țintă.

Aceste noi caracteristici se bazează pe îmbunătățirile anterioare aduse în ultima versiune din noiembrie 2022, acestea sunt enumerate mai jos și sunt, de asemenea, incluse ca parte a AG din mai 2023.

• A fost adăugat suportul Log Stream – acest lucru permite clienților care doresc să utilizeze SAP ODP să profite de capacitatea Log Stream a Replicate, care va utiliza replicarea bazată pe jurnal de la o singură bază de date sursă și va aplica modificările la mai multe ținte, fără a fi nevoie să citească jurnalele pentru fiecare țintă în parte.
• Îmbunătățirea performanțelor – Qlik™ a rezolvat o problemă de performanță legată de transformările de tabele și filtrele de care au fost afectați unii clienți.
• A fost adăugat suport pentru SAP ODP versiunea 1.1.

Endpoint-ul sursă IBM DB2 for z/ OS – suport pentru clientul serverului de date – această îmbunătățire economisește spațiu pe disc atunci când se execută Qlik™ Replicate pe Linux, permițând instalarea doar a clientului serverului de date, mai degrabă decât a pachetului complet de client ODBC.

Oracle ca endpoint sursă – Sarcini de flux de jurnal – acceptă acum poziția de schimbare a sursei (de exemplu, SCN sau LSN) Opțiunea de execuție avansată cu punctul final al sursei Oracle.

Îmbunătățiri ale serverului proxy endpoint

Suport pentru serverul proxy implicit – Acum puteți alege dacă doriți să utilizați serverul proxy implicit configurat în setările serverului sau să furnizați setări proxy specifice pentru punctul final. Această opțiune este suportată numai cu următoarele endpoint-uri:

• Databricks Lakehouse (Delta)
• Databricks Cloud Storage
• Google Cloud Big Query
• Amazon Redshift
• Microsoft Azure Synapse Analytics

Microsoft Azure Data Lake Storage (ADLS) Gen2 – Pentru endpoint-urile țintă care oferă opțiunea de a utiliza stocarea Microsoft Azure Data Lake Storage (ADLS) Gen2, acum este posibil să alegeți dacă doriți să utilizați un server proxy pentru a accesa stocarea Staging și Azure Active Directory sau oricare dintre ele.
Endpoint-ul țintă Amazon Redshift – suport pentru AWS PrivateLink – Atunci când utilizați endpoint-ul țintă Amazon Redshift, puteți utiliza acum AWS PrivateLink pentru a vă conecta la un cloud privat virtual (VPC).
Suport pentru Unity Catalog cu endpoint-urile Databricks –Acum este posibil să folosiți Unity Catalog atunci când utilizați endpoint-urile țintă Databricks Cloud Storage sau Databricks Lakehouse (Delta).

Îmbunătățiri ale tipurilor de date

Schimbare la maparea tipului de date parquet – Tipul de date BYTES, care anterior era alocat la FIXED_LEN_BYTE_ARRAY ($LENGTH), va fi acum alocat la BYTE_ARRAY. Rețineți că această modificare afectează doar endpoint-urile nou create, endpoint-urile existente vor continua să utilizeze maparea anterioară.

Această nouă mappare a tipurilor de date pentru formatul Parquet a fost modificată pentru următoarele endpoint-uri:

• Amazon S3
• Microsoft Azure ADLS
• Google Cloud Storage

Suport extins pentru încărcarea paralelă cu obiective de flux – Datele pot fi acum încărcate în endpoint-urile țintă Kafka și Amazon MSK utilizând încărcarea paralelă. În modul de replicare Full Load, puteți utiliza Parallel Load pentru a accelera replicarea tabelelor mari prin împărțirea tabelului în segmente și încărcarea segmentelor în paralel. Tabelele pot fi segmentate pe intervale de date, pe partiții sau pe subpartiții.
Caracterul implicit al ghilimelelor în endpoint-uri bazate pe fișiere – Noile endpoint-uri vor fi create cu ghilimele duble („) ca caracter implicit al ghilimelelor în loc de o valoare goală. Această modificare se aplică la următoarele endpoint-uri țintă: Amazon S3, File, Microsoft ADLS și Google Cloud Storage.
Endpoint-ul Microsoft Azure SQL (MS-CDC) – Suport Geo Replica – pentru citirea evenimentelor din Geo Replica.
Suport pentru Oracle HSM (Hardware Security Module) – pentru citirea datelor atât din tablespace-uri criptate, cât și din coloane criptate în timpul CDC. Acest lucru este valabil atât pentru Replicate Log Reader, cât și pentru Oracle LogMiner, pentru a accesa jurnalele redo.

Îmbunătățiri pe partea de server

Versiunea Qlik™ Replicate mai 2023 vine cu câteva caracteristici noi și îmbunătățite pe partea de server.

Server proxy implicit – În loc să fie nevoie să configurați un server proxy pentru fiecare endpoint, acum puteți configura un server proxy implicit care poate fi utilizat de toate endpoint-urile. Pentru a facilita această funcționalitate, a fost adăugată o nouă secțiune Server proxy implicit în fila Endpoints din setările serverului. Compatibil numai cu următoarele endpoint-uri:

• Databricks Lakehouse (Delta)
• Databricks Cloud Storage
• Google Cloud Big Query
• Amazon Redshift
• Microsoft Azure Synapse Analytics

Acceptă caractere speciale în numele coloanelor utilizate în expresii – A fost adăugată o nouă opțiune pentru a accepta caractere speciale în numele coloanelor. de exemplu, „special#columna„. Această nouă opțiune poate fi setată la nivel global pentru toate sarcinile sau individual pentru o anumită sarcină.