PowerCenter Partitioning Optie

High performance voor de verwerking van grote hoeveelheden data

De Partitioning Optie verbetert de performance van PowerCenter dankzij parallelle gegevensverwerking. Deze optie biedt een op threads gebaseerde architectuur en automatische data partitionering die parallelle verwerking op multiprocessor- en op grids gebaseerde hardwareomgevingen optimaliseert.

Belangrijkste features

Data Smart Parallellisme

• Lijnt automatisch PowerCenter-partities uit met databasetabelpartities voor performanceverbetering
• Garandeert automatisch gegevensintegriteit door gebruik te maken van PowerCenter’s parallelle engine die data partities dynamisch in lijn brengt voor setgeoriënteerde transformaties

Sessie design-tools

• Creëert snel en eenvoudig door gebruikers gedefinieerde partitioneringschema’s
• Biedt een grafische partitionering-map voor het bepalen van de beste partitioneringpunten
• Verzamelt statistieken over configureerbare sessieopties, zoals foutafhandeling, recovery-strategie, geheugenallocatie en logging om performance te maximaliseren

Geïntegreerde monitoringconsole

• Verzamelt sessiestatistieken, zoals throughput, rows/second, foutdetails en performanceoptimalisaties om potentiële bottlenecks te identificeren en trends te spotten
• Toont alle sessieverwerking en afhankelijkheidsdetails

Meervoudige partitieschema’s

• Ondersteunt parallellisering via meervoudige mechanismen waaronder key range, op hash algoritmes gebaseerde round robin, of bestandspartities
• Ondersteunt parallellisering via gelijktijdige verwerking van gespecificeerde partities tijdens de data transformatiepijplijn om data doorvoer te maximaliseren

Voordelen

Schaalt kosteneffectief om grote hoeveelheden data aan te kunnen
Met de Partitioning Optie kan men parallelle sessies optimaal verwerken door de gegevensverwerking over parallel draaiende subsets te verdelen en die over de beschikbare CPU’s in een multiprocessorsysteem te verspreiden. Wanneer verschillende processoren de verwerking delen, kunnen grote hoeveelheden data sneller worden verwerkt. Bij het benaderen van relationele databases zorgt de Partitioning Optie dat PowerCenter automatisch zijn partities in lijn brengt met de database-tabelpartities om de performance te verbeteren. In tegenstelling tot benaderingen die handmatige gegevenspartitionering vereisen, wordt gegevensintegriteit automatisch gegarandeerd, omdat PowerCenter’s parallelle engine de data partities dynamisch opnieuw in lijn brengt voor setgeoriënteerde transformaties (bijvoorbeeld aggregatoren of sorteerders).

Vergroot productiviteit ontwikkelaars
De Partitioning Optie biedt intuïtieve, op een GUI gebaseerde sessiedesigntools die de aan configuratietaken en performance-tuning gespendeerde tijd verkorten. Men kan eenvoudig door gebruikers gedefinieerde partitioneringschema’s creëren. Een grafische partitioneringmap helpt gebruikers en organistaties de beste partitioningpunten te bepalen. Configureerbare sessieopties, zoals foutafhandeling, recovery-strategie, geheugenallocatie en logging, maken het gemakkelijker statistieken te verzamelen om de performance te maximaliseren.

Optimaliseert systeemperformance als antwoord op gewijzigde vereisten van de organisatie
De Partitioning Optie zorgt dat men eenvoudig diepgaande sessiestatistieken kunt verzamelen zoals throughput, rows/second, foutdetails en performanceoptimalisaties. Deze statistieken helpt potentiële bottlenecks te identificeren en trends te herkennen. Een geïntegreerde monitoringconsole toont alle sessieverwerking en afhankelijkheidsdetails. Met PowerCenter’s door metadata gedreven architectuur wordt data transformatielogica geabstraheerd van het fysieke verwerkingsplan. Zodoende wordt snelle performance-tuning mogelijk zonder de logica en het ontwerp van de originele data mappings te compromitteren, waardoor de systeemperformance doorlopend en eenvoudig geoptimaliseerd kan worden indien groter wordende data loads en veranderende businessvereisten daarom vragen.

"... PowerCenter helps us achieve greater productivity, drive down costs, minimize operational risks and accelerate the time-to-market for new data integration-intensive enterprise applications." - Avram Kornberg Senior Vice President and CIO Natexis USA read the full story

Productliteratuur

Partitioning Option Datasheet
PowerCenter Brochure