tag(s) Tags: SQL Server 2008
lu 674 fois
7 pages
Jean-Pierre Riehl
SQL Server 2008 : Change Data Capture
Présentation d'une des nouvelles fonctionnalités de SQL Server 2008, le Change Data Capture
Par Jean-Pierre Riehl publié le 25/02/2008 à 00:20
 
Cela se fait par l'appel d'une fonction. La fonction est différente selon le mode de fonctionnement :
  • cdc.fn_cdc_get_all_changes_<capture_instance> : tous les changements sont récupérés
  • cdc.fn_cdc_get_net_changes_<capture_instance> : seuls les changements finaux sont récupérés
Ces fonctions sont des Table-valued fonctions, on les utilise donc dans la clause FROM. Elles prennent en paramètres l'intervalle sur lequel on souhaite récupérer les changements. Cette intervalle est matérialisé par ses 2 bornes, sous la forme de paramètres de type binary(10) appelés LSN. LSN signifie Logical Sequence Number et correspond à la transaction dans le journal de la base de données. En effet, les changements étant récupérés par la lecture du journal de la base via un LogReader, tout leur séquencement dans le temps se base sur l'unité du journal à savoir les LSN.

Select *

From cdc.fn_cdc_get_all_changes_Sales_SalesOrderHeader(

    @from_LSN

    ,@to_LSN

    ‘all’)

Rassurons nous, des fonctions nous permettent de translater une date en LSN (et inversement). Les premières permettent de récupérer le LSN le plus ancien et le LSN le plus récent pour une instance de capture. A noter que le plus récent est commun à toutes les instances de capture d'une table puisque c'est la dernière modification de la table.

DECLARE @from_lsn binary(10), @to_lsn binary(10);

SET @from_lsn = sys.fn_cdc_get_min_lsn('Sales_SalesOrderHeader');

SET @to_lsn = sys.fn_cdc_get_max_lsn();

Le système d'écoute des modifications du CDC peut alors conserver le dernier LSN récupéré et aura juste à l'incrémenter pour obtenir la borne inférieure du prochain intervalle de requête :

SET @from_lsn = sys.fn_cdc_increment_lsn(@to_lsn);

On peut aussi travailler avec des dates et obtenir les LSN à partir de celles-ci. Pour cela, on utilisera les fonctions sys.fn_cdc_map_time_to_lsn qui nous retourne le LSN le plus proche (en précisant si on cherche l'inférieur ou le supérieur) d'une date.

SET @from_lsn = sys. fn_cdc_map_time_to_lsn (‘smaller greater than’, ‘2008-01-21 22:00’);

Dans les informations récupérées, on notera les suivantes :
  • __$operation : cette valeur indique le type de modification opérée sur la ligne (1 pour delete, 2 pour insert, etc.)
  • LSN : les 2 valeurs __$start_lsn et __$eqval permettent d'ordonner les modifications. La première indique l'identifiant de transaction et le second indique l'ordre du traitement dans la transaction.
  • Champs : on trouve dans le résultat la liste des champs dont on capture les modifications
  • UpdateMask : ce masque de bits permet dans le cas d'une opération d'update de savoir quels champs ont été modifiés
La lecture des changements ne les « invalide » pas. C'est pour cela que c'est à l'application qui consomme les changements de garder le dernier LSN lu (ou de travailler avec des dates). Cela permet de mettre en place plusieurs consommateurs de CDC.

--on doit garder une référence sur les LSN déjà lus

DECLARE @from_lsn binary(10), @to_lsn binary(10);

--on utilise des fonctions pour obtenir les LSN min et max

SET @from_lsn = sys.fn_cdc_get_min_lsn('Sales_SalesOrderHeader'); --capture instance

SET @to_lsn = sys.fn_cdc_get_max_lsn();

 

Select @from_lsn as [From], @to_lsn as [To]

 
/content/e26e5100-4442-4e16-b364-170430af6089/demo_01.png
 

Select *

From cdc.fn_cdc_get_all_changes_Sales_SalesOrderHeader(

    @from_lsn,

    @to_lsn,

    'all'); --'all update old' pour ajouter les anciennes valeurs (__$operation = 3)

 
/content/e26e5100-4442-4e16-b364-170430af6089/demo_02.png
 

update sales.salesorderheader

set duedate = '2008-01-02'

where salesorderid = 43670

--

 

--on incrémente les LSN min et max (ATTENTION, si @from_lsn > @to_lsn ==> error)

SET @from_lsn = sys.fn_cdc_increment_lsn(@to_lsn);

SET @to_lsn = sys.fn_cdc_get_max_lsn();

 

Select @from_lsn as [From], @to_lsn as [To]

 
/content/e26e5100-4442-4e16-b364-170430af6089/demo_03.png
 

if @from_lsn > @to_lsn

    print 'Pas de changement (ou non encore reportés dans la CT)'

else

    Select *

    From cdc.fn_cdc_get_all_changes_Sales_SalesOrderHeader(

        @from_lsn,

        @to_lsn,

        'all');

 Commentaire - SQL Server 2008 : Change Data Capture 

 Dernières Publications      

Exploiter les données CSV via Linq en toute simplicité
  A partir du requêteur dynamique fourni en exemple avec Visual Studio 2008, nous allons essayer de remplir les propriétés d'un ensemble d'objets à partir des données d'un fichier CSV. Nous enrichirons aussi le parseur de nos propres fonctions.
par Frédéric Mélantois posté le 17/05/2008 à 11:41, lu 138 fois, #0
Polymorphisme et contrats de données WCF
  WCF aborde les types polymorphes du point de vue de la sérialisation. En effet, la connaissance du type réel potentiel est rendue nécessaire dès la description du contrat de données. Une fois n'est pas coutume, j'ai réalisé l'exemple en VB.NET.
par Frédéric Colin posté le 14/05/2008 à 08:40, lu 296 fois, #2
A la découverte de BizTalk Server 2006 3/3
  Développer un assembleur pour BizTalk Server 2006 R2
par Kader Yildirim posté le 06/05/2008 à 13:20, lu 147 fois, #0
Chapitre III : Sync Services for ADO.NET et WCF
   Suite des deux premiers chapitres sur la synchronisation avec Sync Services for ADO.NET, voici un nouvel article impliquant WCF dans une synchronisation déconnectée.
Requêtes dynamiques sur les IEnumerable
  A partir d'un exemple fourni avec Visual Studio 2008, initialement prévu pour tout objet Queryable, nous allons présenter comment en ajoutant très peu de code rendre disponible aux IEnumerable un requêteur dynamique.
par Frédéric Mélantois posté le 24/04/2008 à 15:03, lu 842 fois, #0
Développer une visionneuse d'images avec WPF et WCF
  Au travers de cet article, nous allons découvrir comment mettre en place une visionneuse d'images, grâce aux technologies WPF et WCF.
par Thomas Lebrun posté le 22/04/2008 à 22:46, lu 1005 fois, #2
LINQRoleProvider
  L'objectif de cet article est d'implémenter un fournisseur de rôles ASP.NET personnalisé à l'aide de LINQ To Sql tout en faisant un tour d'horizons de la syntaxe des requêtes LINQ.
par Antoine Griffard posté le 13/04/2008 à 22:18, lu 491 fois, #4
WCF : Transfert de messages streamés et sécurisation personnalisée
  Je poursuis ma série d'articles sur WCF en vous présentant cette fois-ci le mode de communication Streamé. Histoire d'aller un petit peu plus loin, j'ai protégé le service de manière personnalisée et utilisé un binding très courant : BasicHttpBinding
par Frédéric Colin posté le 07/04/2008 à 08:12, lu 884 fois, #0

 Dernières Actualités      

Injection de code et API de profiling .NET
  Si vous êtes intéressés par la sécurité du Framework, par le reverse engineering et la manipulation/injection de code .NET et les packers, alors jetez un coup d’œil...
NDepend pour l'analyse statique de code .NET
  Pour ceux qui ne connaissent pas NDepend , il s’agit d’un outil d’analyse statique de code .NET qui permet de remonter des informations à toute une équipe de développement. NDepend aide à travailler sur...
Tags: Outils
Microsoft met à disposition son IoC Container Unity 1.0 en version finale
  Microsoft met à disposition la version 1.0 de son IoC container Unity, sur CodePlex sous la forme d'un Application Block des Enterprise Library. Si vous voulez en savoir plus sur le sujet en .NET je vous...
Tags: Application Block
Microsoft MVP (Most Valuable Professional) sur Tech Head Brothers
  Je voudrais féliciter les nouveaux Microsoft MVP (Most Valuable Professional) du mois d'Avril 2008 qui publient sur Tech Head Brothers! Sans les auteurs le site ne serait rien. Sébastien Pertus - MVP SQL...
Les Webcasts des Microsoft TechDays 2008 sont en ligne
  Si vous avez participé ou non au Microsoft TechDays 2008 vous avez certainement manqué certaines présentation qui vous intéressaient. Voilà enfin votre chance de pouvoir suivre ces présentations en ligne...
Rapide résumé de la conférence MIX08
  La conférence MIX08 s'est achevée la semaine dernière avec peu d'annonces de nouvelles technologies (DeepZoom) mais surtout des releases de produits (et c'est pas un mal...). Nous avons donc eu droit aux...