如何使用SSB与数据库通信
创始人
2024-07-26 05:11:03
0

当我们已经将数据从xls,csv,txt等文件中的解析出来,进行必须的数据验证,然后将正确的数据以XML格式保存到磁盘,并将事务型数据更新到DB,比如生成的磁盘文件名,CheckResult,CheckMemo等。

我们再一起回顾下数据库表设计:

  1. USE SSB3  
  2. GO  
  3.  
  4. CREATE TABLE [BatchInventoryQueue]  
  5. (  
  6.     TransactionNumber INT IDENTITY(1,1) NOT NULL,  
  7.     BatchFileID INT NOT NULL,  
  8.     RowIndex INT NOT NULL,  
  9.     ItemNumber INT NOT NULL,  
  10.     [FileName] NVARCHAR(256) NULL,  
  11.     HasCheck CHAR(1) NULL,  
  12.     CheckResult CHAR(1) NULL,  
  13.     CheckMemo NVARCHAR(2000) NULL,  
  14.     HasSendSSB CHAR(1) NULL, --是否尝试发送过SSB  
  15.     SSBSendResult CHAR(1) NULL,--发送SSB是否成功  
  16.     SSBMemo NVARCHAR(2000) NULL,--SSB处理结果  
  17.     CONSTRAINT PK_TransactionNumber_BatchInventoryQueue PRIMARY KEY CLUSTERED  
  18.     (  
  19.         TransactionNumber ASC 
  20.     )  

下面我们要将正确的数据以XML格式发送到数据库中。因为我们面临的数据量非常大,所以我们需要考虑负载均衡,比如多台服务器部署。那么就可能会面临数据冲突的问题。我这里的情况是要求多台服务器部署,那么如何给服务器分数据,又不造成冲突呢?

方案一:用表的主键TransactionNumber与服务器数据取模

  1. SELECT TOP(@BatchSize) TransactionNumber,  
  2.     [FileName]  
  3. FROM dbo.BatchInventoryQueue  
  4. WHERE HasCheck='Y' AND CheckResult='S' 
  5. AND [FileName] IS NOT NULL 
  6. AND HasSendSSB IS NULL AND TransactionNumber%@Throtting=@TrottingMod   

优点:实现简单。

缺点:如果其中一台服务器失败,那么应该属于它处理的数据将一直得不到处理。

方案二:结合SQL Server的锁特性,在查询数据时避免冲突如下:

  1. UPDATE TOP(@BatchSize) dbo.BatchInventoryQueue  
  2. SET HasSendSSB='I'--inprocessing  
  3. OUTPUT DELETED.TransactionNumber,  
  4.     DELETED.[FileName]  
  5. WHERE HasCheck='Y' AND CheckResult='S' 
  6. AND [FileName] IS NOT NULL 
  7. AND HasSendSSB IS NULL  

将HasSendSSB更新为I,标示正在发送。由于在更新数据时,进程会获取UPDLOCK,那么下一个服务器再查询数据时就必须等待直到第一个进程更新完毕。并发执行情况下,难免会有问题,因此需要考虑容错机制。即用另一个Job定时监视(SSBSendResult IS NULL OR SSBSendResult='N') AND HasSendSSB='I'的数据,并将状态清空(SET HasSendSSB=NULL,SSBSendResult=NULL),等待程序下次再次处理。不过这种情况应该非常少。

  1. UPDATE dbo.BatchInventoryQueue  
  2. SET HasSendSSB=NULL,  
  3. SSBSendResult=NULL 
  4. WHERE (SSBSendResult IS NULL OR SSBSendResult='N')  
  5. AND HasSendSSB='I' 

接着我们要生成SSBMessage,这里我使用VTemplate模版引擎来生成.代码如下:

SSBMessageBase:

  1. public abstract class SSBMessageBase  
  2. {  
  3.     public string Subject { get; set; }  
  4.  
  5.     public string FromService { get; set; }  
  6.  
  7.     public string ToService { get; set; }  
  8.  
  9.     public SSBMessageHead Head { get; set; }  
  10. }  

SSBMessageHead:

  1. public class SSBMessageHead  
  2. {  
  3.     public string Action { get; set; }  
  4.  
  5.     public string TransactionCode { get; set; }  
  6. }  

SSBMessageFromFile:

  1. public class SSBMessageFromFile : SSBMessageBase  
  2. {  
  3.     public string FileName { get; set; }  
  4. }  

VTemplate:

  1.  
  2.  
  3. {$:ssb.Subject}/Subject>  
  4. {$:ssb.FromService}  
  5. {$:ssb.ToService}  
  6.  
  7.       
  8.         {$:ssb.Action}  
  9.         {$:ssb.TransactionCode}  
  10.       
  11.       
  12.       
  13.       
  14.  
  15.  
  16.  

SSBUtility:

  1. public class SSBUtility  
  2. {  
  3.     private string VtSSBMessage(SSBMessageBase ssb)  
  4.     {  
  5.         string fileName = Path.Combine(AppDomain.CurrentDomain.BaseDirectory,@"Templates\SSB.vt");  
  6.          
  7.         TemplateDocument doc =new TemplateDocument(fileName, Encoding.UTF8);  
  8.         doc.SetValue("ssb", ssb);  
  9.  
  10.         StringBuilder sb = new StringBuilder();  
  11.         StringWriter sw = new StringWriter(sb);  
  12.         doc.Render(sw);  
  13.         sw.Close();  
  14.  
  15.         return sb.ToString();  
  16.     }  
  17.  
  18.     public void SendSSB(SSBMessageBase ssb)  
  19.     {  
  20.         string msg = VtSSBMessage(ssb);  
  21.         using (SqlConnection conn = new SqlConnection(JobConfigs.SSBConnectionString))  
  22.         {  
  23.             using (SqlCommand cmd = new SqlCommand())  
  24.             {  
  25.                 cmd.Connection = conn;  
  26.                 cmd.CommandType = CommandType.StoredProcedure;  
  27.                 cmd.CommandText = JobConfigs.SSBSendProc;//dbo.[UP_Send_Inventory]  
  28.                 SqlParameter p = new SqlParameter("@Message", SqlDbType.Xml);  
  29.                 p.Value = msg;  
  30.                 cmd.Parameters.Add(p);  
  31.                 conn.Open();  
  32.                 cmd.ExecuteNonQuery();  
  33.                 conn.Close();  
  34.             }  
  35.         }  
  36.     }  
  37. }  

再接着就是SSB创建部分,下面列举代码示例:

  1. USE [master]  
  2. GO  
  3.  
  4. IF EXISTS(SELECT * FROM sys.databases where [name]='SSB')  
  5.     DROP DATABASE SSB  
  6.  
  7. CREATE DATABASE SSB  
  8. GO  
  9.  
  10. --enable service broker on database  
  11. ALTER DATABASE SSB  
  12. SET TRUSTWORTHY ON 
  13. GO  
  14. USE SSB  
  15. GO  
  16.  
  17. --create a test table  
  18. CREATE TABLE dbo.Inventory  
  19. (  
  20.     [ItemNumber] INT IDENTITY(1,1) PRIMARY KEY,  
  21.     [Inventory] INT NOT NULL 
  22. )  
  23.  
  24. INSERT INTO dbo.Inventory([Inventory])  
  25. VALUES(1)  
  26.  
  27. GO  
  28. --create message type and contract  
  29. CREATE MESSAGE TYPE [Message_Type_Inventory]  
  30. VALIDATION = WELL_FORMED_XML;  
  31.  
  32. CREATE CONTRACT [Contract_Inventory]  
  33. (  
  34.     [Message_Type_Inventory] SENT BY INITIATOR  
  35. )  
  36. GO  
  37.  
  38. --create queue, send service and receive  
  39. CREATE QUEUE [Queue_Inventory]  
  40. WITH STATUS=ON,  
  41. RETENTION=OFF;  
  42.  
  43. CREATE SERVICE [Service_Send_Inventory]  
  44. ON QUEUE [Queue_Inventory]([Contract_Inventory])  
  45. GO  
  46.  
  47. CREATE SERVICE [Service_Receive_Inventory]  
  48. ON QUEUE [Queue_Inventory]([Contract_Inventory])  
  49. GO  
  50.  
  51. --receive procedure  
  52. CREATE PROCEDURE dbo.[UP_Receive_Inventory]  
  53. AS 
  54. BEGIN 
  55.     SET NOCOUNT ON;  
  56.     DECLARE @ConversionHandle UNIQUEIDENTIFIER,  
  57.         @MessageType SYSNAME,  
  58.         @Message XML,  
  59.         @ItemNumber CHAR(50),  
  60.         @Inventory INT 
  61.  
  62.     WHILE(1=1)  
  63.     BEGIN 
  64.         WAITFOR(     
  65.         RECEIVE TOP(1) @ConversionHandle=conversation_handle,  
  66.                 @MessageType=message_type_name,  
  67.                 @Message=CAST(message_body AS XML)  
  68.             FROM [Queue_Inventory]  
  69.         ),TIMEOUT 1000  
  70.         IF(@@ROWCOUNT=0)  
  71.             BREAK;  
  72.  
  73.         SELECT @ItemNumber=@Message.value('(/Publish/Message/Body/Inventory/ItemNumber/text())[1]','INT'),  
  74.             @Inventory=@Message.value('(/Publish/Message/Body/Inventory/Inventory/text())[1]','INT')  
  75.          
  76.         UPDATE dbo.Inventory  
  77.         SET Inventory=@Inventory  
  78.         WHERE ItemNumber=@ItemNumber  
  79.     END 
  80. END 
  81. GO  
  82.  
  83. --activate queue  
  84. ALTER QUEUE [Queue_Inventory]  
  85. WITH ACTIVATION  
  86. (  
  87.     PROCEDURE_NAME=[UP_Receive_Inventory],  
  88.     MAX_QUEUE_READERS=5,  
  89.     EXECUTE AS OWNER  
  90. )  
  91. GO  
  92.  
  93. --send procedure  
  94. CREATE PROCEDURE dbo.[UP_Send_Inventory]  
  95. (  
  96.     @Message XML  
  97. )  
  98. AS 
  99. BEGIN 
  100.     SET NOCOUNT ON;  
  101.     DECLARE @ConversationHandle UNIQUEIDENTIFIER  
  102.      
  103.     BEGIN DIALOG CONVERSATION @ConversationHandle  
  104.     FROM SERVICE [Service_Send_Inventory]  
  105.     TO SERVICE 'Service_Receive_Inventory' 
  106.     ON CONTRACT [Contract_Inventory]  
  107.     WITH ENCRYPTION = OFF;  
  108.  
  109.     SEND ON CONVERSATION @ConversationHandle  
  110.     MESSAGE TYPE [Message_Type_Inventory](@Message)  
  111.      
  112.     END CONVERSATION @ConversationHandle WITH CLEANUP;  
  113. END 
  114. GO  
  115.  
  116. --test data  
  117. DECLARE @Message XML  
  118. SELECT @Message='  
  119.  
  120. BatchInventory  
  121. Service_Send_Inventory  
  122. Service_Receive_Inventory  
  123.  
  124.       
  125.         UpdateInventory  
  126.         123  
  127.       
  128.       
  129.           
  130.             1  
  131.             200  
  132.           
  133.       
  134.  
  135. '  
  136.  
  137. SELECT * FROM dbo.[Inventory]  
  138. --send  
  139. EXEC dbo.[UP_Send_Inventory] @Message  
  140.  
  141. WAITFOR DELAY '00:00:30' 
  142. SELECT * FROM Inventory  

原文链接:http://www.cnblogs.com/fuhongwei041/archive/2011/04/18/ssb.html

【编辑推荐】

  1. 如何通过注入SQL语句盗取网站管理权限
  2. SQL Server 2008中的代码安全
  3. SQL Server 2005数据库SA的相关安全性设置
  4. SQL Server与Oracle数据库在安全性上的异同
  5. Sql server安全设置九大措施

 

相关内容

热门资讯

如何允许远程连接到MySQL数... [[277004]]【51CTO.com快译】默认情况下,MySQL服务器仅侦听来自localhos...
如何利用交换机和端口设置来管理... 在网络管理中,总是有些人让管理员头疼。下面我们就将介绍一下一个网管员利用交换机以及端口设置等来进行D...
施耐德电气数据中心整体解决方案... 近日,全球能效管理专家施耐德电气正式启动大型体验活动“能效中国行——2012卡车巡展”,作为该活动的...
20个非常棒的扁平设计免费资源 Apple设备的平面图标PSD免费平板UI 平板UI套件24平图标Freen平板UI套件PSD径向平...
德国电信门户网站可实时显示全球... 德国电信周三推出一个门户网站,直观地实时提供其安装在全球各地的传感器网络检测到的网络攻击状况。该网站...
为啥国人偏爱 Mybatis,... 关于 SQL 和 ORM 的争论,永远都不会终止,我也一直在思考这个问题。昨天又跟群里的小伙伴进行...
《非诚勿扰》红人闫凤娇被曝厕所... 【51CTO.com 综合消息360安全专家提醒说,“闫凤娇”、“非诚勿扰”已经被黑客盯上成为了“木...
2012年第四季度互联网状况报... [[71653]]  北京时间4月25日消息,据国外媒体报道,全球知名的云平台公司Akamai Te...