SQLBulkCopy 完成时的行计数

Question

我正在使用 SQLBulkCopy 移动大量数据。我实现了通知事件，以便在每次处理一定数量的行时通知我，但作业完成时不会触发 OnSqlRowsCopied 事件。 SQLBulkCopy writetoserver 完成时如何获取复制的总行数？

Answer 1

以下 hack（使用反射）是一个选项：

    /// <summary>
    /// Helper class to process the SqlBulkCopy class
    /// </summary>
    static class SqlBulkCopyHelper
    {
        static FieldInfo rowsCopiedField = null;

        /// <summary>
        /// Gets the rows copied from the specified SqlBulkCopy object
        /// </summary>
        /// <param name="bulkCopy">The bulk copy.</param>
        /// <returns></returns>
        public static int GetRowsCopied(SqlBulkCopy bulkCopy)
        {
            if (rowsCopiedField == null)
            {
                rowsCopiedField = typeof(SqlBulkCopy).GetField("_rowsCopied", BindingFlags.NonPublic | BindingFlags.GetField | BindingFlags.Instance);
            }

            return (int)rowsCopiedField.GetValue(bulkCopy);
        }
    }

然后使用该类如下：

int rowsCopied = SqlBulkCopyHelper.GetRowsCopied(bulkCopyObjectInYourCode);

希望这有帮助。

Answer 2

这就是我所做的——这是对这个线程中的Rahul Modi的解决方案的轻微修改（基本上它只是将SqlRowsCopied事件内联，我认为在这个实例中这比创建新的事件处理程序方法更干净）：

private long InsetData(DataTable dataTable, SqlConnection connection)
{
   using (SqlBulkCopy copier = new SqlBulkCopy(connection))
   {
      var filesInserted = 0L;

      connection.Open();

      copier.DestinationTableName = "dbo.MyTable";
      copier.NotifyAfter = dataTable.Rows.Count;
      copier.SqlRowsCopied += (s, e) => filesInserted = e.RowsCopied;
      copier.WriteToServer(dataTable);

      connection.Close();

      return filesInserted;
   }
}

Answer 3

为了完整起见，我已实现为扩展方法并包含名称空间。如果您想要快速解决方案来获取复制的计数，请复制并粘贴此类。注意：此计数不考虑当忽略重复项设置为 ON 时实际插入的行数。

namespace System.Data.SqlClient
{    
    using Reflection;

    public static class SqlBulkCopyExtension
    {
        const String _rowsCopiedFieldName = "_rowsCopied";
        static FieldInfo _rowsCopiedField = null;

        public static int RowsCopiedCount(this SqlBulkCopy bulkCopy)
        {
            if (_rowsCopiedField == null) _rowsCopiedField = typeof(SqlBulkCopy).GetField(_rowsCopiedFieldName, BindingFlags.NonPublic | BindingFlags.GetField | BindingFlags.Instance);            
            return (int)_rowsCopiedField.GetValue(bulkCopy);
        }
    }
}

Answer 4

将

NotifyAfter

设置为 1。在

SqlRowsCopied

的处理程序中，递增计数器。

WriteToServer

完成后，读取计数器。

Answer 5

通过使用

SqlBulkCopy.SqlRowsCopied Event

（每次处理由

NotifyAfter

属性指定的行数时发生），我们可以实现 SQLBulkCopy Row Count When Complete。

using (SqlBulkCopy s = new SqlBulkCopy(db.Database.Connection as SqlConnection))
{
  s.SqlRowsCopied += new SqlRowsCopiedEventHandler(sqlBulk_SqlRowsCopied);
  s.BatchSize = csvFileData.Rows.Count;//DataTable
  s.NotifyAfter = csvFileData.Rows.Count;
  foreach (var column in csvFileData.Columns)
     s.ColumnMappings.Add(column.ToString(), column.ToString());
  // Set the timeout.
  s.BulkCopyTimeout = 60;
  s.DestinationTableName = "Employee_Data";
  s.WriteToServer(csvFileData);
}

private static void sqlBulk_SqlRowsCopied(object sender, SqlRowsCopiedEventArgs e)
{
    long Count = e.RowsCopied;
}

Answer 6

扩展方法：

（基于Benzi的回答）

using System;
using System.Reflection;
using System.Data.SqlClient;
using static System.Reflection.BindingFlags;

namespace Extensions
{
    public static class SqlBulkCopyExtensions
    {
        private static readonly Lazy<FieldInfo> _rowsCopiedLazy = new Lazy<FieldInfo>(()
            => typeof(SqlBulkCopy).GetField("_rowsCopied", NonPublic | GetField | Instance));

        public static int GetRowsCopied(this SqlBulkCopy sqlBulkCopy)
            => (int)_rowsCopiedLazy.Value.GetValue(sqlBulkCopy);
    }
}

从 .NET 4.6.1 开始测试并工作

请注意，字段的类型为

int

（而事件参数中的属性类型为

long

）。不确定如果复制 >

int.MaxValue

行会发生什么。

Answer 7

这就是我从 SqlBulkCopy 获取行数的方式，将 NotifyAfter 设置为 1 很重要：

var rowsInserted = 0L;
using var sbc = new SqlBulkCopy(dbConnection, SqlBulkCopyOptions.KeepIdentity, transaction);
sbc.NotifyAfter = 1;
sbc.SqlRowsCopied += (s, e) => rowsInserted = e.RowsCopied;
sbc.WriteToServer(dr);
//Get row count
return rowsInserted;

Answer 8

我认为完成后您必须在表上运行 COUNT() 查询，如 MSDN 示例此处所示。

除此之外，你不能提前告诉我吗？例如如果您将 DataTable 传递给 WriteToServer() 那么您可以通过对其执行 .Rows.Count 来知道有多少条记录。