当前位置: 首页 > 编程笔记 >

c# 插入数据效率测试(mongodb)

颛孙庆
2023-03-14
本文向大家介绍c# 插入数据效率测试(mongodb),包括了c# 插入数据效率测试(mongodb)的使用技巧和注意事项,需要的朋友参考一下

mongodb的数据插入速度是其一个亮点,同样的10000条数据,插入的速度要比Mysql和sqlserver都要快,当然这也是要看使用者怎么个使用法,你代码如果10000次写入使用10000次连接,那也是比不过其他数据库使用事务一次性提交的速度的。

同样,mongo也提供的一次性插入巨量数据的方法,因为mongodb没有事务这回事,所以在在C#驱动里,具体方法是InsertManyAsync()一次性插入多个文档。与之对应的是InsertOneAsync,这个是一次插入一个文档;

InsertManyAsync()这个方法带入的参数只要是实现了IEnumerable接口的类型就可以,所以可是list<>,这样的数据类型;

同样的10000次插入,两个方法时间差别很大。如图:

使用一次性插入多个文档方法,插入10000条耗时仅1.3秒,分成10000次插入,耗时19.9秒。区别大了个去。同样,前面我做过使用mysql插入10000条记录,要用4秒多,可见,这mongodb插入速度不是吹 的。

具体的代码如下,贴上:

using System; 
using System.Collections.Generic; 
using System.Linq; 
using System.Text; 
using System.Threading.Tasks; 
using MongoDB.Bson; 
using MongoDB.Driver; 
using System.Diagnostics; 
namespace sqltomongo 
{ 
  public  class MongoHelp 
  { 
    private static IMongoClient client 
    { 
      get 
      { 
        if (null == _client) 
        { 
          _client = new MongoClient("mongodb://127.0.0.1:27017"); 
        } 
        return _client; 
      } 
    } 
    public  static IMongoDatabase database 
    { 
      get { 
         _database = client.GetDatabase("HotelPersonInfo"); 
         return _database; 
      } 
      set { 
        _database = value; 
      } 
    } 
 
    public  static IMongoCollection<BsonDocument> collection 
    { 
      get { 
        return _collection; 
      } 
      set { 
        _collection = value; 
      } 
    } 
 
    protected static IMongoClient _client; 
    protected static IMongoDatabase _database; 
    protected static IMongoCollection<BsonDocument> _collection; 
     //测试效率,两个方法用时比较 
    public async static void TestMongo() 
    { 
      //自定义的对象 
      RoomInfo roomdata = new RoomInfo(); 
      List<BsonDocument> docunemts = new List<BsonDocument>(); 
      collection = database.GetCollection<BsonDocument>("HotelPersonInfo"); 
      Stopwatch sw = new Stopwatch(); 
      sw.Start(); 
      for (int i = 1; i < 10000; i++) 
      { 
         //mongo对用户自定义的对象扩展了tobasonDocument这个方法,可直接用 
        var roomdatadocument = new BsonDocument(roomdata.ToBsonDocument()); 
        docunemts.Add(roomdatadocument); 
      } 
      //一次10000条 
       //这方法 查看api手册,只要实现了IEnumerable借口的类型就都行 
      await collection.InsertManyAsync(docunemts); 
      sw.Stop(); 
       TimeSpan ts2 =sw.Elapsed; 
       Console.WriteLine("total is " + ts2.TotalMilliseconds); 
 
      ///一次次插 10000次 
       Stopwatch sw2 = new Stopwatch(); 
       sw2.Start(); 
       for (int i = 1; i < 10000; i++) 
       { 
         var roomdatadocument = new BsonDocument(roomdata.ToBsonDocument()); 
         await collection.InsertOneAsync(roomdatadocument); 
       }        
       sw2.Stop(); 
       TimeSpan ts22 = sw2.Elapsed; 
       Console.WriteLine("total is " + ts22.TotalMilliseconds); 
 
     // await collection.InsertOneAsync(roomdatadocument); 
       
      //collection = database.GetCollection<BsonDocument>("HotelPersonInfo"); 
      // collection.InsertOneAsync(roomdatadocument); 
    } 
  } 
} 

里面使用了一个自定义的对象:

代码如下:

using System; 
using System.Collections.Generic; 
using System.Linq; 
using System.Text; 
using System.Threading.Tasks; 
using MongoDB.Bson; 
namespace sqltomongo 
{ 
 
  public class RoomInfo  
  { 
    public RoomInfo() 
    { 
     // id = "test";  
      Name = "nafd"; Moblie = "123456"; EMail = "dd@qq.com"; Tel = "010123"; Fax = "0755-001"; 
      IdentityId = "616112323231"; RegisterType = "tid"; CardNo = "cardno"; Sex = "男"; Birthday = "1999"; 
      Address = "china beijing"; ZipCode = "519000"; RegisterDate = "2015-03-03"; 
      District2 = "District2"; 
      District3 = "District3"; 
      District4 = "District4"; 
    } 
   // public string id { get; set; } 
    /// <summary> 
    /// 名字 
    /// </summary> 
    public string Name { get; set; }       
     /// <summary> 
    /// 手机号码 
    /// </summary> 
    public string Moblie { get; set; } 
    /// <summary> 
    /// 邮箱 
    /// </summary> 
    public string EMail {get;set;} 
    /// <summary> 
    /// 座机 
    /// </summary> 
    public string Tel { get; set; } 
    /// <summary> 
    /// 传真 
    /// </summary> 
    public string Fax { get; set; } 
    /// <summary> 
    /// 身份证 
    /// </summary> 
    public string IdentityId { get; set; } 
     /// <summary> 
    /// 使用什么注册的 
    /// ID --身份证 (只需要id身份证的信息) 
    /// </summary> 
    public string RegisterType { get; set; } 
      /// <summary> 
    /// 会员卡号 
    /// </summary> 
    public string CardNo { get; set; } 
    /// <summary> 
    /// 性别 
    /// </summary> 
    public string Sex { get; set; } 
    /// <summary> 
    /// 生日 
    /// </summary> 
    public string Birthday { get; set; } 
    /// <summary> 
    /// 地址 
    /// </summary> 
    public string Address { get; set; } 
    /// <summary> 
    /// 邮编 
    /// </summary> 
    public string ZipCode { get; set; } 
 
    public string District2 { get; set; } 
    public string District3 { get; set; } 
    public string District4 { get; set; } 
    /// <summary> 
    /// 注册时间  
    /// </summary> 
    public string RegisterDate { get; set; } 
 
  } 
}

mongodb的一些小总结

mongodb的html" target="_blank">安装,官网下载想要的版本,可视化工具mongovue(注意不支持mongodb3.0以上的版本)

下载mis安装,解压后bin,。。。

1.配置环境变量,将H:\mongodb\mongodbInstall\bin bin目录加入环境变量的path里面
2.bin目录同级目录创建data文件夹,data文件夹内新建db、log文件夹log文件夹下再创建mongodb.log
3.输入如下的命令启动mongodb服务:(定位到bin下面)
H:/mongodb/mongodbInstall/bin>mongod --dbpath H:\mongodb\mongodbInstall\data\db
http://localhost:27017 测试是否连接成功
4.data同级目录创建mongodb.config 记事本打开mongodb.config
dbpath=H:\mongodb\mongodbInstall\data\db
logpath=H:\mongodb\mongodbInstall\data\log\mongodb.log
5.用管理员身份打开cmd命令行,进入H:/mongodb/mongodbInstall/bin目录,输入如下的命令:
mongod --config H:\mongodb\mongodbInstall\mongo.config --install --serviceName "MongoDB"
services.msc可以看到mongodb的服务已经启动

mongodb安装配置完成后,cmd直接录入mongo可进入mongo的命令行,show dbs可以看到现有的数据库(我把之前数据库备份的ns文件放入db文件夹内,show dbs的时候并没有显示出来)

然后安装mongovue(只有mysql可以免费导入到mongodb,因为有sqlserver的对应数据库,,,所以转化通过sqlserver转化为mysql再导入到mongovue)
sqlserver->mysql:mysql中导入向导-》选择ODBC-》选择sql server native client 、设置连接(服务器名(本机127.0.0.1)然后sqlserver用户名,密码)下一步-》下一步。。。。结束。
mysql->mongodb:add 一个数据库-》右键RDBMS Import 然后填写连接。

 类似资料:
  • 本文向大家介绍C#/.Net 中快速批量给SQLite数据库插入测试数据,包括了C#/.Net 中快速批量给SQLite数据库插入测试数据的使用技巧和注意事项,需要的朋友参考一下 使用transaction:

  • 问题内容: 我有一个Spring / Hibernate网络应用程序,该应用程序具有一些在内存中的HSQL数据库上运行的集成测试。由于hbm2ddl = create,Hibernate使用了这个空白数据库并创建了我的所有测试表和约束。但是,我有一个新的bean,在它的afterPropertiesSet()方法期间检查数据库中的特定配置值,因此,当初始化此bean时,数据库中必须存在这样的行。

  • 在这种情况下,接口的所有不同实现是如何表现的?当选择一种实现而不是另一种实现时,利弊是什么?

  • 问题内容: 我有一个Spring / Hibernate网络应用程序,该应用程序具有一些在内存中的HSQL数据库上运行的集成测试。由于hbm2ddl = create,Hibernate使用了这个空白数据库并创建了我的所有测试表和约束。但是,我有一个新的bean,在它的afterPropertiesSet()方法期间检查数据库中的特定配置值,因此,当初始化此bean时,该行需要存在于数据库中。 有

  • 我在尝试将记录插入数据库时遇到错误。 错误如下: 守则: 数据库:

  • 问题内容: 在Ci中,我具有以下功能。如何测试查询是否成功插入而没有错误? 问题答案: 您可以使用codeigniter的功能。 在这里查看更多信息 您可以执行以下操作: