出现重复简单解决办法

mongodb出现id重复问题的简单解决办法

数据库教程 2021-12-13 09:07:25 27

导读

背景 今天遇到mongodb在插入数据时出现id重复错误,具体错误代码如下: duplicatekeyerrorcollection:index:iddupkey:{:ObjectId(‘59a3b9275f063c20cc8bdec7')}', 觉得奇怪id不是自己生成的,怎么会这样呢。 于是查了下ObjectId。 ObjectId的结构 这些是_id的一些……

背景

今天遇到mongodb在插入数据时出现id重复错误,具体错误代码如下:

duplicate key error collection: index: id dup key: { : ObjectId(‘59a3b9275f063c20cc8bdec7') }',

觉得奇怪 id不是自己生成的,怎么会这样呢 。

于是查了下ObjectId 。

ObjectId 的结构

这些是 _id 的一些主要特征的摘要:

_id 是集合中文档的主键,用于区分文档(记录)。

_id自动编入索引。指定 { _id: } 的查找将 _id 索引作为其指南。

默认情况下,_id 字段的类型为 ObjectID,是 MongoDB 的 BSON 类型之一。如果需要,用户还可以将 _id 覆盖为 ObjectID 以外的其他内容。

ObjectID 长度为 12 字节,由几个 2-4 字节的链组成。每个链代表并指定文档身份的具体内容。以下的值构成了完整的 12 字节组合:

一个 4 字节的值,表示自 Unix 纪元以来的秒数

一个 3 字节的机器标识符

一个 2 字节的进程 ID

一个 3 字节的计数器,以随机值开始

通常,如果文档尚未分配 _id 值,MongoDB 将自动生成一个 _id 值。

尝试

我的代码大概是这样的 ,批量插入

   Collectwrite.InsertMany(item);

后面测试了下干脆改成单个添加

    foreach(var item in list)

    {

  Collectwrite.InsertOne(item);

  }

也是报错。

   Collectwrite.InsertOne(item);

                Thread.Sleep(500);

再后来降速添加,错误依旧。

解决办法

百度了一下,发现很多人都出现了类似问题,数据库的id是根据 时间戳+主机+进程号+序列生成的。重复的原因可能有两种:

内部原因:同时插入两条数据,导致数据库生成了同一个id值。

外部原因:每次使用同一个变量存储不同的数据,导致数据库认为每次存储的是同一条数据,最终生成同一个id值。

以上都有个共同点,就是让数据库自己生成id值。于是干脆换个思路

自己手动添加id值,当插入的数据带有_id的字段时,mongodb就不再自动生成id。至此, mongodb重复id的问题就解决了。  item.Id = ObjectId.GenerateNewId().ToString();

    Collectwrite.DeleteMany(x => x.SeasonId == seasonId);
            foreach(var item in list)

            {

                item.Id = ObjectId.GenerateNewId().ToString();

                Collectwrite.InsertOne(item);

                Thread.Sleep(500);

            }

            

        }
1253067 TFnetwork_cn