在Python中使用MongoDB进行数据插入时，如果已存在的数据不在数据库中，则不执行操作；当数据不存在于数据库中时则会插入。

简介：
当我们在使用Python与MongoDB进行数据操作时，通常会遇到处理数据插入的问题。特别是在日志记录或爬虫项目中，我们希望确保每个新增的数据都是唯一的。为了避免已有相同数据时的不必要的操作，在本文中我们将详细讲解如何实现这一目标。 出现错误E11000 duplicate key error通常由MongoDB的唯一性索引问题引起，在插入数据时如果出现重复的唯一键会导致该错误发生。例如，在本案例中，日志记录中的`_id`字段作为主键出现重复，从而无法完成新数据的插入过程。为了解决这个问题，我们可以采用MongoDB的update操作，并配合upsert以及$setOnInsert参数进行处理。当upsert参数被设置为true时，在查询匹配的结果不存在的情况下，该操作会自动生成新的文档。同时，$setOnInsert运算符的作用是指导在新增记录中设定特定字段及其对应的值。如果查询结果中的记录已经存在，则$setOnInsert指定的字段信息不会发生任何变化。 以下是一个具体的示例：```python from pymongo import MongoClient client = MongoClient(mongodb:localhost:27017) db = client[database_name] collection = db[Blog] # 假设已有数据 data1 = {_id: 123456, blog_cont: abcdef, title: 《My Test》} collection.insert_one(data1) # 当尝试插入相同_id的数据时，$setOnInsert不会执行 new_data1 = {_id: 123456, blog_cont: abc123, other: hello world!} result1 = collection.update_one({_id: 123456}, {$setOnInsert: new_data1}, upsert=True) print(result1.matched_count, result1.upserted_id) # 输出：1 None # 当尝试插入不同_id的数据时，数据会被插入 new_data2 = {_id: 123, blog_cont: abc123, other: hello world!} result2 = collection.update_one({_id: 123}, {$setOnInsert: new_data2}, upsert=True) print(result2.matched_count, result2.upserted_id) # 输出：0 ObjectId(5f05d6a6989e5054c0f35661) # 如果想更新已存在的数据，可以结合使用$setOnInsert和$set update_data = {$setOnInsert: {blog_cont: abc123, other: hello world!}, $set: {title: 《New Title》}} result3 = collection.update_one({_id: 123456}, update_data, upsert=True) print(result3.matched_count, result3.upserted_id) # 输出：1 None ```在给定的代码示例中，我们首先与MongoDB服务器建立连接，并选定所需的数据库和数据集。随后，我们在代码中尝试插入两组数据：一组包含相同值的`_id`字段，另一组则使用了不同的`_id`。通过分析`update_one`方法的返回值，我们能够确定有多少符合条件的记录，并判断该操作是否实际执行。在操作过程中需要特别注意的是，$setOnInsert仅在新增数据时起作用。它不会对已经存在的文档产生任何修改。如果希望对某些字段进行更新操作，则可以通过结合其他方法来进行处理。例如，在一个具体的案例中，我们修改了一条特定记录的`title`字段；而对于其他如`blog_cont`和`other`字段，则是在新增数据的时候进行初始化设置。在Python中利用MongoDB的`update_one`接口，在执行更新操作时搭配设置以实现数据唯一性，并借助`upsert=True`和`$setOnInsert`参数来有效应对已存在记录不修改的情况。这样既能保证数据库插入操作的安全性和完整性，又能避免不必要的重复写入操作。这种方法特别适用于处理海量数据的场景，如日志存储和网络爬虫数据的持久化存储等。