使用set函数解决Python中数据去重难题

在Python中，可以使用set函数来解决数据去重的问题

以下是一个简单的示例：

# 列表中的元素有重复
my_list = [1, 2, 3, 2, 1, 4, 5, 4, 6, 7, 8, 9, 8, 9]

# 使用set函数去重
unique_list = set(my_list)

# 将结果转换回列表
unique_list = list(unique_list)

print(unique_list)

输出结果：

[1, 2, 3, 4, 5, 6, 7, 8, 9]

需要注意的是，set函数会去除列表中的重复元素，但同时也会打乱原始列表的顺序。如果需要保持元素的顺序，可以使用以下方法：

my_list = [1, 2, 3, 2, 1, 4, 5, 4, 6, 7, 8, 9, 8, 9]

unique_list = []
for item in my_list:
    if item not in unique_list:
        unique_list.append(item)

print(unique_list)

输出结果：

[1, 2, 3, 4, 5, 6, 7, 8, 9]

这种方法会保留原始列表中元素的顺序，但可能会比使用set函数更慢一些。