C#實現(xiàn)數(shù)據(jù)去重的方式總結(jié)

更新時間：2023年07月27日 08:11:32 作者：追逐時光者

這篇文章主要來和大家一起來討論一下關(guān)于C#數(shù)據(jù)去重的常見的幾種方式，每種方法都有其特點和適用場景，感興趣的小伙伴可以了解一下

前言

今天我們一起來討論一下關(guān)于C#數(shù)據(jù)去重的常見的幾種方式，每種方法都有其特點和適用場景，我們根據(jù)具體需求選擇最合適的方式。當然歡迎你在評論區(qū)留下你覺得更好的數(shù)據(jù)去重的方式。

使用HashSet去重

HashSet的唯一性

HashSet 中的元素是唯一的，不允許重復值。如果試圖添加重復的元素，HashSet 不會引發(fā)錯誤，而是簡單地忽略重復的值。

????????///?<summary>
????????///?使用HashSet去重
????????///?TODO:HashSet是一個集合類，它的特點是不允許重復元素，可以方便地實現(xiàn)去重功能。
????????///?</summary>
????????public?static?void?HashSetDuplicate()
????????{
????????????var?dataSource?=?new?List<int>()?{?1,?2,?3,?2,?5,?88,?99,?99,?100,?88,?30,?50,?15,?100,?99,?99,?2,?3?};
????????????HashSet<int>?uniqueData?=?new?HashSet<int>(dataSource);
????????????Console.WriteLine(string.Join(",?",?uniqueData));
????????}

使用Linq的Distinct()方法去重

Linq中的Distinct()方法用于從集合中篩選出不重復的元素。Distinct()方法基于元素的相等性來進行篩選，并返回一個包含不重復元素的新序列。底層實現(xiàn)還是使用到了HashSet。

????????///?<summary>
????????///?使用Linq的Distinct()方法去重
????????///?</summary>
????????public?static?void?DistinctDuplicate()
????????{
????????????var?dataSource?=?new?List<int>()?{?1,?2,?3,?2,?5,?88,?99,?99,?100,?88,?30,?50,?15,?100,?99,?99,?2,?3?};
????????????var?uniqueData?=?dataSource.Distinct();
????????????Console.WriteLine(string.Join(",?",?uniqueData));
????????}

使用Linq的GroupBy()方法去重

GroupBy()方法將原始集合中的元素進行分組，根據(jù)指定的鍵或條件進行分組。每個分組都會有一個唯一的鍵，通過將原始集合分組并選擇每個分組中的第一個元素，實現(xiàn)了去重的效果。

????????///?<summary>
????????///?使用Linq的GroupBy()方法去重
????????///?</summary>
????????public?static?void?GroupByDuplicate()
????????{
????????????var?dataSource?=?new?List<int>()?{?1,?2,?3,?2,?5,?88,?99,?99,?100,?88,?30,?50,?15,?100,?99,?99,?2,?3?};
????????????//GroupBy()方法將原始集合中的元素進行分組，根據(jù)指定的鍵或條件進行分組。每個分組都會有一個唯一的鍵，通過將原始集合分組并選擇每個分組中的第一個元素，實現(xiàn)了去重的效果。
????????????var?uniqueData?=?dataSource.GroupBy(item?=>?item).Select(group?=>?group.First()).ToList();
????????????Console.WriteLine(string.Join(",?",?uniqueData));
????????}

使用自定義的比較器和循環(huán)遍歷

????public?class?ArrayDeduplication
????{
????????///?<summary>
????????///?使用自定義的比較器和循環(huán)遍歷
????????///?</summary>
????????public?static?void?CustomEqualityComparerDuplicate()
????????{
????????????var?dataSource?=?new?List<int>()?{?1,?2,?3,?2,?5,?88,?99,?99,?100,?88,?30,?50,?15,?100,?99,?99,?2,?3?};
????????????var?uniqueData?=?new?List<int>();
????????????foreach?(var?item?in?dataSource)
????????????{
????????????????if?(!uniqueData.Contains(item,?new?CustomEqualityComparer()))
????????????????{
????????????????????uniqueData.Add(item);
????????????????}
????????????}
????????????Console.WriteLine(string.Join(",?",?uniqueData));
????????}
????}
????///?<summary>
????///?自定義的比較器
????///?</summary>
????public?class?CustomEqualityComparer?:?IEqualityComparer<int>
????{
????????public?bool?Equals(int?x,?int?y)
????????{
????????????return?x?==?y;
????????}
????????public?int?GetHashCode(int?obj)
????????{
????????????return?obj.GetHashCode();
????????}
????}

直接循環(huán)遍歷去重

????????///?<summary>
????????///?直接循環(huán)遍歷去重
????????///?</summary>
????????public?static?void?LoopTraversalDuplicate()
????????{
????????????var?dataSource?=?new?List<int>()?{?1,?2,?3,?2,?5,?88,?99,?99,?100,?88,?30,?50,?15,?100,?99,?99,?2,?3?};
????????????var?uniqueData?=?new?List<int>();
????????????foreach?(var?item?in?dataSource)
????????????{
????????????????//if?(!uniqueData.Any(x?=>?x?==?item))
????????????????//if?(!uniqueData.Exists(x?=>?x?==?item))
????????????????if?(!uniqueData.Contains(item))
????????????????{
????????????????????uniqueData.Add(item);
????????????????}
????????????}
????????????Console.WriteLine(string.Join(",?",?uniqueData));
????????}

到此這篇關(guān)于C#實現(xiàn)數(shù)據(jù)去重的方式總結(jié)的文章就介紹到這了,更多相關(guān)C#數(shù)據(jù)去重內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: