• 从底层认识哈希表【C++】


    一. unordered系列关联式容器

    在C++98中,STL提供了底层为红黑树结构的一系列关联式容器,在查询时效率可达到$log_2N$,即最差情况下需要比较红黑树的高度次,当树中的节点非常多时,查询效率也不理想。最好的查询是,进行很少的比较次数就能够将元素找到,因此在C++11中,STL又提供了4个 unordered系列的关联式容器,这四个容器与红黑树结构的关联式容器使用方式基本类似,只是其底层结构不同(map/set是红黑树,unordered_map/unordered_set是哈希表),本文中只对unordered_map和unordered_set进行介绍,unordered_multimap和unordered_multiset学生可查看文档介绍。

    二. unordered_map的文档介绍

    1. unordered_map是存储键值对的关联式容器,其允许通过keys快速的索引到与其对应的value。
    2. 在unordered_map中,键值通常用于惟一地标识元素,而映射值是一个对象,其内容与此键关联。键和映射值的类型可能不同。
    3. 在内部,unordered_map没有对按照任何特定的顺序排序, 为了能在常数范围内找到key所对应的value,unordered_map将相同哈希值的键值对放在相同的桶中。
    4. unordered_map容器通过key访问单个元素要比map快,但它通常在遍历元素子集的范围迭代方面效率较低。
    5. unordered_maps实现了直接访问操作符(operator[]),它允许使用key作为参数直接访问value。
    6. 它的迭代器至少是前向迭代器。

    接口使用

    unordered_map与unordered_set用法跟map与set基本类似 ,同时也有unordered_multimap及mutiset的类型,支持数据冗余 。

    这里推荐大家直接使用文档查询即可:

    unordered_map - C++ Reference (cplusplus.com)

    1. void func()
    2. {
    3. unordered_mapint> mp;
    4. unordered_set<int> st;
    5. st.insert(1);
    6. st.insert(3);
    7. st.insert(7);
    8. st.insert(2);
    9. mp.insert(make_pair("a", 1));
    10. mp.insert(make_pair("k", 3));
    11. mp.insert(make_pair("z", 7));
    12. mp.insert(make_pair("c", 4));
    13. // 迭代器
    14. unordered_set<int>::iterator it = st.begin();
    15. while (it != st.end())
    16. {
    17. cout << *it << " ";
    18. ++it;
    19. }
    20. cout << endl;
    21. mp["a"] = 100; // unordered_map方括号的使用跟map差不多
    22. // 范围for
    23. for (auto& e : mp)
    24. {
    25. cout << e.first << " :" << e.second << " ";
    26. }
    27. }

    三. 底层实现

    (1)哈希概念

    顺序结构以及平衡树中,元素关键码与其存储位置之间没有对应的关系,因此在 查找一个元素时,必须要经过关键码的多次比较顺序查找时间复杂度为O(N),平衡树中为树的高度,即O($log_2 N$),搜索的效率取决于搜索过程中元素的比较次数。理想的搜索方法:可以 不经过任何比较,一次直接从表中得到要搜索的元素
    如果构造一种存储结构,通过某种函数(hashFunc)使元素的存储位置与它的关键码之间能够建立一一映射的关系,那么在查找时通过该函数可以很快找到该元素
    当向该结构中:
    插入元素
    根据待插入元素的关键码,以此函数计算出该元素的存储位置并按此位置进行存放
    搜索元素
    对元素的关键码进行同样的计算,把求得的函数值当做元素的存储位置,在结构中按此位置取元素比较,若关键码相等,则搜索成功该方式即为哈希(散列)方法, 哈希方法中使用的转换函数称为哈希(散列)函数,构造出来的结构称为哈希表(Hash Table)(或者称散列表)

    例:

    数据集合{1,7,6,4,5,9};

    哈希函数设置为:hash(key) = key % capacity;    capacity为存储元素底层空间总的大小

    用该方法进行搜索不必进行多次关键码的比较,因此搜索的速度比较快
    问题:按照上述哈希方式,向集合中插入元素44,会出现什么问题?   会将下标为8的位置进行,占用。这就是我们后面会说的,哈希冲突。

    (2)哈希冲突

    对于两个数据元素的关键字,即: 不同关键字通过相同哈希哈数计算出相同的哈希地址,该种现象称为哈希冲突或哈希碰撞把具有不同关键码而具有相同哈希地址的数据元素称为“同义词”。 发生哈希冲突该如何处理呢?

    (3)冲突解决

     解决哈希冲突两种常见的方法是:闭散列开散列

    1.闭散列

    上面哈希概念的例子,也就是闭散列一个案例。 

    闭散列:也叫 开放定址法 ,当发生哈希冲突时,如果哈希表未被装满,说明在哈希表中必然还有空位置,那么可以把key存放到冲突位置中的“下一个” 空位置中去。那如何寻找下一个空位置呢?

    线性探测 :从发生冲突的位置开始,依次向后探测,直到寻找到下一个空位置为止

    插入
    通过哈希函数获取待插入元素在哈希表中的位置,如果该位置中没有元素则直接插入新元素;如果该位置中有元素发生哈希冲突。使用线性探测找到下一个空位置,插入新元素。

    但说到插入,我们要考虑一些效率方面的问题。

    思考:哈希表什么情况下进行扩容?如何扩容?

    可知,负载因子在达到一定值时,哈希表的效率就会下降,我们要做的就是在这时对哈希表进行扩容,降低负载因子。

    可是,一但扩容,size发生改变,那么哈希地址就会发生改变,如:13 % 10 = 3,扩容后, 13 % 20 = 13,我们就找不到13,所以我们需要重新重组哈希表。

    闭散列框架

    1. enum state
    2. {
    3. EMPTY,
    4. EXIST,
    5. DELETE
    6. };
    7. template <class K, class V>
    8. struct HashData
    9. {
    10. pair _kv; // 数据内容先设置为pair
    11. state st; // 数据,状态标识
    12. HashData()
    13. :st(EMPTY)
    14. {}
    15. HashData(const pair& pa )
    16. :_kv(pa)
    17. ,st(EXIST)
    18. {}
    19. };
    20. template <class K, class V>
    21. class HashTable
    22. {
    23. public:
    24. typedef HashData HashData;
    25. private:
    26. vector _tables; // .size()表示的是多少个哈希地址
    27. size_t _n; // 已经占用的哈希地址
    28. };
    29. }

    插入 

    1. bool insert(const pair& pa)
    2. {
    3. // 检查是否需要扩容
    4. if (_tables.size() == 0 || _n * 10 / _tables.capacity() > 7) //负载因子设置 7
    5. {
    6. int new_size = _tables.size() == 0 ? 10 : _tables.size() * 2;
    7. // 重组哈希表
    8. HashTable tmp;
    9. tmp._tables.resize(new_size);
    10. for (auto& data : _tables)
    11. {
    12. if (data.st == EXIST)
    13. tmp.insert(data._kv);
    14. }
    15. _tables.swap(tmp._tables); //利用vector自带的swap函数
    16. }
    17. // 插入
    18. size_t hashi = pa.first % _tables.size();
    19. // 线性探索
    20. size_t i = 1;
    21. size_t index = hashi;
    22. while (_tables[index].st == EXIST)
    23. {
    24. index = hashi + i;
    25. index %= _tables.size();
    26. i++;
    27. }
    28. _tables[index]._kv = pa;
    29. _tables[index].st = EXIST;
    30. _n++;
    31. return true;
    32. }

    查找

    本质上,通过个寻找到哈希地址,然后从哈希地址处向后寻找,遇到空标记或者转一圈后返回;

    1. bool find(const K& data)
    2. {
    3. return _find(data) == -1 ? false : true;
    4. }
    5. size_t _find(const K& data)
    6. {
    7. size_t hashi = data % _tables.size();
    8. // 线性探索
    9. size_t i = 1;
    10. size_t index = hashi;
    11. while (_tables[index].st == EXIST)
    12. {
    13. if (_tables[index]._kv.first == data)
    14. return index;
    15. index = hashi + i;
    16. index %= _tables.size();
    17. i++;
    18. // 去寻找值时,外一出现全是删除与存在的情况
    19. if (index == hashi)
    20. break; // 说明已经经过一圈
    21. }
    22. return -1; // 表示未找到
    23. }

    删除

    采用闭散列处理哈希冲突时,不能随便物理删除哈希表中已有的元素,若直接删除元素会影响其他元素的搜索。比如删除元素4,如果直接删除掉,44查找起来可能会受影
    响。因此 线性探测采用标记的伪删除法来删除一个元素
    删除操作,比较简单,套用find寻找值后,修改状态即可。
    1. bool erase(const K& data)
    2. {
    3. auto cur = _find(data);
    4. if (cur != -1)
    5. {
    6. _tables[cur].st = DELETE;
    7. _n--;
    8. cout << "擦除成功" << endl;
    9. return 1;
    10. }
    11. else
    12. {
    13. cout << "未找到" << endl;
    14. return -1;
    15. }
    16. }

    2.开散列(使用较多)

    开散列法又叫链地址法(开链法),首先对关键码集合用散列函数计算散列地址,具有相同地址的关键码归于同一子集合,每一个子集合称为一个桶,各个桶中的元素通过一个单链表链接起来,各链表的头结点存储在哈希表中

    开散列框架

    开散列的框架,较闭散列有着不同的框架。

    1. template <class K, class V>
    2. struct Node_Data
    3. {
    4. typedef Node_Data Node_data;
    5. pair _kv;
    6. Node_data* _downstars = nullptr;
    7. Node_Data(const pair& pa = pair())
    8. :_kv(pa)
    9. {}
    10. };
    11. template <class K, class V>
    12. class HashTable
    13. {
    14. public:
    15. typedef Node_Data Node_Data;
    16. private:
    17. vector _tables; // 存放各个哈希地址的第一个结点地址的指针数组
    18. size_t _n = 0; // 哈希桶中,数据个数
    19. };
    20. }

    插入

    开散列增容
    桶的个数是一定的,随着元素的不断插入,每个桶中元素的个数不断增多,极端情况下,可能会导致一个桶中链表节点非常多,会影响的哈希表的性能,因此在一定条件下需要对哈希表进行增容,那该条件怎么确认呢?开散列最好的情况是:
    每个哈希桶中刚好挂一个节点,再继续插入元素时,每一次都会发生哈希冲突,因此,在元素个数刚好等于桶的个数时,可以给哈希表增容。
    1. bool insert(const pair& pa)
    2. {
    3. // 开散列增容
    4. // 考虑扩容:负载因子为1,2,3都可以
    5. if (_tables.size() == 0 || _n * 10 / _tables.size() > 10)
    6. {
    7. size_t new_size = _tables.size() == 0 ? 10 : _tables.size() * 2;
    8. // 开始扩容
    9. vector new_tables;
    10. new_tables.resize(new_size);
    11. size_t i;
    12. for (auto& data : _tables)
    13. {
    14. // 处理桶内的数据,重新插入新节点
    15. Node_Data* cur = data;
    16. while (cur)
    17. {
    18. Node_Data* room = cur->_downstars;
    19. size_t new_hashi = cur->_kv.first % new_tables.size();
    20. // 处理结点关系
    21. Node_Data* tmp = new_tables[new_hashi];
    22. new_tables[new_hashi] = cur;
    23. cur->_downstars = tmp;
    24. cur = room;
    25. }
    26. }
    27. _tables.swap(new_tables);
    28. }
    29. // 开散列插入
    30. size_t hashi = pa.first % _tables.size();
    31. Node_Data* new_node = new Node_Data(pa);
    32. new_node->_downstars = _tables[hashi];
    33. _tables[hashi] = new_node;
    34. _n++;
    35. return true;
    36. }

    查找

    在单链表中查找,这个还是非常简单的。

    1. bool find(const K& order)
    2. {
    3. return _find(order) == nullptr ? false : true;
    4. }
    5. Node_Data* _find(const K& order)
    6. {
    7. if (!_tables.size())
    8. return nullptr;
    9. size_t hashi = order % _tables.size();
    10. auto cur = _tables[hashi];
    11. while (cur)
    12. {
    13. if (cur->_kv.first == order)
    14. return cur;
    15. cur = cur->_downstars;
    16. }
    17. return nullptr;
    18. }

    删除

    在单链表中删除,还是稍微麻烦了一点。

    1. bool erase(const K& order)
    2. {
    3. auto cur = _find(order);
    4. if (!cur)
    5. {
    6. cout << "擦除失败: 不存在" << endl;
    7. return false;
    8. }
    9. size_t index = order % _tables.size();
    10. Node_Data* tmp = _tables[index];
    11. while (tmp)
    12. {
    13. if (cur == tmp)
    14. {
    15. break;
    16. }
    17. else if (cur == tmp->_downstars)
    18. {
    19. break;
    20. }
    21. tmp = tmp->_downstars;
    22. }
    23. // 开始处理节点
    24. if (tmp == _tables[index]) // 如果擦除的是头,那要置空的包括指针数组
    25. {
    26. _tables[index] = cur->_downstars;
    27. }
    28. else // 非单链表头,删除(中间删除)
    29. {
    30. tmp->_downstars = cur->_downstars;
    31. }
    32. delete (cur);
    33. cout << "擦除成功" << endl;
    34. return true;
    35. }

    (4)哈希函数

    引起哈希冲突的一个原因可能是: 哈希函数设计不够合理
    哈希函数设计原则
        哈希函数的定义域必须包括需要存储的全部关键码,而如果散列表允许有m个地址时,其值域必须在0到m-1之间
        哈希函数计算出来的地址能均匀分布在整个空间中
        哈希函数应该比较简单
    常见哈希函数

    1. 直接定址法--(常用)

    取关键字的某个线性函数为散列地址:Hash(Key)= A*Key + B
    优点:简单、均匀
    缺点:需要事先知道关键字的分布情况
    使用场景:适合查找比较小且连续的情况

    2. 除留余数法--(常用)

    设散列表中允许的 地址数为m,取一个不大于m,但最接近或者等于m的质数p作为除数,按照哈希函数:Hash(key) = key% p(p<=m),将关键码转换成哈希地址

    四,优化

    我们知道我们所用的案例都是,int类型进行获取哈希地址,那如果是string类型呢?? 人说:获取string首字符的ascill值,但如果都是以一个字母开头的话,就有大量数据冲突。那我们如何查找呢?下面是解决方案:
    1. template <class type>
    2. struct Hashstr
    3. {
    4. int operator()(const type& sd)
    5. {
    6. return sd;
    7. }
    8. };
    9. template<> // 类模板,其实这个可以使用重载符号也可以
    10. struct Hashstr
    11. {
    12. size_t operator()(const string& str)
    13. {
    14. size_t sum = 0;
    15. for (auto e : str)
    16. {
    17. sum += e;
    18. sum *= 31; // 为了减少冲突的概率,每个字符的ASCill值都得相乘一个数。啥为什么是31? 因为这是大量实验的结果
    19. }
    20. return sum;
    21. }
    22. };
    23. // 在HashTable 类中需要,添加类模板
    24. template <class K, class V, class Hashstr = Hashstr>
    25. class HashTable
    26. {
    27. public:
    28. typedef Node_Data Node_Data;
    29. ......

    这些就是哈希底层细节的精华部分。

    下期预告:封装哈希

    结语

       本小节就到这里了,感谢小伙伴的浏览,如果有什么建议,欢迎在评论区评论,如果给小伙伴带来一些收获请留下你的小赞,你的点赞和关注将会成为博主创作的动力

  • 相关阅读:
    【Linux】Linux网络连接方式 + 虚拟机克隆、迁移与删除+虚拟机快照+Linux(CentOS)安装wmtools
    无约束优化算法
    C++继承
    NoSQL之Redis配置与优化
    python基础查漏补缺
    项目经理必备的可视化管理工具
    hdfs基础概念和原理
    YOLO目标检测——口罩规范佩戴数据集+已标注xml和txt格式标签下载分享
    CentOS 7 编译安装Boost
    决策树与随机森林在分类预测中的应用(附源码)
  • 原文地址:https://blog.csdn.net/qq_72112924/article/details/134247876