0

0

Python 数组中最高频率数字的高效查找与处理

心靈之曲

心靈之曲

发布时间:2025-07-23 15:10:13

|

721人浏览过

|

来源于php中文网

原创

python 数组中最高频率数字的高效查找与处理

本文旨在探讨如何在Python中高效地查找数组中出现频率最高的数字,并处理当多个数字频率相同时,优先返回数值更大的数字这一特殊需求。文章将分析常见实现中的性能瓶颈,并提供基于collections.defaultdict的优化方案,以及不使用defaultdict的替代实现,确保在处理大规模数据时保持卓越性能。

问题定义与挑战

在处理数据时,我们经常需要统计元素出现的频率。一个常见的需求是找出数组中出现次数最多的数字。更进一步,如果存在多个数字拥有相同的最高频率,我们需要一个明确的规则来决定返回哪一个,例如,返回这些数字中数值最大的一个。

一个直观的思路是遍历数组,统计每个数字的出现次数,然后找出频率最高的数字。然而,不恰当的实现方式可能会导致严重的性能问题,尤其是在处理大型数据集时。

低效的实现方式及其分析

考虑以下一种尝试解决此问题的初始实现:

def highest_rank_inefficient(arr):
    count_num = {}
    for i in arr:
        # 这里的逻辑存在问题,并且 arr.count(i) 是性能瓶颈
        if i not in count_num:
            count_num[i] = 0 # 首次遇到时,这里初始化为0是不正确的,应为1或直接赋值
        else:
            count_num[i] = arr.count(i) # 每次循环都重新计算整个列表的count
    # 修正后的max函数,用于处理频率相同取最大值的情况
    return max(count_num, key=lambda x: (count_num.get(x), x))

上述代码中存在两个主要问题:

立即学习Python免费学习笔记(深入)”;

  1. 计数逻辑错误: if i not in count_num: count_num[i] = 0 之后没有正确地将当前元素的计数设为1。
  2. 性能瓶颈: 最关键的问题在于 count_num[i] = arr.count(i)。arr.count(i) 会遍历整个列表 arr 来计算 i 的出现次数。如果在循环中对每个元素都执行一次 arr.count(),那么对于一个长度为 N 的列表,总时间复杂度将达到 O(N^2)。这意味着当列表长度增加时,执行时间会呈平方级增长,导致在处理中等规模(例如10,000个元素)的数据时变得非常缓慢。

为了演示其低效性,即使修复计数逻辑并正确处理频率相同取最大值的情况,其性能依然堪忧:

def highest_rank_slow(arr):
    count_num = {}
    for i in arr:
        count_num[i] = arr.count(i) # 仍然是 O(N^2) 的瓶颈
    # 使用lambda表达式作为key,优先比较频率,频率相同则比较数字大小
    return max(count_num, key=lambda x: (count_num.get(x), x))

# 示例:
# highest_rank_slow([9, 48, 1, 8, 44, 45, 32]) # 返回 48

对于包含10,000个随机数字的列表,highest_rank_slow 可能需要数秒才能完成。

高效的解决方案:单次遍历与动态更新

为了解决 O(N^2) 的性能问题,我们需要一种只遍历数组一次(O(N) 时间复杂度)就能完成计数和最高频率数字查找的方法。这可以通过维护一个计数字典和一个当前最高频率数字及其频率的变量来实现。

杰易OA办公自动化系统6.0
杰易OA办公自动化系统6.0

基于Intranet/Internet 的Web下的办公自动化系统,采用了当今最先进的PHP技术,是综合大量用户的需求,经过充分的用户论证的基础上开发出来的,独特的即时信息、短信、电子邮件系统、完善的工作流、数据库安全备份等功能使得信息在企业内部传递效率极大提高,信息传递过程中耗费降到最低。办公人员得以从繁杂的日常办公事务处理中解放出来,参与更多的富于思考性和创造性的工作。系统力求突出体系结构简明

下载

方案一:使用 collections.defaultdict

collections.defaultdict 是一个非常方便的工具,它允许我们为字典中不存在的键提供一个默认值(例如,整数的默认值是0),从而简化计数逻辑。

from collections import defaultdict

def highest_rank(arr):
    """
    查找数组中频率最高的数字,若频率相同则返回数值更大的数字。
    时间复杂度:O(N),空间复杂度:O(K),其中 K 是数组中不重复数字的数量。
    """
    count = defaultdict(int)  # 使用 defaultdict(int) 自动将新键的默认值设为 0

    # 初始化最高频率数字和其频率
    # 注意:如果数组为空或只包含0,需要考虑初始值。
    # 这里假设数组非空,且数字可能为0。
    # 为了正确处理所有情况,特别是当数组中所有数字都为负数或0时,
    # highest_rank 应初始化为数组中的第一个元素或一个足够小的值,
    # highest_rank_cnt 初始化为0。

    # 更好的初始化方式,确保第一次迭代能正确设置 highest_rank
    highest_rank_val = None
    highest_rank_cnt = 0

    for num in arr:
        count[num] += 1  # 每次遇到数字,其计数加1
        current_cnt = count[num] # 获取当前数字的最新频率

        # 更新最高频率数字的逻辑:
        # 1. 如果当前数字的频率更高,则更新。
        # 2. 如果当前数字的频率与最高频率相同,但当前数字的数值更大,则更新。
        if highest_rank_val is None or \
           current_cnt > highest_rank_cnt or \
           (current_cnt == highest_rank_cnt and num > highest_rank_val):

            highest_rank_val = num
            highest_rank_cnt = current_cnt

    return highest_rank_val

# 示例测试
print(highest_rank([9, 48, 1, 8, 44, 45, 32]))  # 输出: 48
print(highest_rank([1, 2, 2, 3, 3, 3]))         # 输出: 3
print(highest_rank([1, 2, 2, 3, 3]))           # 输出: 3 (频率相同,3 > 2)
print(highest_rank([5, 5, 5, 1, 1, 1]))         # 输出: 5 (频率相同,5 > 1)
print(highest_rank([]))                         # 输出: None (或根据需求处理空数组)
print(highest_rank([0, 0, 1, 1]))               # 输出: 1

代码解析:

  • 我们使用 defaultdict(int) 创建一个字典 count,其默认值为 0。这意味着当访问一个不存在的键时,它会自动创建该键并赋值为 0,然后我们就可以直接对其进行加法操作。
  • highest_rank_val 和 highest_rank_cnt 分别存储当前找到的最高频率数字和其对应的频率。
  • 在遍历数组时,我们首先更新当前数字的计数。
  • 然后,我们检查当前数字的频率 (current_cnt) 是否比 highest_rank_cnt 更高。
  • 如果更高,则直接更新 highest_rank_val 和 highest_rank_cnt。
  • 如果频率相同 (current_cnt == highest_rank_cnt),则进一步检查当前数字 (num) 是否比 highest_rank_val 更大。如果是,也进行更新。
  • 这种方法只需要遍历数组一次,因此时间复杂度为 O(N)。

方案二:不使用 defaultdict 的实现

如果你不想使用 defaultdict,也可以通过标准的字典和 if/else 语句来实现相同的逻辑,但代码会稍微冗长一些:

def highest_rank_no_defaultdict(arr):
    """
    查找数组中频率最高的数字,若频率相同则返回数值更大的数字(不使用 defaultdict)。
    """
    count = {}
    highest_rank_val = None
    highest_rank_cnt = 0

    for num in arr:
        # 手动处理键是否存在
        if num not in count:
            cnt = 1
        else:
            cnt = count[num] + 1
        count[num] = cnt # 更新计数

        # 更新最高频率数字的逻辑与 defaultdict 版本相同
        if highest_rank_val is None or \
           cnt > highest_rank_cnt or \
           (cnt == highest_rank_cnt and num > highest_rank_val):

            highest_rank_val = num
            highest_rank_cnt = cnt

    return highest_rank_val

# 示例测试
print(highest_rank_no_defaultdict([9, 48, 1, 8, 44, 45, 32])) # 输出: 48

虽然这种方法功能上等同于使用 defaultdict 的版本,但在实际性能测试中,defaultdict 通常会略微快一些,因为它在底层进行了优化,避免了显式的 if num not in count 检查。

性能对比与最佳实践

通过实际测试,对于包含10,000个随机数字的列表:

  • highest_rank_slow (使用 arr.count() 的 O(N^2) 方法) 可能需要 1.5 秒 左右。
  • highest_rank (使用 defaultdict 的 O(N) 方法) 可能只需要 3 毫秒 左右。

这种巨大的性能差异(约500倍)凸显了选择高效算法的重要性。对于100万个数字的列表,O(N) 方法仍能在约230毫秒内完成,而 O(N^2) 方法则可能需要数分钟甚至更长时间。

总结与建议:

  • 避免在循环中重复执行昂贵的全局操作,如 list.count()。
  • 利用字典进行频率计数 是处理此类问题的标准且高效的方法。
  • 优先考虑使用 collections.defaultdict,它能简化计数逻辑并提供良好的性能。
  • 仔细设计最高频率元素的更新逻辑,确保正确处理频率相同时的 tie-breaking 规则。
  • 在处理大规模数据集时,算法的时间复杂度是决定程序性能的关键因素。从 O(N^2) 优化到 O(N) 能够带来数量级的性能提升。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

769

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

639

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1305

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

549

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

709

2023.08.11

Java JVM 原理与性能调优实战
Java JVM 原理与性能调优实战

本专题系统讲解 Java 虚拟机(JVM)的核心工作原理与性能调优方法,包括 JVM 内存结构、对象创建与回收流程、垃圾回收器(Serial、CMS、G1、ZGC)对比分析、常见内存泄漏与性能瓶颈排查,以及 JVM 参数调优与监控工具(jstat、jmap、jvisualvm)的实战使用。通过真实案例,帮助学习者掌握 Java 应用在生产环境中的性能分析与优化能力。

19

2026.01.20

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 6.3万人学习

Django 教程
Django 教程

共28课时 | 3.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号