推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
sdushn
0D
V2EX  ›  Python

是否有合适的 Python 库实现一组采样数据的尖峰检测呢

  •  
  •   sdushn · Mar 11, 2021 · 3378 views
    This topic created in 1889 days ago, the information mentioned may be changed or developed.

    有一组采样数据,横轴时间,绘制出来一张图,希望能标识出图中的尖峰,对“尖峰”没有量化定义,目前是两种,一是某一个时间点的激增,二是某一段时间的激增;从图上看就是突然某一个点比前后都高很多,或者是平滑处理后的包络图,某会有类似二次函数的突起。
    这两种 尖峰能否使用现有的库,通过分析数据进行标注呢,确定出现尖峰的时间段即可

    Supplement 1  ·  Mar 12, 2021
    感谢各位大佬们的建议,目前采用了 peakutils,有相关需求的旁友们可以看看
    https://bitbucket.org/lucashnegri/peakutils/src/master/
    15 replies    2021-03-14 20:40:58 +08:00
    F281M6Dh8DXpD1g2
        1
    F281M6Dh8DXpD1g2  
       Mar 11, 2021
    异常值检测呗
    lixuda
        2
    lixuda  
       Mar 11, 2021
    sklearn 库看看,有个异常检查。
    Wincer
        3
    Wincer  
       Mar 11, 2021
    mark 一下,楼主有方案了麻烦告知一下,我最近也有类似的需求。目前尝试了 PCA,但是效果不是很理想。
    guyskk0x0
        4
    guyskk0x0  
       Mar 11, 2021 via Android
    Facebook Prophet
    learningman
        5
    learningman  
       Mar 11, 2021
    你先用数学把“尖峰”定义好,然后翻译成代码就行了
    no1xsyzy
        6
    no1xsyzy  
       Mar 11, 2021
    话说传统上异常值检测有:在回归时,添加某一个值会使得 r 值突然降低。
    imn1
        7
    imn1  
       Mar 11, 2021
    第一个想到应用场合是证券的放量
    我目前的做法是设定斜率临界点,前后两点拉直线的斜率,但不太满意
    此帖我会回看
    sdushn
        8
    sdushn  
    OP
       Mar 11, 2021
    @learningman emm,其实就是这个尖峰的数学定义没有讨论出很好的定义
    superrichman
        9
    superrichman  
       Mar 11, 2021 via iPhone
    我是通过计算 z-score 来找 outlier,有一定局限性
    看看有其它好方法没
    Macv1994
        10
    Macv1994  
       Mar 11, 2021 via Android
    在上一家公司做过,我记得 numpy 还是 scipy 中有一个函数可以直接做尖峰检测
    hasasiki
        11
    hasasiki  
       Mar 11, 2021
    现有库不太清楚,不过可以试试直接找到所有峰值,然后再按自己需求筛选,找峰值的算法就很多了
    Vectors
        12
    Vectors  
       Mar 11, 2021
    yesterdaysun
        13
    yesterdaysun  
       Mar 12, 2021
    之前用过 peakutils
    sdushn
        14
    sdushn  
    OP
       Mar 12, 2021
    @yesterdaysun 好用的,我目前也是采用了这个方案
    necomancer
        15
    necomancer  
       Mar 14, 2021
    https://docs.scipy.org/doc/scipy/reference/generated/scipy.signal.find_peaks.html

    一般这些算法都是基于小波变换,看看原理很简单的。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   4426 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 109ms · UTC 05:30 · PVG 13:30 · LAX 22:30 · JFK 01:30
    ♥ Do have faith in what you're doing.