偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

幾行 Python 代碼就可以提取數(shù)百個時間序列特征

開發(fā) 前端
時間序列數(shù)據(jù)是隨著時間的推移反復(fù)捕獲的變量值,隨著時間的推移可以產(chǎn)生一系列的按時間順序索引的數(shù)據(jù)點。在時間序列中,數(shù)據(jù)具有自然的時間順序,即一個變量在特定時間的值依賴于過去的值。

傳統(tǒng)的機器學(xué)習(xí)算法不能捕捉時間序列數(shù)據(jù)的時間順序。數(shù)據(jù)科學(xué)家需要執(zhí)行相關(guān)的特征工程,將數(shù)據(jù)的重要特征捕獲到幾個指標(biāo)中。生成大量的時間序列特征并從中提取相關(guān)特征是一項耗時且繁瑣的工作。

python的tsfresh包可以為時間序列數(shù)據(jù)生成標(biāo)準(zhǔn)的數(shù)百個通用特性。在本文中,我們將深入討論tsfresh包的使用。

tsfresh 是一個可以生成數(shù)百個相關(guān)的時間序列特征的開源包。 從 tsfresh 生成的特征可用于解決分類、預(yù)測和異常值檢測用例。

tsfresh 包提供了對時間序列數(shù)據(jù)執(zhí)行特征工程的各種功能,包括:

  • 特征生成
  • 特征選擇
  • 與大數(shù)據(jù)的兼容性

安裝tsfresh 也非常的簡單,官方提供了pip和conda的安裝方式:

pip install -U tsfresh# orconda install -c conda-forge tsfresh

1、特征生成

tsfresh 包提供了一個自動特征生成 API,可以從 1 個時間序列變量中生成 750 多個相關(guān)特征。 生成的特征廣泛,包括:

  • 描述性統(tǒng)計(平均值、最大值、相關(guān)性等)
  • 基于物理的非線性和復(fù)雜性指標(biāo)
  • 數(shù)字信號處理相關(guān)功能
  • 歷史壓縮特征

使用 tsfresh.extract_features() 函數(shù)可以為 1 個時間序列變量從多個域生成 789 個特征。

import pandas as pdfrom tsfresh import select_features# Read the time-series datadf = pd.read_excel("train.xlsx", parse_dates=['date']).set_index('date')# automated feature generationfeatures = tsfresh.extract_features(df, column_id="date", column_sort="date")

因為特征太多,所以具體的所有特征的介紹請查看官方文檔。

2、特征選擇

tsfresh 包還提供了一個基于假設(shè)檢驗的特征選擇實現(xiàn),可以用于識別目標(biāo)變量的相關(guān)特征。 為了限制不相關(guān)特征的數(shù)量,tsfresh 包含了fresh算法(fresh 代表基于可擴展假設(shè)測試的特征提?。?/p>

tsfresh.select_features() 函數(shù)用戶可以實現(xiàn)特征選擇。

3、兼容大數(shù)據(jù)

當(dāng)我們有大量的時間序列數(shù)據(jù)時。tsfresh還提供api來擴展特征的生成/提取,以及針對大量數(shù)據(jù)的特征選擇實現(xiàn):

  • 多線程處理:默認tsfresh包可以將特征生成/提取和特征選擇在多核上并行執(zhí)行。
  • 分布式框架:tsfresh還實現(xiàn)了一個自己的分布式框架,將特征計算分布在多臺機器上加快計算速度。
  • Spark兼容:tsfresh還可以使用spark或Dask來處理非常大的數(shù)據(jù)。

最后總結(jié),tsfresh可以通過幾行Python代碼中為時間序列特性生成和選擇相關(guān)特性。它會自動從基于時間的數(shù)據(jù)樣本的多個域中提取和選擇 750 +個經(jīng)過實際測試的特征。 它減少了數(shù)據(jù)科學(xué)家浪費在特征工程上的大量工作時間。

并且時間序列數(shù)據(jù)是相當(dāng)大的,tsfresh 也通過多線程、支持dask和spark來處理單機處理不了的大數(shù)據(jù)樣本。

責(zé)任編輯:華軒 來源: 今日頭條
相關(guān)推薦

2021-02-23 07:01:24

js小游戲技術(shù)

2012-02-01 10:13:04

2020-09-26 21:41:30

進度條Python代碼

2022-02-22 10:30:49

Kubernetes集群

2022-06-02 14:00:41

網(wǎng)絡(luò)攻擊黑客勒索攻擊

2023-03-30 15:12:47

2024-08-26 12:57:15

2022-03-01 15:26:29

漏洞網(wǎng)絡(luò)攻擊

2022-07-31 23:43:10

網(wǎng)絡(luò)安全漏洞風(fēng)險管理

2021-11-09 06:34:32

CISA漏洞補丁

2022-07-04 11:17:54

微軟蠕蟲病毒Raspberry

2022-03-17 14:36:20

后門網(wǎng)絡(luò)安全

2016-09-13 23:05:47

2020-05-11 17:12:52

換臉Python圖像

2020-07-06 10:55:38

CIO首席信息官IT

2022-10-17 07:16:08

SQL機器學(xué)習(xí)AI

2024-01-07 16:56:59

Python人工智能神經(jīng)網(wǎng)絡(luò)

2021-12-24 15:59:18

Azure漏洞源碼庫

2022-11-17 18:47:06

2013-04-15 09:51:53

中國聯(lián)通IDCSDN
點贊
收藏

51CTO技術(shù)棧公眾號