Come convertire una colonna con oggetto dtype a galleggiare in una panda dataframe?

0

Domanda

Ho un dataframe con una colonna denominata 'altezza' e voglio convertire i valori in float. L'unità di misura predefinita è in metri, ma ha alcuni valori in formato non corretto, o in pollici. Sembra

        height
0          16
1           7
2           7
3         6 m
4        2.40
5        5'8"
6          3m
7         6,9
8       9;6;3
9     Unknown
10       4.66
11 Bilinmiyor
12     11' 4"

dtype: object

Fondamentalmente, ho bisogno di convertire i valori in pollici/piedi alla metro, unità di conversione di valori come Bilinmiyor e Unknown per NaN, rimuovere l'unità specifiche come m m, sostituire la virgola nei numeri decimali con .e mantenere il numero più grande del valore 9;6;3. Il finale dtypes dovrebbe essere o float int.

Sono nuovo di python, quindi non so davvero come utilizzare tecniche avanzate finora. Stavo cercando di realizzare il compito che utilizza

def to_num(a):
    try:
        return float(pd.to_numeric(a, errors = 'raise'))
    except ValueError:
        return a

df['height'] = to_num(df['height'])

ma non ha funzionato. Mi chiedevo se devo utilizzare l'iterazione ma mi sembra molto complicato per scorrere tutte le celle di questa colonna, poiché il dataset ha più di 2 milioni di righe.

pandas python
2021-11-24 04:44:20
1

Migliore risposta

0

Mi sento amico, ho avuto lo stesso tipo di problemi. Ma per fortuna questo non è difficile

import pandas as pd

df = pd.DataFrame({'height': [16, 7, '6m', '2.4', '3,5', 'Asdf', '9;6;3']})
df['height'] = df['height'].astype(str)  # force type str
df['height'] = df['height'].str.replace('.', ',', regex=False)  # . -> ,
df['height'] = df['height'].str.replace('[A-Za-z]', '')  # remove all characters (regex)
df['height'] = df['height'].str.split(';').apply(max)  # pick largest value from 9;6;3
df['height'] = pd.to_numeric(df['height'], errors='coerce')  # force float

E si ottiene

height
0   16.0
1   7.0
2   6.0
3   2.4
4   3.5
5   NaN
6   9.0

Ora, se si desidera convertire i vostri piedi quadrati (sto dando per scontato che di default è la metro), è necessario aggiungere un livello di carnagione

import pandas as pd
import numpy as np
import re

def feet_to_m(s):
    if '\'' in s or "\"" in s:
        if '\'' in s:
            feet = float(s.split('\'')[0])
        else:
            feet = 0
        if '\"' in s:
            if '\'' in s:
                inch = float(s.split('\'')[1].split('\"')[0])
            else:
                inch = float(s.split('\"')[0])
        else:
            inch = 0
        return (feet*12 + inch) * 0.0254
    else:
        return s

df = pd.DataFrame({'height': [16, 7, '6m', '2.4', '3,5', 'Asdf', '9;6;3', "11' 4\"", "4'", "15\""]})
df['height'] = df['height'].astype(str)  # force type str
df['height'] = df['height'].str.replace(',', '.', regex=False)  # . -> ,
df['height'] = df['height'].str.replace('[A-Za-z]', '')  # remove all characters
df['height'] = df['height'].str.split(';').apply(max)  # pick largest value from 9;6;3
df['height'] = df['height'].apply(feet_to_m)
df['height'] = pd.to_numeric(df['height'], errors='coerce')  # force float

per ottenere

height
0   16.0000
1   7.0000
2   6.0000
3   2.4000
4   3.5000
5   NaN
6   9.0000
7   3.4544
8   1.2192
9   0.3810

spero che questo aiuta

2021-11-24 06:02:07

In altre lingue

Questa pagina è in altre lingue

Русский
..................................................................................................................
Polski
..................................................................................................................
Română
..................................................................................................................
한국어
..................................................................................................................
हिन्दी
..................................................................................................................
Français
..................................................................................................................
Türk
..................................................................................................................
Česk
..................................................................................................................
Português
..................................................................................................................
ไทย
..................................................................................................................
中文
..................................................................................................................
Español
..................................................................................................................
Slovenský
..................................................................................................................