Catalog

應用場景

爬蟲過程中，採集的資料常以str或float存進資料庫；

1. 遇到含小數點的文字，需要轉換成浮點型
2. xpath()或re.findall()提取資訊返回列表，列表可能為空，不便存進資料庫。

情況1：強轉浮點型

• float

a = float('-1.21')
print(a)

• numpy

import numpy as np
ls = ['1.2', '3', '-0.5']
array = np.array(ls)
array = array.astype(float)
print(array)

• pandas

import
 
 pandas as pd
d = {'num': ['-0.5', '1', '1.2']}
df = pd.DataFrame(d)
num = pd.to_numeric(df['num'])
print(num)

情況2：取列表第一個元素

ls1 = []
ls2 = [' a', 'b']
a = ls1[0].strip() if ls1 else ''
print(a)
a = ls2[0].strip() if ls2 else ''
print(a)

情況3：取列表全部元素

ls1 = []
ls2 = ['\ta', '\nb\xa0']
a = '|'
 
.join(ls1)
print(a)
a = '|'.join([i.strip() for i in ls2])
print(a)