小數(shù)據(jù)存儲
成都網(wǎng)站建設(shè)哪家好,找創(chuàng)新互聯(lián)公司!專注于網(wǎng)頁設(shè)計(jì)、網(wǎng)站建設(shè)公司、微信開發(fā)、小程序開發(fā)、集團(tuán)企業(yè)網(wǎng)站建設(shè)等服務(wù)項(xiàng)目。核心團(tuán)隊(duì)均擁有互聯(lián)網(wǎng)行業(yè)多年經(jīng)驗(yàn),服務(wù)眾多知名企業(yè)客戶;涵蓋的客戶類型包括:成都效果圖設(shè)計(jì)等眾多領(lǐng)域,積累了大量豐富的經(jīng)驗(yàn),同時也獲得了客戶的一致稱揚(yáng)!我們在編寫代碼的時候,經(jīng)常會涉及到數(shù)據(jù)存儲的情況,如果是爬蟲得到的大數(shù)據(jù),我們會選擇使用數(shù)據(jù)庫,或者excel存儲。但如果只是一些小數(shù)據(jù),或者說關(guān)聯(lián)性較強(qiáng)且存在存儲后復(fù)用的數(shù)據(jù),我們該如何存儲呢?
使用open保存文本
最簡單、粗暴+無腦的存儲方式就是保存成一個文本文檔了。
使用open函數(shù),將結(jié)果一行行的保存成文本,這里涉及的知識點(diǎn)只有簡單的幾條:
文件讀寫模式,r 、w、a、b、+ ,掌握這幾種即可。
使用單獨(dú)的open打開文件時,需要注意結(jié)尾時的調(diào)用close()函數(shù)關(guān)閉文檔
csv文件
之所以將csv與excel分開說,首先需要掃盲下,csv屬于特定格式的文本文件(使用逗號分隔),而excel是二進(jìn)制文件。
csv可以直接使用文本編輯器打開,excel不行…
其實(shí)csv文件,完全可以使用open函數(shù)進(jìn)行保存,只要你將每行數(shù)據(jù)都使用,分隔開即可。
另外,python自帶csv庫,可以很方便的操作與保存該數(shù)據(jù)
xml文件
xml文件的方式,已經(jīng)逐漸被淘汰了,為什么這么說?因?yàn)樗爆嵉臉湫谓Y(jié)構(gòu),導(dǎo)致了在傳輸過程中,占用了更多的內(nèi)存。所以,除非必要,真的不推薦以xml的形式存儲你的數(shù)據(jù)…
configparser
python模塊中configparser是一個專門用來保存配置文件的模塊庫,它非常適合保存一些具有關(guān)聯(lián)性的數(shù)據(jù)內(nèi)容,尤其是配置文件。通過定義section的方式,在section中添加key:value的方式,可以直觀明了的數(shù)據(jù)內(nèi)容。我之前專門寫了一篇關(guān)于它的文章,會附在公眾號的字文章中,喜歡的朋友可以去看看。
pyyaml
yaml類型的文件已經(jīng)成為很多Linux下的主流配置文件類型,比如Docker、Ansible等等都在使用yaml,但它依然不是一個主流的數(shù)據(jù)存儲方式,因?yàn)閥aml本身的格式要求太過嚴(yán)苛,比結(jié)構(gòu)化的Python格式更為嚴(yán)格,喜歡的朋友可以去研究下…
pickle
pickle模塊的使用面很窄,但不得不說還是有些人會使用,所以簡單說些它的優(yōu)劣:
優(yōu)勢:接口簡單(與json相似);存儲格式通用型,及在Windows、Linux等平臺下通用;二進(jìn)制存儲,效率高
劣勢:pickle是python特定的協(xié)議,其他語言無法使用;pickle存在安全性,這個要著重說下,看下圖
Json文件
說了上面那么多,壓軸的還是Json!
首先相對于xml,現(xiàn)在更多的網(wǎng)站在數(shù)據(jù)傳輸中使用json格式,因?yàn)橥鹊淖止?jié)下,json傳輸數(shù)據(jù)的效率要更高于xml。
對于configparser,configparser有一個巨大的劣勢,在于配置文件只能支持二維,section下定義option(key:value),如果想在option的value中再次定義列表、字典等數(shù)據(jù)類型,它只能識別為字符串,你需要將str手動再轉(zhuǎn)化為對應(yīng)的數(shù)據(jù)類型
而針對ymal,json沒有那么嚴(yán)格的格式要求,寫做一行還是換行展示都隨你,沒有那么嚴(yán)苛的要求。
最后對比pickle,json格式是各種編程語言通用的數(shù)據(jù)格式,由于是key value的鍵值對,不存在loads之后的安全問題。而且你學(xué)會了json,也就學(xué)會了pickle,因?yàn)槎叩氖褂梅绞揭幻粯影。?/p>
三分鐘學(xué)會Json
1.簡介
JSON(JavaScript Object Notation, JS 對象簡譜) 是一種輕量級的數(shù)據(jù)交換格式。它基于 ECMAScript (歐洲計(jì)算機(jī)協(xié)會制定的js規(guī)范)的一個子集,采用完全獨(dú)立于編程語言的文本格式來存儲和表示數(shù)據(jù)。簡潔和清晰的層次結(jié)構(gòu)使得 JSON 成為理想的數(shù)據(jù)交換語言。易于人閱讀和編寫,同時也易于機(jī)器解析和生成,并有效地提升網(wǎng)絡(luò)傳輸效率。
至于推薦使用Json的理由:
Json格式是一種通用的數(shù)據(jù)類型
Python內(nèi)置json模塊,便于操作
json格式類似于python的dict
json的保存與讀取極為方便
2.類型、語法說明
看到上圖的Python與json對比關(guān)系,其實(shí)差異并不大,我們只需要注意幾點(diǎn)即可:
3.json的方法
即:帶s的方法是數(shù)據(jù)類型間的轉(zhuǎn)化str <--> dict,不帶s的都是數(shù)據(jù)與文件的轉(zhuǎn)化
4.實(shí)例說明
在演示前,我們需要先定義一個初始化數(shù)據(jù):
data = {
"in_use": True,
"info": {
"name_cn": 'Python',
"name_en": "BreezePython",
},
"contents": ["Python", "Java", "Linux"]
}
5.dumps() .loads()
'''
遇到問題沒人解答?小編創(chuàng)建了一個Python學(xué)習(xí)交流QQ群:857662006
尋找有志同道合的小伙伴,互幫互助,群里還有不錯的視頻學(xué)習(xí)教程和PDF電子書!
'''
import json
json.dumps(data)
>>> '{"in_use": true, "info": {"name_cn": "\\u6e05\\u98cePython", "name_en": "BreezePython"}, "contents": ["Python", "Java", "Linux"]}'
#這里大家看到一個問題,中文異常,此時我們需要添加參數(shù)ensure_ascii=False
json.dumps(data,ensure_ascii=False)
>>> '{"in_use": true, "info": {"name_cn": "Python", "name_en": "BreezePython"}, "contents": ["Python", "Java", "Linux"]}'
# 當(dāng)然我們可以美觀的打印它
json_data = json.dumps(data, sort_keys=True, indent=4, separators=(',', ': '),ensure_ascii=False)
print(json_data)
>>> {
"contents": [
"Python",
"Java",
"Linux"
],
"in_use": true,
"info": {
"name_cn": "Python",
"name_en": "BreezePython"
}
}
# 了解了dumps,loads就比較簡單了...
json.loads(json_data)
{'contents': ['Python', 'Java', 'Linux'], 'in_use': True, 'info': {'name_cn': 'Python', 'name_en': 'BreezePython'}}
6.dump() .load()
import json
# 先來看看dump將數(shù)據(jù)保存至文本
with open('data.json', 'w', encoding='utf-8') as f:
json.dump(data, f, indent=4)
# 同理我們還可以使用dumps完成寫入操作
# f.write(json.dumps(data, indent=4))
# 保存了文本,我們在通過load讀取出來
with open('data.json', 'r', encoding='utf-8') as f:
data = json.load(f)
# 同理我們還可以使用loads完成讀取操作
# data = json.loads(f.read())
print(data)
>>> {'in_use': True, 'info': {'name_cn': 'Python', 'name_en': 'BreezePython'}, 'contents': ['Python', 'Java', 'Linux']}
看到這里,你是否發(fā)現(xiàn),即便不會dump和load我們一樣可以使用dumps和loads替換前兩者,完成讀寫操作。三分鐘學(xué)會了json的操作,并且買一送一附帶學(xué)會了pickle的操作。你是否get到?
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點(diǎn)與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。