python的csv轉json的簡單介紹

本文目錄一覽：

• 1、Python類型可以轉為JSON的number類型
• 2、python怎麼轉化成json格式
• 3、python處理csv數據怎麼更有效率
• 4、如何將json的數據轉化成csv的數據格式
• 5、如何將CSV格式轉換成JSON格式

Python類型可以轉為JSON的number類型

python數據類型轉化為JSON格式的數據有兩種方式。

第一種方式是，dumps（dict1）是將python數據類型轉化為JSON類型的字符串string，dump（dict1，sp）將python數據類型轉化為文件流，sp表示寫入文件的路徑。第二種方式是通過dumps轉化成字符串，然後再寫入。

JSON格式的數據也可以轉化為python數據類型。loads（str）將JSON字符串轉化成python類型的數據，在使用loads操作字符串load（str，fp）將後綴為json文件轉化成python格式的數據，load操作文件流。因為文件讀寫操作時有可能產生IOError，一旦出錯，後面的close方法就不能執行到，為了保證是否出錯都能關閉文件，使用withopen文件操作流。

python怎麼轉化成json格式

如果datas是Python的原始數據，並且datas中沒有非ascii碼，可以使用如下語句轉換為json格式：

import

json

json.dumps(datas)

當datas中含有中文等非ascii字符時，可以使用如下參數：

json.dumps(datas,

ensure_ascii=False)

如果想美化輸出格式，可以使用indent參數：

json.dumps(datas,

indent=4)

python處理csv數據怎麼更有效率

因為python處理json比較方便，所以首先測試一下csv和json哪個快。

首先生成測試數據

# coding: utf-8

import json

import csv

import random

from string import letters

low = 1e2 # 3-10位數字

hi = 1e11

cnt = 100000 # 10萬條

total = {}

for _ in range(cnt):

total[str(random.randrange(low, hi))] = “”.join(random.sample(letters, 10))

with open(“data.json”, “w”) as f:

f.write(json.dumps(total, ensure_ascii=False))

with open(“data.csv”, “w”) as f:

writer = csv.writer(f, delimiter=’,’)

writer.writerows(total.items())

然後對比由這兩者生成dict的速度

# coding: utf-8

import json

import csv

from time import clock

t0 = clock()

total1 = json.load(open(“data.json”))

t1 = clock()

total2 = {}

with open(“data.csv”) as f:

reader = csv.reader(f)

for k, v in reader:

total2[k] = v

t2 = clock()

print “json: %fs” % (t1 – t0)

print “csv: %fs” % (t2 – t1)

輸出是：

json: 0.109953s

csv: 0.066411s

果然csv還是蠻快的，那我們就用它吧。

接下來解決更新問題。我不知道題主對於重複項需要怎麼處理，所以都寫了。

# 先生成數據，同之前的做法。

low = 1e2

hi = 1e11

cnt = 100000

new = {}

for _ in range(cnt):

new[str(random.randrange(low, hi))] = “”.join(random.sample(letters, 10))

# 找出重複項，因為是隨機生成的數據，所以恰好沒有重複項

duplicate = {k:v for k, v in new.items() if k in total}

# 輸出重複項

print(json.dumps(duplicate, ensure_ascii=False, indent=4))

# 1. 如果重複項是用new覆蓋total

total.update(new)

# 2. 如果是保留total

new.update(total)

total = new

# 然後再寫回csv文件中

with open(“data.csv”, “w”) as f:

writer = csv.writer(f, delimiter=’,’)

writer.writerows(total.items())

至於運行時間，如果不算上輸出重複項的時間，不到0.5s。算上的話大概也就0.8s。

如何將json的數據轉化成csv的數據格式

可以試試在線轉換：

地址：網頁鏈接

1 選擇上傳文件

2 點擊轉換，等待就可以了，稍後就會有文件下載提示

該網站支持多級json格式，親測可用

如何將CSV格式轉換成JSON格式

# 下面的工具可以方便的將CSV格式文件轉換成json文件格式

import sys, json

tip = “””

請確保：

1. CSV格式是UTF-8

2. CSV第一行是鍵值

用法：

python csv2json.py foobar.csv

其中foobar.csv是需要轉換的源數據文件

運行環境：

Python 3.4.3

日期：

2015年12月29日

“””

print(tip)

# 獲取輸入數據

input_file = sys.argv[1]

lines = open(input_file, “r”, encoding=”utf_8_sig”).readlines()

lines = [line.strip() for line in lines]

# 獲取鍵值

keys = lines[0].split(‘,’)

line_num = 1

total_lines = len(lines)

parsed_datas = []

while line_num total_lines:

values = lines[line_num].split(“,”)

parsed_datas.append(dict(zip(keys, values)))

line_num = line_num + 1

json_str = json.dumps(parsed_datas, ensure_ascii=False, indent=4)

output_file = input_file.replace(“csv”, “json”)

# write to the file

f = open(output_file, “w”, encoding=”utf-8″)

f.write(json_str)

f.close()

print(“解析結束！”)