linuxshcsv转json的简单介绍

本文目录一览:

如何将CSV格式转换成JSON格式

# 下面的工具可以方便的将CSV格式文件转换成json文件格式

import sys, json

tip = “””

请确保:

1. CSV格式是UTF-8

2. CSV第一行是键值

用法:

python csv2json.py foobar.csv

其中foobar.csv是需要转换的源数据文件

运行环境:

Python 3.4.3

日期:

2015年12月29日

“””

print(tip)

# 获取输入数据

input_file = sys.argv[1]

lines = open(input_file, “r”, encoding=”utf_8_sig”).readlines()

lines = [line.strip() for line in lines]

# 获取键值

keys = lines[0].split(‘,’)

line_num = 1

total_lines = len(lines)

parsed_datas = []

while line_num total_lines:

values = lines[line_num].split(“,”)

parsed_datas.append(dict(zip(keys, values)))

line_num = line_num + 1

json_str = json.dumps(parsed_datas, ensure_ascii=False, indent=4)

output_file = input_file.replace(“csv”, “json”)

# write to the file

f = open(output_file, “w”, encoding=”utf-8″)

f.write(json_str)

f.close()

print(“解析结束!”)

linux 下如何使用shell 把处理好的csv文件导入到数据库下

linux 下,可以使用cli程序把csv文件导入到数据库。具体代码如下:

$ORACLE_HOME/bin/sqlplus -S username/password@instanceName  /dev/null 21  !!

#对sqlplus作一些设置,使之只输出我们需要的文本

set echo off

set pagesize 0

set verify off

set feedback off

set termout off

set linesize 3000

set trimspool on

#查询输出到临时文件

spool /tmp/some_tmp.csv 

#select语句

select column1||’,’||column2||’,’||column3 ….

from some_table where condition

spool off

#这里可以添加多个查询,且每个查询可输出到不同的文件,如下面注释

#spool /tmp/some_tmp.csv 

#select column1||’,’||column2||’,’||column3 ….

#from some_table where condition

#spool off

set markup HTML off

quit

!!

#计算记录总行数,如果是0则不发邮件

NUM=`cat /tmp/some_tmp.csv | wc -l`

if[ $NUM -gt 0 ]

then

#先写excel的每列的title

echo ‘Title_Of_Column1, Title_Of_Column2, ….Title_Of_ColumnN’  /tmp/attachement.csv

#数据正文

cat /tmp/some_tmp.csv  /tmp/attachement.csv

#发邮件

(

echo “From: user@somehost.com”

echo “To: user1@somehost.com”

echo “MIME-Version: 1.0”

echo “Content-Type: multipart/mixed;”

echo ‘ boundary=”A_Boundary_Name_You_Can_Change_It”‘

echo “Subject: Subject”

echo “”

echo “”

#附件分隔符,上面的boundary前面加–

echo “–A_Boundary_Name_You_Can_Change_It”

echo ‘Content-Transfer-Encoding: x-uuencode’

echo ‘Content-Type: text/csv;’

echo ‘        name=”attachement.csv”‘

echo ‘Content-Disposition: attachment;’

echo ‘        filename=”attachement.csv”‘

echo “”

uuencode /tmp/attachement.csv attachement.csv

echo “–A_Boundary_Name_You_Can_Change_It”

#附件结束

) | mailx -t

fi

#删除临时文件

rm -f /tmp/*.csv

exit 0

linux下怎么用shell修改csv格式

#cat test.csv |awk -F, ‘{print $1,$2,”hello world”,$3}’|sed ‘s/ /,/g’

1,男,hello,world,甲

2,女,hello,world,丁

3,男,hello,world,乙

mongo 导出.csv

1、先打开PowerShell

(win10可在搜索框直接搜索PowerShell,

其他系统

①打开开始菜单,可以直接按下windows键,或用鼠标点击开始;

②点击“所有程序”按钮;

③ 在开始菜单中找到附件并打开;

④在附件中找到“windows powershell”文件夹并打开;

⑤找到windows powershell程序并点击;

⑥windows powershell工具自动打开)

2、找到MongoDB的安装路径,进入 bin 目录

cd 目录名 就可以进入了,如果要进入多层目录用/隔开 cd 目录名/目录名)

3、执行 .\mongoexport –db dbname -c dbcollection–out ./data.csv 命令

csv后缀也可以改成json

4、进入MongoDB下的bin目录,即可找到刚生成的zdic.csv文件或生成的json文件

原创文章,作者:TOBDH,如若转载,请注明出处:https://www.506064.com/n/316088.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
TOBDHTOBDH
上一篇 2025-01-09 12:14
下一篇 2025-01-09 12:14

相关推荐

  • Python简单数学计算

    本文将从多个方面介绍Python的简单数学计算,包括基础运算符、函数、库以及实际应用场景。 一、基础运算符 Python提供了基础的算术运算符,包括加(+)、减(-)、乘(*)、除…

    编程 2025-04-29
  • Python满天星代码:让编程变得更加简单

    本文将从多个方面详细阐述Python满天星代码,为大家介绍它的优点以及如何在编程中使用。无论是刚刚接触编程还是资深程序员,都能从中获得一定的收获。 一、简介 Python满天星代码…

    编程 2025-04-29
  • Python海龟代码简单画图

    本文将介绍如何使用Python的海龟库进行简单画图,并提供相关示例代码。 一、基础用法 使用Python的海龟库,我们可以控制一个小海龟在窗口中移动,并利用它的“画笔”在窗口中绘制…

    编程 2025-04-29
  • JSON的MD5

    在Web开发过程中,JSON(JavaScript Object Notation)是最常用的数据格式之一。MD5(Message-Digest Algorithm 5)是一种常用…

    编程 2025-04-29
  • 使用Java将JSON写入HDFS

    本篇文章将从以下几个方面详细阐述Java将JSON写入HDFS的方法: 一、HDFS简介 首先,先来了解一下Hadoop分布式文件系统(HDFS)。HDFS是一个可扩展性高的分布式…

    编程 2025-04-29
  • Python樱花树代码简单

    本文将对Python樱花树代码进行详细的阐述和讲解,帮助读者更好地理解该代码的实现方法。 一、简介 樱花树是一种图形效果,它的实现方法比较简单。Python中可以通过turtle这…

    编程 2025-04-28
  • Python大神作品:让编程变得更加简单

    Python作为一种高级的解释性编程语言,一直被广泛地运用于各个领域,从Web开发、游戏开发到人工智能,Python都扮演着重要的角色。Python的代码简洁明了,易于阅读和维护,…

    编程 2025-04-28
  • 如何使用Newtonsoft datatable转Json

    Newtonsoft DataTable 是一个基于.NET的JSON框架,也是一个用于序列化和反序列化JSON的强大工具。 在本文中,我们将学习如何使用Newtonsoft Da…

    编程 2025-04-28
  • 用Python实现简单爬虫程序

    在当今时代,互联网上的信息量是爆炸式增长的,其中很多信息可以被利用。对于数据分析、数据挖掘或者其他一些需要大量数据的任务,我们可以使用爬虫技术从各个网站获取需要的信息。而Pytho…

    编程 2025-04-28
  • JPRC – 轻松创建可读性强的 JSON API

    本文将介绍一个全新的 JSON API 框架 JPRC,通过该框架,您可以轻松创建可读性强的 JSON API,提高您的项目开发效率和代码可维护性。接下来将从以下几个方面对 JPR…

    编程 2025-04-27

发表回复

登录后才能评论