python往數據庫插數據如何知道插入哪一列的簡單介紹

本文目錄一覽：

• 1、Python如何一次插入多行數據
• 2、如何使用python連接數據庫，插入並查詢數據
• 3、如何用python批量插入數據到mysql數據庫，用list
• 4、Python 讀取文本內容插入數據庫問題
• 5、Python學習筆記：如何將字典快速插入數據庫

Python如何一次插入多行數據

你學習過數據庫嗎？

方法是多種的，這裡以mysql為例！

1、用phpmyadmin,登錄進去，然後查看你的數據庫，插入數值，很快你就會錄入完成了

2、用python操作數據庫，這裡也是mysql, 首先要安裝pymsql模塊，這樣你就可以讀取數據庫了

連接數據庫，查看，插入，確認完成

具體

conn=pymysql.Connect(user=username,passwd=password,database=database,charset=charset)

cur=conn.cursor()

cur.execute(‘select * from table’)

cur.executemany(……)

conn.commit()

##username,password,dtabase,都是你自己數據庫的設置，命令自己去學下，5分鐘就會，特別是executemany可以批量執行插入，其實execute也可以

如何使用python連接數據庫，插入並查詢數據

你可以訪問Python數據庫接口及API查看詳細的支持數據庫列表。不同的數據庫你需要下載不同的DB API模塊，例如你需要訪問Oracle數據庫和Mysql數據，你需要下載Oracle和MySQL數據庫模塊。

DB-API 是一個規範. 它定義了一系列必須的對象和數據庫存取方式, 以便為各種各樣的底層數據庫系統和多種多樣的數據庫接口程序提供一致的訪問接口 。

Python的DB-API，為大多數的數據庫實現了接口，使用它連接各數據庫後，就可以用相同的方式操作各數據庫。

Python DB-API使用流程：

引入 API 模塊。

獲取與數據庫的連接。

執行SQL語句和存儲過程。

關閉數據庫連接。

什麼是MySQLdb?

MySQLdb 是用於Python鏈接Mysql數據庫的接口，它實現了 Python 數據庫 API 規範 V2.0，基於 MySQL C API 上建立的。

如何安裝MySQLdb?

為了用DB-API編寫MySQL腳本，必須確保已經安裝了MySQL。複製以下代碼，並執行：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

如果執行後的輸出結果如下所示，意味着你沒有安裝 MySQLdb 模塊：

Traceback (most recent call last):

File “test.py”, line 3, in module

import MySQLdb

ImportError: No module named MySQLdb

安裝MySQLdb，請訪問 ，(Linux平台可以訪問：)從這裡可選擇適合您的平台的安裝包，分為預編譯的二進制文件和源代碼安裝包。

如果您選擇二進制文件發行版本的話，安裝過程基本安裝提示即可完成。如果從源代碼進行安裝的話，則需要切換到MySQLdb發行版本的頂級目錄，並鍵入下列命令:

$ gunzip MySQL-python-1.2.2.tar.gz

$ tar -xvf MySQL-python-1.2.2.tar

$ cd MySQL-python-1.2.2

$ python setup.py build

$ python setup.py install

注意：請確保您有root權限來安裝上述模塊。

數據庫連接

連接數據庫前，請先確認以下事項：

您已經創建了數據庫 TESTDB.

在TESTDB數據庫中您已經創建了表 EMPLOYEE

EMPLOYEE表字段為 FIRST_NAME, LAST_NAME, AGE, SEX 和 INCOME。

連接數據庫TESTDB使用的用戶名為 “testuser” ，密碼為 “test123”,你可以可以自己設定或者直接使用root用戶名及其密碼，Mysql數據庫用戶授權請使用Grant命令。

在你的機子上已經安裝了 Python MySQLdb 模塊。

如果您對sql語句不熟悉，可以訪問我們的 SQL基礎教程

實例：

以下實例鏈接Mysql的TESTDB數據庫：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# 使用execute方法執行SQL語句

cursor.execute(“SELECT VERSION()”)

# 使用 fetchone() 方法獲取一條數據庫。

data = cursor.fetchone()

print “Database version : %s ” % data

# 關閉數據庫連接

db.close()

執行以上腳本輸出結果如下：

Database version : 5.0.45

創建數據庫表

如果數據庫連接存在我們可以使用execute()方法來為數據庫創建表，如下所示創建表EMPLOYEE：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# 如果數據表已經存在使用 execute() 方法刪除表。

cursor.execute(“DROP TABLE IF EXISTS EMPLOYEE”)

# 創建數據表SQL語句

sql = “””CREATE TABLE EMPLOYEE (

FIRST_NAME CHAR(20) NOT NULL,

LAST_NAME CHAR(20),

AGE INT,

SEX CHAR(1),

INCOME FLOAT )”””

cursor.execute(sql)

# 關閉數據庫連接

db.close()

數據庫插入操作

以下實例使用執行 SQL INSERT 語句向表 EMPLOYEE 插入記錄：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# SQL 插入語句

sql = “””INSERT INTO EMPLOYEE(FIRST_NAME,

LAST_NAME, AGE, SEX, INCOME)

VALUES (‘Mac’, ‘Mohan’, 20, ‘M’, 2000)”””

try:

# 執行sql語句

cursor.execute(sql)

# 提交到數據庫執行

db.commit()

except:

# Rollback in case there is any error

db.rollback()

# 關閉數據庫連接

db.close()

以上例子也可以寫成如下形式：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# SQL 插入語句

sql = “INSERT INTO EMPLOYEE(FIRST_NAME, \

LAST_NAME, AGE, SEX, INCOME) \

VALUES (‘%s’, ‘%s’, ‘%d’, ‘%c’, ‘%d’ )” % \

(‘Mac’, ‘Mohan’, 20, ‘M’, 2000)

try:

# 執行sql語句

cursor.execute(sql)

# 提交到數據庫執行

db.commit()

except:

# 發生錯誤時回滾

db.rollback()

# 關閉數據庫連接

db.close()

實例：

以下代碼使用變量向SQL語句中傳遞參數:

…………………………….

user_id = “test123”

password = “password”

con.execute(‘insert into Login values(“%s”, “%s”)’ % \

(user_id, password))

…………………………….

數據庫查詢操作

Python查詢Mysql使用 fetchone() 方法獲取單條數據, 使用fetchall() 方法獲取多條數據。

fetchone(): 該方法獲取下一個查詢結果集。結果集是一個對象

fetchall():接收全部的返回結果行.

rowcount: 這是一個只讀屬性，並返回執行execute()方法後影響的行數。

實例：

查詢EMPLOYEE表中salary（工資）字段大於1000的所有數據：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# SQL 查詢語句

sql = “SELECT * FROM EMPLOYEE \

WHERE INCOME ‘%d'” % (1000)

try:

# 執行SQL語句

cursor.execute(sql)

# 獲取所有記錄列表

results = cursor.fetchall()

for row in results:

fname = row[0]

lname = row[1]

age = row[2]

sex = row[3]

income = row[4]

# 打印結果

print “fname=%s,lname=%s,age=%d,sex=%s,income=%d” % \

(fname, lname, age, sex, income )

except:

print “Error: unable to fecth data”

# 關閉數據庫連接

db.close()

以上腳本執行結果如下：

fname=Mac, lname=Mohan, age=20, sex=M, income=2000

數據庫更新操作

更新操作用於更新數據表的的數據，以下實例將 TESTDB表中的 SEX 字段全部修改為 ‘M’，AGE 字段遞增1：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# SQL 更新語句

sql = “UPDATE EMPLOYEE SET AGE = AGE + 1

WHERE SEX = ‘%c'” % (‘M’)

try:

# 執行SQL語句

cursor.execute(sql)

# 提交到數據庫執行

db.commit()

except:

# 發生錯誤時回滾

db.rollback()

# 關閉數據庫連接

db.close()

刪除操作

刪除操作用於刪除數據表中的數據，以下實例演示了刪除數據表 EMPLOYEE 中 AGE 大於 20 的所有數據：

#!/usr/bin/python

# -*- coding: UTF-8 -*-

import MySQLdb

# 打開數據庫連接

db = MySQLdb.connect(“localhost”,”testuser”,”test123″,”TESTDB” )

# 使用cursor()方法獲取操作游標

cursor = db.cursor()

# SQL 刪除語句

sql = “DELETE FROM EMPLOYEE WHERE AGE ‘%d'” % (20)

try:

# 執行SQL語句

cursor.execute(sql)

# 提交修改

db.commit()

except:

# 發生錯誤時回滾

db.rollback()

# 關閉連接

db.close()

執行事務

事務機制可以確保數據一致性。

事務應該具有4個屬性：原子性、一致性、隔離性、持久性。這四個屬性通常稱為ACID特性。

原子性（atomicity）。一個事務是一個不可分割的工作單位，事務中包括的諸操作要麼都做，要麼都不做。

一致性（consistency）。事務必須是使數據庫從一個一致性狀態變到另一個一致性狀態。一致性與原子性是密切相關的。

隔離性（isolation）。一個事務的執行不能被其他事務干擾。即一個事務內部的操作及使用的數據對並發的其他事務是隔離的，並發執行的各個事務之間不能互相干擾。

持久性（durability）。持續性也稱永久性（permanence），指一個事務一旦提交，它對數據庫中數據的改變就應該是永久性的。接下來的其他操作或故障不應該對其有任何影響。

Python DB API 2.0 的事務提供了兩個方法 commit 或 rollback。

如何用python批量插入數據到mysql數據庫，用list

MySQL 的 Binlog 記錄著 MySQL 數據庫的所有變更信息，了解 Binlog 的結構可以幫助我們解析Binlog，甚至對 Binlog 進行一些修改，或者說是「篡改」，例如實現類似於 Oracle 的 flashback 的功能，恢復誤刪除的記錄，把 update 的記錄再還原回去等。本文將帶您探討一下這些神奇功能的實現，您會發現比您想像地要簡單得多。本文指的 Binlog 是 ROW 模式的 Binlog，這也是 MySQL 8 里的默認模式，STATEMENT 模式因為使用中有很多限制，現在用得越來越少了。

Binlog 由事件（event）組成，請注意是事件（event）不是事務（transaction），一個事務可以包含多個事件。事件描述對數據庫的修改內容。

現在我們已經了解了 Binlog 的結構，我們可以試着修改 Binlog 里的數據。例如前面舉例的 Binlog 刪除了一條記錄，我們可以試着把這條記錄恢復，Binlog 裏面有個刪除行（DELETE_ROWS_EVENT）的事件，就是這個事件刪除了記錄，這個事件和寫行（WRITE_ROWS_EVENT）的事件的數據結構是完全一樣的，只是刪除行事件的類型是 32，寫行事件的類型是 30，我們把對應的 Binlog 位置的 32 改成 30 即可把已經刪除的記錄再插入回去。從前面的 「show binlog events」 裏面可看到這個 DELETE_ROWS_EVENT 是從位置 378 開始的，這裡的位置就是 Binlog 文件的實際位置（以位元組為單位）。從事件（event）的結構裏面可以看到 type_code 是在 event 的第 5 個位元組，我們寫個 Python 小程序把把第383（378+5=383）位元組改成 30 即可。當然您也可以用二進制編輯工具來改。

找出 Binlog 中的大事務

由於 ROW 模式的 Binlog 是每一個變更都記錄一條日誌，因此一個簡單的 SQL，在 Binlog 里可能會產生一個巨無霸的事務，例如一個不帶 where 的 update 或 delete 語句，修改了全表裏面的所有記錄，每條記錄都在 Binlog 裏面記錄一次，結果是一個巨大的事務記錄。這樣的大事務經常是產生麻煩的根源。我的一個客戶有一次向我抱怨，一個 Binlog 前滾，滾了兩天也沒有動靜，我把那個 Binlog 解析了一下，發現裏面有個事務產生了 1.4G 的記錄，修改了 66 萬條記錄！下面是一個簡單的找出 Binlog 中大事務的 Python 小程序，我們知道用 mysqlbinlog 解析的 Binlog，每個事務都是以 BEGIN 開頭，以 COMMIT 結束。我們找出 BENGIN 前面的 「# at」 的位置，檢查 COMMIT 後面的 「# at」 位置，這兩個位置相減即可計算出這個事務的大小，下面是這個 Python 程序的例子。

切割 Binlog 中的大事務

對於大的事務，MySQL 會把它分解成多個事件（注意一個是事務 TRANSACTION，另一個是事件 EVENT），事件的大小由參數 binlog-row-event-max-size 決定，這個參數默認是 8K。因此我們可以把若干個事件切割成一個單獨的略小的事務

ROW 模式下，即使我們只更新了一條記錄的其中某個字段，也會記錄每個字段變更前後的值，這個行為是 binlog_row_image 參數控制的，這個參數有 3 個值，默認為 FULL，也就是記錄列的所有修改，即使字段沒有發生變更也會記錄。這樣我們就可以實現類似 Oracle 的 flashback 的功能，我個人估計 MySQL 未來的版本從可能會基於 Binlog 推出這樣的功能。

了解了 Binlog 的結構，再加上 Python 這把瑞士軍刀，我們還可以實現很多功能，例如我們可以統計哪個表被修改地最多？我們還可以把 Binlog 切割成一段一段的，然後再重組，可以靈活地進行 MySQL 數據庫的修改和遷移等工作。

Python 讀取文本內容插入數據庫問題

兩種方法

1、python讀取文件後，解析value中的id，存儲到list中，再讀另一個文件時，去list里判斷是否已存在

2、python讀取另一個文件後，解析values中的id，腳本直接去數據庫判斷是否存在

其實數據庫可以設計id未主鍵，這樣你直接insert即可，出錯的話，數據庫會容錯

Python學習筆記：如何將字典快速插入數據庫

在我們工作中,手頭不一定都有VISIO等數據庫設計軟件,往往是我們直接在SQL企業管理器中直接設計數據庫,再添加數據庫字典,以方便以後的工作及管理。有時我很苦惱，因為我們不得不打兩次相現的數據字段的說明，麻煩。不過，也不盡然，不久前我發現了一個更好的方法：（以我建一個表為例） 1、打開企業管理器。 2、在關係中「右擊」，「新建關係」，在讓你選擇表時選擇取消。 3、在關係在，「右鍵」，選「新建表」，輸入我們想要的名字。（方法是不是和傳統不一樣了） 4、在我們剛新建的表上「右擊」，然後「表視圖」，「修改自定義」。 5、在彈出的對話框中選擇我們想要的列。 6、確定就OK了。 7、當然是輸入我們腦子裡的數據表結構及說明，當我們要生成這個數據表的字典的時候，就選中這些列，CTRL+C，然後到Excel在CTRL+V,如果想到導出WORD中，再在Excel中選中想要的單元格，CTRL+C　到WORD中CTRL＋V 8、當然是OK了！看一下我們的成果吧！