包含python3爬取數據存入mysql的詞條

本文目錄一覽：

• 1、python爬蟲爬下來的數據怎麼導入到MySQL
• 2、python3爬蟲爬取中國大學排名數據並寫入mysql資料庫並添加省分及添加
• 3、如何將該Python爬取的數據存入MySQL中，資料庫錶帶id
• 4、python3爬取的數據怎麼導入mysql

python爬蟲爬下來的數據怎麼導入到MySQL

下載mysql.connector庫

然後把爬蟲爬到的數據通過mysql裡面的insert語句查到資料庫，當然也可以建表，一般我沒用python建表 是先建好再寫數據的

import mysql.connector

conn = mysql.connector.connect(

    user=’root’,

    password=’root’,

    host=’127.0.0.1′,

    port=’3306′,

    database=’test_demo’

)

cursor = conn.cursor()

cursor.execute(“INSERT INTO test_user(`uuid`,`user_name`,`user_level`) VALUES (%s,%s,%s)”,[id, user_name, user_level])

cursor.execute(“INSERT INTO tieba_user_detail(`user_name`,`user_exp`,`user_sex`,`tieba_age`,`tieba_note`,`user_favorites`,`user_fans`) VALUES (%s,%s,%s,%s,%s,%s,%s)”,[user_name,user_exp,user_sex, tieba_age,tieba_note, user_favorites, user_fans])

print(‘************** %s  %s 數據保存成功 **************’%(user_rank,user_name))

conn.commit()

cursor.close()

插進入就這樣的

python3爬蟲爬取中國大學排名數據並寫入mysql資料庫並添加省分及添加

網路爬蟲（又稱為網頁蜘蛛，網路機器人，在FOAF社區中間，更經常的稱為網頁追逐者），是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本。另外一些不常使用的名字還有螞蟻、自動索引、模擬程序或者蠕蟲。

如何將該Python爬取的數據存入MySQL中，資料庫錶帶id

python爬取到的json數據怎麼存入到MySQL資料庫中

json的數據json.loads進來以後會變成一個json的對象，你需要自己把python對象中的欄位值取出來，拼成sql語句

python3爬取的數據怎麼導入mysql

import pymysql #導入pymsql模塊 #鏈接資料庫，注意port是int型，不是str，所以不要用引號conn = pymysql.connect( user=’root’, password=’root’, host=’127.0.0.1′, port=3306, database=’test_demo’, use_unicode=True, charset=”utf8″ )#獲取游標cursor = conn.cursor()#插入數據，注意看有變數的時候格式cursor.execute(“INSERT INTO tieba_user(`uuid`,`user_name`,`user_rank`,`user_level`,`level_status`,`tieba_name`) VALUES (%s,%s,%s,%s,%s,%s)”, (user_id, user_name, user_rank, user_level, level_statu, tieba_name))#提交conn.commit()#關閉連接cursor.close()