【Python】批處理文件并插入到mysql數(shù)據(jù)庫

jsummer 發(fā)布于2019-07-30 14:28 / 1935人閱讀

摘要：問題最近在項目的時候遇到一個頭大的問題，客戶手中有份人員名單和人員照片。需要把人員信息數(shù)據(jù)庫表照片信息補(bǔ)全，就是說要將人員照片和數(shù)據(jù)庫人員一一對應(yīng)。我看了一眼人員照片文件是以人名命名，正好和數(shù)據(jù)庫人員數(shù)據(jù)字段相對應(yīng)。

問題

最近在項目的時候遇到一個頭大的問題，客戶手中有份人員名單和人員照片。需要把人員信息數(shù)據(jù)庫表照片信息補(bǔ)全，就是說要將人員照片和數(shù)據(jù)庫人員一一對應(yīng)。起初項目小伙伴說要手動錄入寫一個頭像上傳的程序一個個上傳人員照片。幾百號人的數(shù)據(jù)說多也不多說少也不少，如果全部手動錄入不說麻煩的問題，可能中途還容易出錯。我看了一眼人員照片文件是以人名命名，正好和數(shù)據(jù)庫人員數(shù)據(jù)REALNAME字段相對應(yīng)。其次重復(fù)人名并不多大概幾個而已，可以之后做多帶帶處理。人生苦短我用python，何必自找苦吃呢

需要做什么

t_users表中REALNAME和照片命名是對應(yīng)關(guān)系

照片需要重命名為當(dāng)時的時間戳

t_users表IMGURL存入圖片所在地址以及圖片名稱

python酸爽初體驗

開始前需要先下載Image和Mysql支持庫,Image庫是需要下載安裝PIL
PS:使用python2.7 pip安裝mysql.connector庫失敗最后去Oracle官網(wǎng)直接下載安裝mysql.connector 瞬間爬坑未知命令行安裝為何失敗

遍歷文件執(zhí)行代碼(參考度娘)

#!/usr/bin/python
#coding=utf-8
import os
import os.path
import time
import mysql.connector
import time
rootdir = "/Users/julyyu/imgs/pics"    # 指明被遍歷的文件夾

conn=mysql.connector.connect(user="root",password="xxx",host="xxx",database="xxx")
c = conn.cursor()
for parent,dirnames,filenames in os.walk(rootdir):    #三個參數(shù)：分別返回1.父目錄 2.所有文件夾名字（不含路徑） 3.所有文件名字
    for filename in filenames:                        #輸出文件信息
        (name,extension) = filename.split(".")
        print "filenameonly is:" + name  #輸出圖片名
        if name:
            newname = str(int(time.time())) + ".jpg"  #時間戳命名
            print "newname is:" + newname 
            os.rename(rootdir+"/"+filename , rootdir+"/"+newname) #對圖片進(jìn)行重命名
            tempname = "/lzgl/" +  newname #數(shù)據(jù)庫存入的圖片路徑
            query = "update  t_users set IMGURL = "" + tempname +  "" where REALNAME = "" + name + """      
            c.execute(query)
            conn.commit()
            time.sleep(2)  #防止時間戳重復(fù) 睡兩秒 也可以睡0.5 這樣處理會更快一些 
c.close()
conn.close()

之后又對圖片進(jìn)行了壓縮操作原圖每張10+M的一寸照無法忍, 代碼如下

#!/usr/bin/python
#coding:utf-8
from PIL import Image 
import os

#圖片壓縮批處理  
def compressImage(srcPath,dstPath):  
    for filename in os.listdir(srcPath):  
        #如果不存在目的目錄則創(chuàng)建一個，保持層級結(jié)構(gòu)
        if not os.path.exists(dstPath):
                os.makedirs(dstPath)        

        #拼接完整的文件或文件夾路徑
        srcFile=os.path.join(srcPath,filename)
        dstFile=os.path.join(dstPath,filename)
        print srcFile
        print dstFile

        #如果是文件就處理
        if os.path.isfile(srcFile):     
            #打開原圖片縮小后保存，可以用if srcFile.endswith(".jpg")或者split，splitext等函數(shù)等針對特定文件壓縮
            sImg=Image.open(srcFile)  
            w,h=sImg.size  
            print w,h
            dImg=sImg.resize((w/2,h/2),Image.ANTIALIAS)  #設(shè)置壓縮尺寸和選項，注意尺寸要用括號
            dImg.save(dstFile) #也可以用srcFile原路徑保存,或者更改后綴保存，save這個函數(shù)后面可以加壓縮編碼選項JPEG之類的
            print dstFile+" compressed succeeded"

        #如果是文件夾就遞歸
        if os.path.isdir(srcFile):
            compressImage(srcFile,dstFile)

if __name__=="__main__":  
    compressImage("/Users/julyyu/imgs/tempa","/Users/julyyu/imgs/temps") #壓縮前的文件路徑和壓縮后的文件路徑

參考資料

http://blog.csdn.net/u012234115/article/details/50248409