python3爬虫初探(七)使用MySQL
MySQL是Web世界中使用最廣泛的數(shù)據(jù)庫(kù)服務(wù)器。SQLite的特點(diǎn)是輕量級(jí)、可嵌入,但不能承受高并發(fā)訪問,適合桌面和移動(dòng)應(yīng)用。而MySQL是為服務(wù)器端設(shè)計(jì)的數(shù)據(jù)庫(kù),能承受高并發(fā)訪問,同時(shí)占用的內(nèi)存也遠(yuǎn)遠(yuǎn)大于SQLite。
此外,MySQL內(nèi)部有多種數(shù)據(jù)庫(kù)引擎,最常用的引擎是支持?jǐn)?shù)據(jù)庫(kù)事務(wù)的InnoDB。
安裝MySQL
可以直接從MySQL官方網(wǎng)站下載最新的Community Server 5.6.x版本。MySQL是跨平臺(tái)的,選擇對(duì)應(yīng)的平臺(tái)下載安裝文件,安裝即可。
安裝時(shí),MySQL會(huì)提示輸入root用戶的口令,請(qǐng)務(wù)必記清楚。如果怕記不住,就把口令設(shè)置為password。
在Windows上,安裝時(shí)請(qǐng)選擇UTF-8編碼,以便正確地處理中文。
在Mac或Linux上,需要編輯MySQL的配置文件,把數(shù)據(jù)庫(kù)默認(rèn)的編碼全部改為UTF-8。MySQL的配置文件默認(rèn)存放在/etc/my.cnf或者/etc/mysql/my.cnf:
[client] default-character-set = utf8[mysqld] default-storage-engine = INNODB character-set-server = utf8 collation-server = utf8_general_ci重啟MySQL后,可以通過(guò)MySQL的客戶端命令行檢查編碼:
$ mysql -u root -p Enter password: Welcome to the MySQL monitor... ...mysql> show variables like '%char%'; +--------------------------+--------------------------------------------------------+ | Variable_name | Value | +--------------------------+--------------------------------------------------------+ | character_set_client | utf8 | | character_set_connection | utf8 | | character_set_database | utf8 | | character_set_filesystem | binary | | character_set_results | utf8 | | character_set_server | utf8 | | character_set_system | utf8 | | character_sets_dir | /usr/local/mysql-5.1.65-osx10.6-x86_64/share/charsets/ | +--------------------------+--------------------------------------------------------+ 8 rows in set (0.00 sec)看到utf8字樣就表示編碼設(shè)置正確。
安裝MySQL驅(qū)動(dòng)
由于MySQL服務(wù)器以獨(dú)立的進(jìn)程運(yùn)行,并通過(guò)網(wǎng)絡(luò)對(duì)外服務(wù),所以,需要支持Python的MySQL驅(qū)動(dòng)來(lái)連接到MySQL服務(wù)器。
目前,有兩個(gè)MySQL驅(qū)動(dòng):
-
mysql-connector-python:是MySQL官方的純Python驅(qū)動(dòng);
-
MySQL-python:是封裝了MySQL C驅(qū)動(dòng)的Python驅(qū)動(dòng)。
可以把兩個(gè)都裝上,使用的時(shí)候再?zèng)Q定用哪個(gè):
$ easy_install mysql-connector-python $ easy_install MySQL-python我們以mysql-connector-python為例,演示如何連接到MySQL服務(wù)器的test數(shù)據(jù)庫(kù):
# 導(dǎo)入MySQL驅(qū)動(dòng): >>> import mysql.connector # 注意把password設(shè)為你的root口令: >>> conn = mysql.connector.connect(user='root', password='password', database='test', use_unicode=True) >>> cursor = conn.cursor() # 創(chuàng)建user表: >>> cursor.execute('create table user (id varchar(20) primary key, name varchar(20))') # 插入一行記錄,注意MySQL的占位符是%s: >>> cursor.execute('insert into user (id, name) values (%s, %s)', ['1', 'Michael']) >>> cursor.rowcount 1 # 提交事務(wù): >>> conn.commit() >>> cursor.close() # 運(yùn)行查詢: >>> cursor = conn.cursor() >>> cursor.execute('select * from user where id = %s', ('1',)) >>> values = cursor.fetchall() >>> values [(u'1', u'Michael')] # 關(guān)閉Cursor和Connection: >>> cursor.close() True >>> conn.close()由于Python的DB-API定義都是通用的,所以,操作MySQL的數(shù)據(jù)庫(kù)代碼和SQLite類似。
小結(jié)
-
MySQL的SQL占位符是%s;
-
通常我們?cè)谶B接MySQL時(shí)傳入use_unicode=True,讓MySQL的DB-API始終返回Unicode。
總結(jié)
以上是生活随笔為你收集整理的python3爬虫初探(七)使用MySQL的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: python3爬虫初探(六)之EXCEL
- 下一篇: python3爬虫初探(八)reques