pythonfetchmany

『壹』 python資料庫API(DB API)

雖然 Python 需要為操作不同的資料庫使用不同的模塊，但不同的資料庫模塊並非沒有規律可循，因為它們基本都遵守 Python 制訂的 DB API 協議，目前該協議的最新版本是 2.0，因此這些資料庫模塊有很多操作其實都是相同的。下面先介紹不同資料庫模塊之間的通用內容。
全局變數
Python 推薦支持 DB API 2.0 的資料庫模塊都應該提供如下 3 個全局變數：
apilevel：該全局變數顯示資料庫模塊的 API 版本號。對於支持 DB API 2.0 版本的資料庫模塊來說，該變數值通常就是 2.0。如果這個變數不存在，則可能該資料庫模塊暫時不支持 DB API 2.0。讀者應該考慮選擇使用支持該資料庫的其他資料庫模塊。
threadsafety：該全局變數指定資料庫模塊的線程安全等級，該等級值為 0～3 ，其中 3 代表該模塊完全是線程安全的；1 表示該模塊具有部分線程安全性，線程可以共享該模塊，但不能共享連接；0 則表示線程完全不能共享該模塊。
paramstyle：該全局變數指定當 SQL 語句需要參數時，可以使用哪種風格的參數。該變數可能返回如下變數值：
format：表示在 SQL 語句中使用 Python 標準的格式化字元串代表參數。例如，在程序中需要參數的地方使用 %s，接下來程序即可為這些參數指定參數值。
pyformat：表示在 SQL 語句中使用擴展的格式代碼代表參數。比如使用 %(name)，這樣即可使用包含 key 為 name 的字典為該參數指定參數值。
qmark：表示在 SQL 語句中使用問號（?）代表參數。在 SQL 語句中有幾個參數，全部用問號代替。
numeric：表示在 SQL 語句中使用數字佔位符（:N）代表參數。例如：1 代表一個參數，:2 也表示一個參數，這些數字相當於參數名，因此它們不一定需要連續。
named：表示在 SQL 語句中使用命名佔位符（:name）代表參數。例如 :name 代表一個參數，:age 也表示一個參數。
通過查閱這些全局變數，即可大致了解該資料庫 API 模塊的對外的編程風格，至於該模塊內部的實現細節，完全由該模塊實現者負責提供，通常不需要開發者關心。
資料庫 API 的核心類
遵守 DB API 2.0 協議的資料庫模塊通常會提供一個 connect() 函數，該函數用於連接資料庫，並返回資料庫連接對象。
資料庫連接對象通常會具有如下方法和屬性：
cursor(factory=Cursor)：打開游標。
commit()：提交事務。
rollback()：回滾事務。
close()：關閉資料庫連接。
isolation_level：返回或設置資料庫連接中事務的隔離級別。
in_transaction：判斷當前是否處於事務中。
上面第一個方法可以返回一個游標對象，游標對象是 Python DB API 的核心對象，該對象主要用於執行各種 SQL 語句，包括 DDL、DML、select 查詢語句等。使用游標執行不同的 SQL 語句返回不同的數據。
游標對象通常會具有如下方法和屬性：
execute(sql[, parameters])：執行 SQL 語句。parameters 參數用於為 SQL 語句中的參數指定值。
executemany(sql, seq_of_parameters)：重復執行 SQL 語句。可以通過 seq_of_parameters 序列為 SQL 語句中的參數指定值，該序列有多少個元素，SQL 語句被執行多少次。
executescript(sql_script)：這不是 DB API 2.0 的標准方法。該方法可以直接執行包含多條 SQL 語句的 SQL 腳本。
fetchone()：獲取查詢結果集的下一行。如果沒有下一行，則返回 None。
fetchmany(size=cursor.arraysize)：返回查詢結果集的下 N 行組成的列表。如果沒有更多的數據行，則返回空列表。
fetchall()：返回查詢結果集的全部行組成的列表。
close()：關閉游標。
rowcount：該只讀屬性返回受 SQL 語句影響的行數。對於 executemany() 方法，該方法所修改的記錄條數也可通過該屬性獲取。
lastrowid：該只讀屬性可獲取最後修改行的 rowid。
arraysize：用於設置或獲取 fetchmany() 默認獲取的記錄條數，該屬性默認為 1。有些資料庫模塊沒有該屬性。
description：該只讀屬性可獲取最後一次查詢返回的所有列的信息。
connection：該只讀屬性返回創建游標的資料庫連接對象。有些資料庫模塊沒有該屬性。
總結來看，Python 的 DB API 2.0 由一個 connect() 開始，一共涉及資料庫連接和游標兩個核心 API。它們的分工如下：
資料庫連接：用於獲取游標、控制事務。
游標：執行各種 SQL 語句。
掌握了上面這些 API 之後，接下來可以大致歸納出 Python DB API 2.0 的編程步驟。
操作資料庫的基本流程
使用 Python DB API 2.0 操作資料庫的基本流程如下：
調用 connect() 方法打開資料庫連接，該方法返回資料庫連接對象。
通過資料庫連接對象打開游標。
使用游標執行 SQL 語句（包括 DDL、DML、select 查詢語句等）。如果執行的是查詢語句，則處理查詢數據。
關閉游標。
關閉資料庫連接。
下圖顯示了使用 Python DB API 2.0 操作資料庫的基本流程。

『貳』 如何用python連接mysql資料庫

在 Python 語言環境下我們這樣連接資料庫。

In [1]: from mysql import connector

In [2]: cnx = connector.connect(host="172.16.192.100",port=3306,user="appuser",password="xxxxxx")

但是連接資料庫的背後發生了什麼呢？

答案

當我們通過驅動程序（mysql-connector-python,pymysql）連接 MySQL 服務端的時候，就是把連接參數傳遞給驅動程序，驅動程序再根據參數會發起到 MySQL 服務端的 TCP 連接。當 TCP 連接建立之後驅動程序與服務端之間會按特定的格式和次序交換數據包，數據包的格式和發送次序由MySQL 協議規定。MySQL 協議：https://dev.mysql.com/doc/internals/en/client-server-protocol.html整個連接的過程中 MySQL 服務端與驅動程序之間，按如下的次序發送了這些包。

• MySQL 服務端向客戶端發送一個握手包，包里記錄了 MySQL-Server 的版本，默認的授權插件，密碼鹽值（auth-data）。

2. MySQL 客戶端發出 ssl 連接請求包（如果有必要的話）。

3. MySQL 客戶端發出握手包的響應包，這個包時記錄了用戶名，密碼加密後的串，客戶端屬性，等等其它信息。

4. MySQL 服務端發出響應包，這個包里記錄了登錄是否成功，如果沒有成功也會給出錯誤信息。

『叄』 linux環境下python怎樣操作mysql資料庫

linux環境下python怎樣操作mysql資料庫呢？方法如下：

首先在Linux環境下安裝mysql-python

1、下載mysql-python

打開終端：

cd /usr/local

sudo wgethttp://nchc.dl.sourceforge.net/sourceforge/mysql-python/MySQL-python-1.2.2.tar.gz

官網地址：http://sourceforge.net/projects/mysql-python/

2、解壓

sudo tar -zxvf MySQL-python-1.2.2.tar.gz

cd MySQL-python-1.2.2

3、在安裝前需進行配置

a、修改setup_posix.py中的mysql_config.path為你mysql安裝目錄的mysql_config路徑

b、修改site.cfg中的threadsafe = False，去掉mysql_config前的注釋，並改為mysql_config = /usr/local/mysql/bin/mysql_config

c、執行命令：

export LD_LIBRARY_PATH=/usr/local/mysql/lib/mysql

sudo ln -s /usr/local/mysql/lib/mysql/libmysqlclient.so /usr/lib/libmysqlclient.so.14

sudo ldconfig (這個很重要，否則後面會報錯ImportError: libmysqlclient.so.14: cannot open shared object file)

4、編譯安裝

1）python setup.py build

若未成功的話，需手動安裝setuptools：

sudo apt-get install python-setuptools
2）sudo python setup.py install

5、測試

python

>>> import MySQLdb

沒有錯誤，則表示安裝成功了。

使用python操作MySQL

使用python連接MySQL，創建資料庫，創建表格，插入/查詢數據。python_mysql.py代碼如下：

若出現類似於此的警告：

/usr/local/lib/python2.6/dist-packages/MySQL_python-1.2.2-py2.6-linux-i686.egg/MySQLdb/__init__.py:34: DeprecationWarning: the sets mole is deprecated from sets import ImmutableSet

解決辦法如下：
找到上面路徑MySQLdb下的__init__.py文件
1) 在文件中 "__init__.py"中， 注釋掉:
from sets import ImmutableSet
class DBAPISet(ImmutableSet):
新增:
class DBAPISet(frozenset):

2) 在文件"converters.py"中，注釋掉 from sets import BaseSet, Set 這一句話。

3) 在文件"converters.py"中， 修改 其中的"Set" 成為 "set" ( 只有兩個地方需要修改，即大寫改小寫)

大概 line 45: return Set([ i for i in s.split(',') if i ]) 改為 return set([ i for i in s.split(',') if i ])

大概 line 129: Set: Set2Str, 改為 set: Set2Str,

1.引入MySQLdb庫

import MySQLdb

2.和資料庫建立連接

conn=MySQLdb.connect(host="localhost",user="root",passwd="sa",db="mytable",charset="utf8")

提供的connect方法用來和資料庫建立連接,接收數個參數,返回連接對象.

比較常用的參數包括

host:資料庫主機名.默認是用本地主機.

user:資料庫登陸名.默認是當前用戶.

passwd:資料庫登陸的秘密.默認為空.

db:要使用的資料庫名.沒有默認值.

port:MySQL服務使用的TCP埠.默認是3306.

charset:資料庫編碼.

然後,這個連接對象也提供了對事務操作的支持,標準的方法

commit() 提交

rollback() 回滾

3.執行sql語句和接收返回值

cursor=conn.cursor()

n=cursor.execute(sql,param)

首先,我們用使用連接對象獲得一個cursor對象,接下來,我們會使用cursor提供的方法來進行工作.這些方法包括兩大類:1.執行命令,2.接收返回值

cursor用來執行命令的方法:

callproc(self, procname, args):用來執行存儲過程,接收的參數為存儲過程名和參數列表,返回值為受影響的行數

execute(self, query, args):執行單條sql語句,接收的參數為sql語句本身和使用的參數列表,返回值為受影響的行數

executemany(self, query, args):執行單條sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數

nextset(self):移動到下一個結果集

cursor用來接收返回值的方法:

fetchall(self):接收全部的返回結果行.

fetchmany(self, size=None):接收size條返回結果行.如果size的值大於返回的結果行的數量,則會返回cursor.arraysize條數據.

fetchone(self):返回一條結果行.

scroll(self, value, mode='relative'):移動指針到某一行.如果mode='relative',則表示從當前所在行移動value條,如果mode='absolute',則表示從結果集的第一行移動value條.

下面的代碼是一個完整的例子.

#使用sql語句,這里要接收的參數都用%s佔位符.要注意的是,無論你要插入的數據是什麼類型,佔位符永遠都要用%s

sql="insert into cdinfo values(%s,%s,%s,%s,%s)"

#param應該為tuple或者list

param=(title,singer,imgurl,url,alpha)

#執行,如果成功,n的值為1

n=cursor.execute(sql,param)

#再來執行一個查詢的操作

cursor.execute("select * from cdinfo")

#我們使用了fetchall這個方法.這樣,cds里保存的將會是查詢返回的全部結果.每條結果都是一個tuple類型的數據,這些tuple組成了一個tuple

cds=cursor.fetchall()

#因為是tuple,所以可以這樣使用結果集

print cds[0][3]

#或者直接顯示出來,看看結果集的真實樣子

print cds

#如果需要批量的插入數據,就這樣做

sql="insert into cdinfo values(0,%s,%s,%s,%s,%s)"

#每個值的集合為一個tuple,整個參數集組成一個tuple,或者list

param=((title,singer,imgurl,url,alpha),(title2,singer2,imgurl2,url2,alpha2))

#使用executemany方法來批量的插入數據.這真是一個很酷的方法!

n=cursor.executemany(sql,param)

4.關閉資料庫連接

需要分別的關閉指針對象和連接對象.他們有名字相同的方法

cursor.close()

conn.close()

以上方法就可以了。

另外，附MySQLdb的相關資料

更多關於MySQLdb的信息可以查這里：http://mysql-python.sourceforge.net/MySQLdb.html

『肆』 怎麼把python查詢到mysql資料庫里的數據列表顯示到網頁上

我採用的是MySQLdb操作的MYSQL資料庫。先來一個簡單的例子吧：
import MySQLdb

try:
conn=MySQLdb.connect(host='localhost',user='root',passwd='root',db='test',port=3306)
cur=conn.cursor()
cur.execute('select * from user')
cur.close()
conn.close()
except MySQLdb.Error,e:
print "Mysql Error %d: %s" % (e.args[0], e.args[1])

請注意修改你的資料庫，主機名，用戶名，密碼。
下面來大致演示一下插入數據，批量插入數據，更新數據的例子吧：
import MySQLdb

try:
conn=MySQLdb.connect(host='localhost',user='root',passwd='root',port=3306)
cur=conn.cursor()

cur.execute('create database if not exists python')
conn.select_db('python')
cur.execute('create table test(id int,info varchar(20))')

value=[1,'hi rollen']
cur.execute('insert into test values(%s,%s)',value)

values=[]
for i in range(20):
values.append((i,'hi rollen'+str(i)))

cur.executemany('insert into test values(%s,%s)',values)

cur.execute('update test set info="I am rollen" where id=3')

conn.commit()
cur.close()
conn.close()

except MySQLdb.Error,e:
print "Mysql Error %d: %s" % (e.args[0], e.args[1])

請注意一定要有conn.commit()這句來提交事務，要不然不能真正的插入數據。
運行之後我的MySQL資料庫的結果就不上圖了。
import MySQLdb

try:
conn=MySQLdb.connect(host='localhost',user='root',passwd='root',port=3306)
cur=conn.cursor()

conn.select_db('python')

count=cur.execute('select * from test')
print 'there has %s rows record' % count

result=cur.fetchone()
print result
print 'ID: %s info %s' % result

results=cur.fetchmany(5)
for r in results:
print r

print '=='*10
cur.scroll(0,mode='absolute')

results=cur.fetchall()
for r in results:
print r[1]

conn.commit()
cur.close()
conn.close()

except MySQLdb.Error,e:
print "Mysql Error %d: %s" % (e.args[0], e.args[1])

運行結果就不貼了，太長了。
查詢後中文會正確顯示，但在資料庫中卻是亂碼的。經過我從網上查找，發現用一個屬性有可搞定：
在Python代碼
conn = MySQLdb.Connect(host='localhost', user='root', passwd='root', db='python') 中加一個屬性：
改為：
conn = MySQLdb.Connect(host='localhost', user='root', passwd='root', db='python',charset='utf8')
charset是要跟你資料庫的編碼一樣，如果是資料庫是gb2312 ,則寫charset='gb2312'。

下面貼一下常用的函數：
然後,這個連接對象也提供了對事務操作的支持,標準的方法
commit() 提交
rollback() 回滾
cursor用來執行命令的方法:
callproc(self, procname, args):用來執行存儲過程,接收的參數為存儲過程名和參數列表,返回值為受影響的行數
execute(self, query, args):執行單條sql語句,接收的參數為sql語句本身和使用的參數列表,返回值為受影響的行數
executemany(self, query, args):執行單挑sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數
nextset(self):移動到下一個結果集

cursor用來接收返回值的方法:
fetchall(self):接收全部的返回結果行.
fetchmany(self, size=None):接收size條返回結果行.如果size的值大於返回的結果行的數量,則會返回cursor.arraysize條數據.
fetchone(self):返回一條結果行.
scroll(self, value, mode='relative'):移動指針到某一行.如果mode='relative',則表示從當前所在行移動value條,如果 mode='absolute',則表示從結果集的第一行移動value條.

『伍』 如何python獲取sql資料庫訪問的url

python
操作資料庫，要安裝一個Python和資料庫交互的包MySQL-python-1.2.2.win32-py2.5.exe，然後我們就可以使用MySQLdb這個包進行資料庫操作了。

操作步驟如下：
1、建立資料庫連接
import
MySQLdb
conn=MySQLdb.connect(host="localhost",user="root",passwd="sa",db="mytable")
cursor=conn.cursor()
2、執行資料庫操作
n=cursor.execute(sql,param)
我們要使用連接對象獲得一個cursor對象,接下來,我們會使用cursor提供的方法來進行工作.
這些方法包括兩大類:1.執行命令,2.接收返回值

3、cursor用來執行命令的方法:

callproc(self, procname,
args):用來執行存儲過程,接收的參數為存儲過程名和參數列表,返回值為受影響的行數
execute(self, query,
args):執行單條sql語句,接收的參數為sql語句本身和使用的參數列表,返回值為受影響的行數
executemany(self, query,
args):執行單挑sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數

nextset(self):移動到下一個結果集

4、cursor用來接收返回值的方法:


fetchall(self):接收全部的返回結果行.
fetchmany(self,
size=None):接收size條返回結果行.如果size的值大於返回的結果行的數量,則會返回cursor.arraysize條數據.

fetchone(self):返回一條結果行.
scroll(self, value,
mode='relative'):移動指針到某一行.如果mode='relative',則表示從當前所在行移動value條,如果mode='absolute',則表示從結果集的第一
行移動value條.

5、下面的代碼是一個完整的例子.

#使用sql語句,這里要接收的參數都用%s佔位符.要注意的是,無論你要插入的數據是什麼類型,佔位符永遠都要用%s
sql="insert
into cdinfo values(%s,%s,%s,%s,%s)"
#param應該為tuple或者list
param=(title,singer,imgurl,url,alpha)
#執行,如果成功,n的值為1
n=cursor.execute(sql,param)
#再來執行一個查詢的操作
cursor.execute("select
* from cdinfo")
#我們使用了fetchall這個方法.這樣,cds里保存的將會是查詢返回的全部結果.每條結果都是一個tuple類型的數據,這些tuple組成了一個tuple
cds=cursor.fetchall()
#因為是tuple,所以可以這樣使用結果集
print
cds[0][3]
#或者直接顯示出來,看看結果集的真實樣子
print
cds
#如果需要批量的插入數據,就這樣做
sql="insert
into cdinfo values(0,%s,%s,%s,%s,%s)"
#每個值的集合為一個tuple,整個參數集組成一個tuple,或者list
param=((title,singer,imgurl,url,alpha),(title2,singer2,imgurl2,url2,alpha2))
#使用executemany方法來批量的插入數據.這真是一個很酷的方法!
n=cursor.executemany(sql,param)
需要注意的是(或者說是我感到奇怪的是),在執行完插入或刪除或修改操作後,需要調用一下conn.commit()方法進行提交.這樣,數據才會真正保
存在資料庫中.我不清楚是否是我的mysql設置問題,總之,今天我在一開始使用的時候,如果不用commit,那數據就不會保留在資料庫中,但是,數據
確實在資料庫呆過.因為自動編號進行了累積,而且返回的受影響的行數並不為0.

6、關閉資料庫連接

需要分別的關閉指針對象和連接對象.他們有名字相同的方法
cursor.close()
conn.close()

Django操作資料庫
django是一個出色的用於python的web框架。django連接有操作資料庫的api，使用起來十分簡潔。我們在settings.py中配置好所要連接的資料庫，然後在moles、view、urls中分別寫好業務邏輯

『陸』 如何用Python寫一個web框架

STEP.1

我們首先得選擇基於什麼協議來寫這種框架。我們可以選擇CGI協議,或者是WSGI介面。如果使用CGI,實際上我們只是按著CGI的規范寫了一個python程序，然後每次伺服器收到請求,就fork一個程序來執行它，然後返回一個http文檔，性能比較低下。對於WSGI，而是一個存在於伺服器和應用間的介面，在WSGI之前，web應用都是依賴於伺服器的，現在流行的python框架都支持WSGI介面。

STEP.2 PEP-333

這一段是PEP-333 所提供的樣例代碼。

def simple_app(environ, start_response):
"""Simplest possible application object"""
status = '200 OK'
response_headers = [('Content-type', 'text/plain')]
start_response(status, response_headers)
return ['Hello world! ']

這里的application被傳入了兩個值。

• environ

• start_response。
  environ是一個字典，保存了http請求的信息。
  start_response是一個函數，發送http響應。她有兩個參數status 和 start_headers。

• status必須是由狀態編號和具體信息組成的字元串，必須符合RFC 2616。

• start_headers是一個(header_name,header_value) 元組的列表元組列表。其中的hearder_name必須是合法的http header欄位名。在RFC 2616, Section 4.2中有詳細定義。
  當然官方還給出了類的實現。

• def __init__(self, environ, start_response):



• self.environ = environ



• self.start = start_response


• def __iter__(self):



• status = '200 OK'



• response_headers = [('Content-type','text/plain')]



• self.start(status, response_headers)



• yield "Hello world! "



了解了如上信息後，基本上可以開始了。我們就到官方給的代碼上進行修改吧。

STEP.3 將路徑鏈接到函數

首先我們得把用戶請求的路徑，鏈接到函數。我們可以實現一個getPage方法，專門做這件事。我們所擁有的信息，只有environ['PATH_INFO']。

• urls = [('^/index/$','func_index'),


• ('^/comment/$','func_comment'),


• ('^/environ/$','get_environ'),


• ('^/post/$','post_test')]#urls是提供給app開發者來做鏈接的。


• def getPage(self):


• path = self.environ['PATH_INFO']


• for pattern in self.urls:


• m = re.match(pattern[0],path)#將urls元素的第0項和path進行比對，如果匹配上了，返回函數名


• if m:


• function = getattr(self,pattern[1])#getattr方法來得到函數


• return function()


• return '404 not found'#沒匹配上任何東西



寫到這里之後，每次添加頁面，就只需要在urls列表中添加一個元祖就行了。

STEP.4 獲取模版

既然是寫web app，模版肯定是得有的。這里我提供了一種getTemplate方法來做這件事。不過我只提供了變數的替換。

• def getTemplate(self,tem_name,rep=0):


• #這個函數返回內容,tem_name是文件名字


• #參數rep是一個字典，默認為0


• f = open('template/'+tem_name)


• html = f.read()


• if(rep!=0):


• for to_replace in rep:


• strinfo = re.compile('{\%s*'+str(to_replace)+'s*\%}')


• html = strinfo.sub(rep[to_replace],html)


• return html



STEP.5 POST數據的處理

要想獲取POST數據，我們得通過environ['wsgi.input']來處理。而他實際上就是系統的標准輸入。

• environ['wsgi.input'] = sys.stdin



知道這點後就很好寫了。

• def getPost(self):


• if(self.environ['REQUEST_METHOD'] == 'POST'):


• try:


• request_body_size = int(self.environ.get('CONTENT_LENGTH', 0))#讀出content_length的值


• except:


• request_body_size = 0


• request_body = self.environ['wsgi.input'].read(request_body_size) #請求的body


• post_data = parse_qs(request_body)#parse_qs是cgi提供的方法，幫助我們處理請求


• return post_data



資料庫的鏈接

• import MySQLdb


• class Model(object):


• def __init__(self):


• self.host = 'localhost'


• self.port = 3306


• self.user = 'admin'


• self.passwd = 'admin'


• self.db = 'xieyi'


• def build_connect(self):


• self.conn = MySQLdb.connect(


• host = self.host,


• port = self.port,


• user = self.user,


• passwd = self.passwd,


• db = self.db


• )


• def exec_ins(self,ins):


• cur = self.conn.cursor()


• num = cur.execute(ins)


• info = {}


• if(num>0):


• info = cur.fetchmany(num)


• cur.close()


• self.conn.commit()


• return info


• def close(self):


• self.conn.close()



STEP.6 清理工作

很多配置如果放到代碼中，會增加閱讀負擔。於是把urls,model抽取出來。
使得配置更加方便。

『柒』 python 怎麼創建create mysql的資料庫

有個庫叫做mysql-python
也可以使用odbc方式用pyodbc
mysql好像還不支持點陣圖索引

『捌』 python如何訪問資料庫

1.背景：

python提供了很多資料庫介面， 常用的資料庫有 MS SQL Server /mysql /oracle 等。

打開鏈接 https://wiki.python.org/moin/DatabaseInterfaces

是python 關於資料庫介面的一個總結 ， 可以看到python支持的訪問的資料庫系統。

2.模塊：

python 主要是通過模塊和資料庫連接的。

2.1 安裝模塊：

如果使用anconda，本身就會集合很多模塊，不需要手動安裝。如果用pycharm就要手動安裝模塊。

安裝模塊流程：

下載模塊擴展包放到路徑下——>cmd找到相應路徑——> pip install +擴展包名字

下面列舉一些常用連接資料庫的模塊：pymssql / sqlite3/ PyMySQL/pyodbc/odbc/adodbapi

不同模塊連接的資料庫不同， 支持的版本系統有的也不一樣。但是大體用法都是相近的， 因為有DB-API

相關推薦：《Python教程》

3.Python DB-API

3.1背景：

在沒有DB-API 之前， 不同資料庫有不同的資料庫介面程序， 這就導致python 訪問 database 的介面程序非常混亂。如果我們學習了python 訪問 mysql 的介面程序， 然後要切換到另一個資料庫上， 我們還要在學習另外一個資料庫的介面程序。python DB-API就是為了解決介面程序混亂而生成的。有了DB-API, 在不同資料庫上移植代碼就變得簡單的多了。

3.2Python DB-API：

Python 定義了一套操作資料庫的 DB-API 介面，它是一個規范，定義了一系列必須的對象和資料庫存取方式，以便為不同的底層資料庫系統提供一致的訪問介面

這個鏈接就是python 官方給定的 DB-API 的說明 https://www.python.org/dev/peps/pep-0249/

3.3 Python DB--API的內容：

連接對象：

?Connect()創建連接:host/server /user/password/db connect方法生成一個connect對象, 我們通過這個對象來訪問資料庫。符合標準的模塊都會實現connect方法。

?close():關閉連接

?commit():提交當前事務。做出某些更改後確保已經進行了提交，這樣才可以將這些修改真正地保存到database中

?rollback() 回滾上一次調用 commit（）以來對資料庫所做的更改

?cursor():創建游標。系統為用戶開通的一個數據緩沖區，用於存放SQL語句執行結果。cursor游標是有狀態的，它可以記錄當前已經取到結果的第幾個記錄了，因此，一般你只可以遍歷結果集一次。在上面的情況下，如果執行fetchone()會返回為空。這一點在測試時需要注意

游標對象：

?Execute()執行一個資料庫查詢或命令。 execute 執行sql 語句之後運行的結果不會直接output 出來 ， 而是放到了一個緩存區， 要用 fetch語句+print 可以查詢sql運行的結果

?fetchone ()得到結果集的下一行

?fetchmany(size)得到結果集的下幾行

?fetchall()返回結果集中剩下的所有行

?rowcount 返回影響的行數

?Close()關閉游標對象

3.4Python DB--API的工作原理及流程：

如圖所示如果把python 和資料庫比作兩個不同的地點， connection 就是路， 能連接python和database。cursor就像在路上行駛的小貨車， 可以用於執行sql 語句， 以及存儲sql 運行的結果。

流程：

4.MS SQL Server 示例：

4.1 導入模塊、創建連接：

4.2 創建游標： 游標創建之後就可以對資料庫進行查詢更改了！

4.3對數據進行操作（創建表、插入行、更新數據、增加列、刪除行、列、表）：

4.4 查詢 獲取行：

5.其他：

使用游標的時候要注意， 每次連接只能有一個游標查詢處於活躍狀態。 code演示：

execute()循環和 executemany() 插入100000 條數據測速：

『玖』 python mysqldb 同時多少個鏈接

看資料庫的配置和性能
做python的時候需要用到資料庫，於是自己重新整理了一下資料庫的知識，並且熟悉了python中MysqlDB模塊的功能和函數等介面，現在系統地來總結一下吧：
首先你要做的還是下載相應的模塊並且安裝啦，下載地址自己搜，網上有很多，安裝的話也很好辦，安裝之後python的安裝目錄下的Lib文件夾下的site-packages文件夾下的MySQLdb文件夾，這之中存放的便是該模塊的定義。准備工作做好之後我們需要在源碼中import MySQLdb
資料庫的連接：
模塊引入之後我們就需要和資料庫進行連接了，實例代碼如下：
db = MySQLdb.connect("localhost","root","123456","myciti" )
這三個關鍵參數的含義一目瞭然：第一個為伺服器的地址，第二個為用戶名，第三個為dbms密碼，第四個為要訪問的資料庫，其實該connect函數的參數不止這些，不過由於其有默認值而且大多數情況下不用修改，因而省略了。這里做如下列表：
host，連接的資料庫伺服器主機名，默認為本地主機(localhost)。
user，連接資料庫的用戶名，默認為當前用戶。
passwd，連接密碼，沒有默認值。
db，連接的資料庫名，沒有默認值。
conv，將文字映射到Python類型的字典。默認為MySQLdb.converters.conversions
cursorclass，cursor()使用的種類，默認值為MySQLdb.cursors.Cursor。
compress，啟用協議壓縮功能。
named_pipe，在windows中，與一個命名管道相連接。
init_command，一旦連接建立，就為資料庫伺服器指定一條語句來運行。
read_default_file，使用指定的MySQL配置文件。
read_default_group，讀取的默認組。
unix_socket，在unix中，連接使用的套接字，默認使用TCP。
port，指定資料庫伺服器的連接埠，默認是3306
大家可能會注意到源碼中沒有用到埠號，這是因為MySQLdb的connect函數的該參數的默認值便是3306，如果你在安裝mysql的時候修改了資料庫的埠號，那麼你就需要在源碼中加上該參數的修改值了。
一，安裝mysql
如果是windows 用戶，mysql 的安裝非常簡單，直接下載安裝文件，雙擊安裝文件一步一步進行操作即可。
Linux 下的安裝可能會更加簡單，除了下載安裝包進行安裝外，一般的linux 倉庫中都會有mysql ，我們只需要通過一個命令就可以下載安裝：
Ubuntu\deepin
>>sudo apt-get install mysql-server
>>Sudo apt-get install mysql-client
centOS/redhat
>>yum install mysql
二，安裝MySQL-python
要想使python可以操作mysql 就需要MySQL-python驅動，它是python 操作mysql必不可少的模塊。

下載MySQL-python-1.2.5.zip 文件之後直接解壓。進入MySQL-python-1.2.5目錄:
>>python setup.py install
三，測試
測試非常簡單，檢查MySQLdb 模塊是否可以正常導入。
fnngj@fnngj-H24X:~/pyse$ python
Python 2.7.4 (default, Sep 26 2013, 03:20:56)
[GCC 4.7.3] on linux2
Type "help", "right", "credits" or "license" for more information.
>>> import MySQLdb
沒有報錯提示MySQLdb模塊找不到，說明安裝OK ，下面開始使用python 操作資料庫之前，我們有必要來回顧一下mysql的基本操作：
四，mysql 的基本操作
$ mysql -u root -p （有密碼時）
$ mysql -u root （無密碼時）
mysql> show databases; // 查看當前所有的資料庫
+--------------------+
| Database |
+--------------------+
| information_schema |
| csvt |
| csvt04 |
| mysql |
| performance_schema |
| test |
+--------------------+
6 rows in set (0.18 sec)
mysql> use test; //作用與test資料庫
Database changed
mysql> show tables; //查看test庫下面的表
Empty set (0.00 sec)
//創建user表，name 和password 兩個欄位
mysql> CREATE TABLE user (name VARCHAR(20),password VARCHAR(20)); Query OK, 0 rows affected (0.27 sec)
//向user表內插入若干條數據
mysql> insert into user values('Tom','1321');Query OK, 1 row affected (0.05 sec)
mysql> insert into user values('Alen','7875');Query OK, 1 row affected (0.08 sec)
mysql> insert into user values('Jack','7455');Query OK, 1 row affected (0.04 sec)
//查看user表的數據
mysql> select * from user;+------+----------+
| name | password |
+------+----------+
| Tom | 1321 |
| Alen | 7875 |
| Jack | 7455 |
+------+----------+
3 rows in set (0.01 sec)
//刪除name 等於Jack的數據
mysql> delete from user where name = 'Jack';Query OK, 1 rows affected (0.06 sec)
//修改name等於Alen 的password 為 1111
mysql> update user set password='1111' where name = 'Alen';Query OK, 1 row affected (0.05 sec)
Rows matched: 1 Changed: 1 Warnings: 0
//查看錶內容
mysql> select * from user;+--------+----------+
| name | password |
+--------+----------+
| Tom | 1321 |
| Alen | 1111 |
+--------+----------+
3 rows in set (0.00 sec)
五，python 操作mysql資料庫基礎
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd='123456',
db ='test',
)
cur = conn.cursor()#創建數據表#cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")#插入一條數據#cur.execute("insert into student values('2','Tom','3 year 2 class','9')")#修改查詢條件的數據#cur.execute("update student set class='3 year 1 class' where name = 'Tom'")#刪除查詢條件的數據#cur.execute("delete from student where age='9'")cur.close()
conn.commit()
conn.close()
>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd='123456',db ='test',)
Connect() 方法用於創建資料庫的連接，裡面可以指定參數：用戶名，密碼，主機等信息。
這只是連接到了資料庫，要想操作資料庫需要創建游標。
>>> cur = conn.cursor()
通過獲取到的資料庫連接conn下的cursor()方法來創建游標。
>>> cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")
通過游標cur 操作execute()方法可以寫入純sql語句。通過execute()方法中寫如sql語句來對數據進行操作。
>>>cur.close()
cur.close() 關閉游標
>>>conn.commit()
conn.commit()方法在提交事物，在向資料庫插入一條數據時必須要有這個方法，否則數據不會被真正的插入。
>>>conn.close()
Conn.close()關閉資料庫連接
六，插入數據
通過上面execute()方法中寫入純的sql語句來插入數據並不方便。如：
>>>cur.execute("insert into student values('2','Tom','3 year 2 class','9')")
我要想插入新的數據，必須要對這條語句中的值做修改。我們可以做如下修改：
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd='123456',
db ='test',
)
cur = conn.cursor()#插入一條數據sqli="insert into student values(%s,%s,%s,%s)"cur.execute(sqli,('3','Huhu','2 year 1 class','7'))
cur.close()
conn.commit()
conn.close()
假如要一次向數據表中插入多條值呢？
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd='123456',
db ='test',
)
cur = conn.cursor()#一次插入多條記錄sqli="insert into student values(%s,%s,%s,%s)"cur.executemany(sqli,[
('3','Tom','1 year 1 class','6'),
('3','Jack','2 year 1 class','7'),
('3','Yaheng','2 year 2 class','7'),
])
cur.close()
conn.commit()
conn.close()
executemany()方法可以一次插入多條值，執行單挑sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數。
七，查詢數據
也許你已經嘗試了在python中通過
>>>cur.execute("select * from student")
來查詢數據表中的數據，但它並沒有把表中的數據列印出來，有些失望。
來看看這條語句獲得的是什麼
>>>aa=cur.execute("select * from student")
>>>print aa
5
它獲得的只是我們的表中有多少條數據。那怎樣才能獲得表中的數據呢？進入python shell
>>> import MySQLdb>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd='123456',db ='test',)>>> cur = conn.cursor()>>> cur.execute("select * from student")5L
>>> cur.fetchone()
(1L, 'Alen', '1 year 2 class', '6')>>> cur.fetchone()
(3L, 'Huhu', '2 year 1 class', '7')>>> cur.fetchone()
(3L, 'Tom', '1 year 1 class', '6')
...>>>cur.scroll(0,'absolute')
fetchone()方法可以幫助我們獲得表中的數據，可是每次執行cur.fetchone() 獲得的數據都不一樣，換句話說我沒執行一次，游標會從表中的第一條數據移動到下一條數據的位置，所以，我再次執行的時候得到的是第二條數據。
scroll(0,'absolute') 方法可以將游標定位到表中的第一條數據。
還是沒解決我們想要的結果，如何獲得表中的多條數據並列印出來呢？
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd='123456',
db ='test',
)
cur = conn.cursor()#獲得表中有多少條數據aa=cur.execute("select * from student")print aa#列印表中的多少數據info = cur.fetchmany(aa)for ii in info: print ii
cur.close()
conn.commit()
conn.close()
通過之前的print aa 我們知道當前的表中有5條數據，fetchmany()方法可以獲得多條數據，但需要指定數據的條數，通過一個for循環就可以把多條數據列印出啦！執行結果如下：
5(1L, 'Alen', '1 year 2 class', '6')
(3L, 'Huhu', '2 year 1 class', '7')
(3L, 'Tom', '1 year 1 class', '6')
(3L, 'Jack', '2 year 1 class', '7')
(3L, 'Yaheng', '2 year 2 class', '7')
[Finished in 0.1s]

『拾』 python fetchone 取出的數據是什麼類型

舉例，首先看了pymysql裡面的cursor類，關於execute、fetchone和fetchall定義如下：
#調用self._query方法進行查詢
def execute(self, query, args=None):
"""Execute a query
:param str query: Query to execute.
:param args: parameters used with query. (optional)
:type args: tuple, list or dict
:return: Number of affected rows
:rtype: int
If args is a list or tuple, %s can be used as a placeholder in the query.
If args is a dict, %(name)s can be used as a placeholder in the query.
"""
while self.nextset():
pass
query = self.mogrify(query, args)
result = self._query(query)
self._executed = query
return result
#調用_do_get_result獲取查詢結果
def _query(self, q):
conn = self._get_db()
self._last_executed = q
self._clear_result()
conn.query(q)
self._do_get_result()
return self.rowcount
#這里獲取結果
def _do_get_result(self):
conn = self._get_db()
self._result = result = conn._result
self.rowcount = result.affected_rows
self.description = result.description
self.lastrowid = result.insert_id
self._rows = result.rows
self._warnings_handled = False

if not self._defer_warnings:
self._show_warnings()
其實看到這里代碼邏輯已經很清楚了，在調用cursor.execute執行SQL的時候，就將MySQL查詢的結果放到result這個變數里了，也就是說結果集放到了客戶端的內存變數里，那麼獲取數據的方式也就是從這個內存變數里去獲取數據，只是獲取的行為有所不同而已了。
def fetchone(self):
"""Fetch the next row"""
self._check_executed()
if self._rows is None or self.rownumber >= len(self._rows):
return None
result = self._rows[self.rownumber]
self.rownumber += 1
return result

def fetchmany(self, size=None):
"""Fetch several rows"""
self._check_executed()
if self._rows is None:
return ()
end = self.rownumber + (size or self.arraysize)
result = self._rows[self.rownumber:end]
self.rownumber = min(end, len(self._rows))
return result
def fetchall(self):
"""Fetch all the rows"""
self._check_executed()
if self._rows is None:
return ()
if self.rownumber:
result = self._rows[self.rownumber:]
else:
result = self._rows
self.rownumber = len(self._rows)
return result
口說無憑，我們直接通過Wireshark抓包來證明一下，首先我在本地執行腳本如下，然後我監聽本地的網卡流量
import pymysql
conn = pymysql.connect(host='xxx', port=3306,
user='xucl', password='xuclxucl', database='xucl')
cursor = conn.cursor()
cursor.execute("select * from t")
注意，我這里並沒有執行fetch操作，如果監聽到的包裡麵包含了結果，那麼就證明我們前面的分析是正確的，話不多說開始實驗，Wireshark抓包如下：
果然跟我們之前的預測是一致的，即使沒有進行fetch操作，MySQL也將結果集發送到客戶端了。另外關於結果集發送，可以參考我另外一篇文章：《由一個抓瞎的SQL引申出去》

結論：
客戶端執行SQL的時候，MySQL一次性將結果集發送給了客戶端
客戶端接收到結果集以後存儲本地內存變數中
fetch結果只是從這個本地變數中獲取，fetchone/fetchmany/fetchall只是獲取行為的不通，因此對於MySQL來說並沒有什麼不通的。