python異步IO初探

探索異步IO執(zhí)之前，先說(shuō)說(shuō)IO的種類

1.阻塞IO最簡(jiǎn)單，即讀寫數(shù)據(jù)時(shí)，需要等待操作完成，才能繼續(xù)執(zhí)行。進(jìn)階的做法就是用多線程來(lái)處理需要IO的部分，缺點(diǎn)是開銷會(huì)有些大。

2.非阻塞IO，即讀寫數(shù)據(jù)時(shí)，如果暫時(shí)不可讀寫，則立刻返回，而不等待。因?yàn)椴恢朗裁磿r(shí)候是可讀寫的，所以輪詢時(shí)可能會(huì)浪費(fèi)CPU時(shí)間。

3.IO復(fù)用，即在讀寫數(shù)據(jù)前，先檢查哪些描述符是可讀寫的，再去讀寫。select 和 poll 就是這樣做的，它們會(huì)遍歷所有被監(jiān)視的描述符，查看是否滿足，這個(gè)檢查的過(guò)程是阻塞的。而 epoll、kqueue 和/dev/poll 則做了些改進(jìn)，事先注冊(cè)需要檢查哪些描述符的哪些事件，當(dāng)狀態(tài)發(fā)生變化時(shí)，內(nèi)核會(huì)調(diào)用對(duì)應(yīng)的回調(diào)函數(shù)，將這些描述符保存下來(lái)；下次獲取可用的描述符時(shí)，直接返回這些發(fā)生變化的描述符即可。

4.信號(hào)驅(qū)動(dòng)，即描述符就緒時(shí)，內(nèi)核發(fā)送SIGIO信號(hào)，再由信號(hào)處理程序處理這些信號(hào)即可。不過(guò)信號(hào)處理的時(shí)機(jī)是從內(nèi)核態(tài)返回用戶態(tài)時(shí)，感覺(jué)也得把這些事件收集起來(lái)才好處理，有點(diǎn)想模擬IO復(fù)用了。

5.最后時(shí)異步IO,即讀寫數(shù)據(jù)時(shí)，只注冊(cè)事件，內(nèi)核完成讀寫后（讀取的數(shù)據(jù)會(huì)復(fù)制到用戶態(tài)），再調(diào)用事件處理函數(shù)。這整個(gè)過(guò)程都不會(huì)阻塞調(diào)用線程。

Python 3.4 開始，標(biāo)準(zhǔn)庫(kù)里又新增了 asyncio 這個(gè)模塊。

從原理上來(lái)說(shuō)，它和 Tornado 其實(shí)差不多，都是注冊(cè) IO 事件，然后在 IO loop 中等待事件發(fā)生，然后調(diào)用相應(yīng)的處理函數(shù)。

aiomysql說(shuō)明

1. poll

此庫(kù)提供一個(gè)簡(jiǎn)單的連接對(duì)象用法：

import asyncio
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def go()
 pool = yield from aiomysql.create_pool(host='127.0.0.1', port=3306,
           user='root', password='',
           db='mysql', loop=loop)
 with (yield from pool) as conn:
  cur = yield from conn.cursor()
  yield from cur.execute("SELECT 10")
  # print(cur.description)
  (r,) = yield from cur.fetchone()
  assert r == 10
 pool.close()
 yield from pool.wait_closed()
loop.run_until_complete(go())

解釋：

create_pool(minsize=1, maxsize=10, loop=None, **kwargs)

一個(gè)協(xié)程，創(chuàng)建連接池，連接database

參數(shù)：

minsize(int)最小的池子 ， 反之maxsize(int)
loop一個(gè)可選的事件循環(huán)實(shí)例，若未循環(huán)，使用 asyncio.get_event_loop()
echo(bool)默認(rèn)log執(zhí)行SQL查詢
kwargs
Class pool：最重要的是獲得連接：

with (yield from pool) as conn:
 cur = yield from conn.cursor()

2.  aiomysql — API Reference

connection

該庫(kù)用來(lái)連接MySQL,使用簡(jiǎn)單的aiomysql.connect(),可以連接一個(gè)數(shù)據(jù)庫(kù)或者關(guān)聯(lián)池子以連接更多

import asyncio # 舉例說(shuō)明
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def test_example():
 conn = yield from aiomysql.connect(host='127.0.0.1', port=3306,
          user='root', password='', db='mysql',
          loop=loop)
 cur = yield from conn.cursor()
 yield from cur.execute("SELECT Host,User FROM user")
 print(cur.description)
 r = yield from cur.fetchall()
 print(r)
 yield from cur.close()
 conn.close()
loop.run_until_complete(test_example())

3. Cursors 游標(biāo)

import asyncio
import aiomysql
loop = asyncio.get_event_loop()
@asyncio.coroutine
def test_example():
 conn = yield from aiomysql.connect(host='127.0.0.1', port=3306,
          user='root', password='',
          db='mysql', loop=loop)
 # create default cursor
 cursor = yield from conn.cursor()
 # execute sql query # 執(zhí)行sql查詢
 yield from cursor.execute("SELECT Host, User FROM user")
 # fetch all results
 r = yield from cursor.fetchall()
 # detach cursor from connection
 yield from cursor.close()
 # close connection
 conn.close()
loop.run_until_complete(test_example())

總結(jié)

以上所述是小編給大家介紹的aioysql(異步操作MySQL)-python，希望對(duì)大家有所幫助，如果大家有任何疑問(wèn)歡迎給我留言，小編會(huì)及時(shí)回復(fù)大家的！

最新評(píng)論