日本不卡不码高清免费观看,久久国产精品久久w女人spa,黄色aa久久,三上悠亚国产精品一区二区三区

您的位置:首頁技術文章
文章詳情頁

Python查詢oracle數據庫速度慢的解決方案

瀏覽:178日期:2022-06-22 13:51:08

如下所示:

conn = cx_Oracle.connect(’username/password@ip:port/servername’)cur = conn.cursor()cur.execute(’SELECT * FROM 'db'.'table'’)

cur是一個迭代器,不要用fetchall一次性取完數據

直接 for row in cur 即可取數據

使用:sqlalchemy

MySQL-Python mysql+mysqldb://<user>:<password>@<host>[:<port>]/<dbname> pymysql mysql+pymysql://<username>:<password>@<host>/<dbname>[?<options>] MySQL-Connector mysql+mysqlconnector://<user>:<password>@<host>[:<port>]/<dbname> cx_Oracle oracle+cx_oracle://user:pass@host:port/dbname[?key=value&key=value...]

create_engine(’oracle+cx_oracle://{a}:{b}@{c}:4y02yum/?service_name={e}’.format(a,b,c,d,e))create_engine(’mysql+pymysql://%(user)s:%(password)s@%(host)s/%(database)s?charset=utf8’ % laoshifu_info) df = pd.read_sql_table(table_name='table_name', con=engine) (the function to_sql is case-sensitive,Found the root cause from DBMS (mysql) autoconvert the table name to lowercase.)df = pd.read_sql_query(sql=sql,con=engine) # 很慢ordf = pd.read_sql('SELECT * FROM db.table ',engine,chunksize=50000)dflist = []for chunk in ordf: dflist.append(chunk)df = pd.concat(dflist)

補充:Python3 Cx_oracle 的一些使用技巧

Cx_oracle的一些使用技巧

工作中的數據庫采用oracle。訪問oracle數據庫一般都采用cx_oracle包來完成,API很清晰,操作效率也比較高,而且oracle官方好像對cx_oracle也非常支持,提供了豐富的文檔。這里討論一些使用技巧,作為記錄,可能對你也有用。

我最近用python寫了一個小工具,這個工具根據客戶端的請求查詢數據庫,并將結果集以json的方式返回。請求的格式如下:

{fields : [ {name : 'project_id', type : 'string'}, {name : 'project_name', type : 'string'}],sql : 'select t.project_id, t.project_name from dp_project t' }

即,客戶端描述自己想要的元數據信息(字段名稱,字段類型),以及SQL語句,服務器端根據此信息查詢數據庫,并將返回組織成客戶端在fields中描述的那樣。

cx_oracle默認從cursor中fetch出來的數據是一個元組,按照SQL中的順序組織,但是我希望返回的是一個字典結構,這個可以通過設置cursor的rowfactory屬性來實現,定義一個rowfactory的回調函數:

def makedict(self, cursor):cols = [d[0] for d in cursor.description] def createrow(*args): return dict(zip(cols, args)) return createrow

這個函數返回一個函數:createrow。可能有點繞口,仔細想想就清晰了。cursor中帶有足夠的信息來生成這個字典,如cursor的description的值為:

[ (’PROJECT_ID’, <;type ’cx_Oracle.STRING’>, 40, 40, 0, 0, 0), (’PROJECT_NAME’, <;type ’cx_Oracle.STRING’>, 50, 50, 0, 0, 1) ]

我們需要的是cursor.description的第一列,zip函數將cols和默認的那個元組合成為一個新的元組,再用dict轉換為一個新的字典對象返回。

然后將這個返回函數的函數注冊給cursor的rowfactory即可:

cursor.rowfactory = self.makedict(cursor)

這樣,我們使用cursor.fetchall/fetchone的時候,取出來的就成為一個字典對象,很方便將其序列化為json格式返回。

另一個技巧是關于將查詢到的結果中,字符串類型的字段轉換為unicode,數值類型的不做處理:

def outtypehandler(self, cursor, name, dtype, size, p, s):if dtype in (oracle.STRING, oracle.FIXED_CHAR): return cursor.var(unicode, size, cursor.arraysize)

將connection對象的outputtypehandler注冊為此函數即可:

connection = oracle.connect(self.constr) connection.outputtypehandler = self.outtypehandler

通用查詢的這個小工具還在開發中,等完成了再整理一下。

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持好吧啦網。如有錯誤或未考慮完全的地方,望不吝賜教。

標簽: Python 編程
相關文章:
日本不卡不码高清免费观看,久久国产精品久久w女人spa,黄色aa久久,三上悠亚国产精品一区二区三区
老司机精品视频在线播放| 91精品福利| 欧美日韩日本国产亚洲在线| 激情亚洲影院在线观看| 99久久久久国产精品| av一区二区高清| 欧美在线资源| 国产日产一区| 麻豆传媒一区二区三区| 亚洲毛片视频| 欧美日本不卡| 国产aa精品| 91九色精品| 日韩不卡一二三区| av中文字幕在线观看第一页| 激情偷拍久久| 免费成人av在线播放| 国产精品密蕾丝视频下载| 青青青免费在线视频| 久久国产88| 国产精品红桃| 欧美成人综合| 国产欧美一区二区三区国产幕精品 | 99re国产精品| 免费一区二区视频| 国产精品一区亚洲| 国产传媒在线| 美女国产精品| 国产精品18| 国产精品精品| 亚洲专区在线| 国产精品成人自拍| 国产一区清纯| 国产精品嫩草影院在线看| 日韩欧美另类一区二区| 亚洲精品自拍| 久久香蕉精品香蕉| 91久久久久| 毛片不卡一区二区| 亚洲欧美日韩专区| 91亚洲国产| 亚洲1区在线| av综合电影网站| 天堂va欧美ⅴa亚洲va一国产| 成人国产精品一区二区免费麻豆| 伊人久久亚洲热| 久久精品免费看| 综合亚洲自拍| 欧美日韩一区二区综合| 国产欧美日韩一级| 99国产精品视频免费观看一公开 | 日韩不卡在线观看日韩不卡视频| 国产精品一区二区三区av麻| 日本不卡免费高清视频在线| 狠狠爱www人成狠狠爱综合网| 久久精品国产免费| 一区二区三区四区日韩| 日韩欧美另类一区二区| 国产香蕉精品| 在线精品视频一区| 激情综合在线| 国产成人免费| 欧美日韩调教| 日韩精品免费一区二区在线观看| 国产精品白丝久久av网站| 亚洲免费毛片| 亚洲尤物在线| 婷婷综合社区| 久久要要av| 91精品一区二区三区综合| 精品国产三区在线| 国产精品xxx在线观看| 日本不卡视频在线| 亚洲欧洲另类| 亚洲网站视频| 久久九九精品| 日韩伦理在线一区| 亚州精品视频| 欧美日韩精品一区二区三区在线观看| 欧美日韩在线网站| 日韩理论片av| 国产精品原创| 在线中文字幕播放| 激情国产在线| 美女av在线免费看| 福利在线免费视频| 精品久久久亚洲| 国产一区日韩| 国产精品免费99久久久| 欧美精品国产一区| 国产精品密蕾丝视频下载| 国产精品久一| 精品国产亚洲一区二区三区在线 | 天堂av一区| 一级欧美视频| 蜜臀a∨国产成人精品| 亚洲黄色免费看| 欧美精品不卡| 精品一级视频| 国产一区二区三区国产精品| 你懂的亚洲视频| 久久影视三级福利片| 国产一区国产二区国产三区| 欧美成人精品午夜一区二区| 蜜桃久久久久| 欧美亚洲三级| 国产福利一区二区精品秒拍| 精品亚洲二区| 午夜影院一区| 91九色精品| 视频一区视频二区中文| 综合激情视频| 日韩成人午夜精品| 精品视频亚洲| 99成人超碰| 日韩在线a电影| 国产欧美88| 麻豆网站免费在线观看| 久久国产中文字幕| 国产一区导航| 亚洲欧美日韩专区| 91国内精品| 久久久久观看| 亚洲色图综合| 欧美日韩网址| 久久国产精品美女| 色爱综合网欧美| 欧美日韩视频免费观看| 天堂а√在线最新版中文在线| 国产成人77亚洲精品www| 色综合www| 一区二区电影| 国产精品蜜月aⅴ在线| 国产丝袜一区| 亚洲黄色免费看| 女人av一区| 欧美日韩在线精品一区二区三区激情综合| 麻豆国产91在线播放| 99成人在线视频| 国产高清一区| 亚洲青青久久| 国产情侣一区在线| 欧美sm一区| 日韩精品视频中文字幕| 九九九精品视频| 久久www成人_看片免费不卡| 国产精品美女午夜爽爽| 欧美理论视频| 精品美女视频 | 日本精品另类| 国产麻豆久久| 国产欧美一区二区色老头| 韩国精品主播一区二区在线观看| 性一交一乱一区二区洋洋av| 国产精品视频一区二区三区四蜜臂| 久久久精品午夜少妇| 亚洲精品在线国产| 亚洲精品福利电影| 青草国产精品久久久久久| 四虎884aa成人精品最新| 久久午夜精品| 国产精品国产一区| 日韩av不卡在线观看| | 亚洲精品在线二区| 999国产精品永久免费视频app| 国产精品视频一区视频二区| 中文一区在线| 日韩精品首页| 精品一区二区三区亚洲| 日韩和欧美一区二区| 国精品一区二区| 国产成人77亚洲精品www| 欧美一区免费| 欧美91在线|欧美| 日本va欧美va瓶| 亚洲自啪免费| 婷婷激情综合| 成人在线网站| 中文在线资源| 成人午夜网址| 国产欧美一级| 婷婷精品在线| 一本一道久久a久久| 日韩深夜视频| sm捆绑调教国产免费网站在线观看| 亚洲精品美女| 99精品网站| 亚洲美女久久精品| 日本va欧美va欧美va精品| 久久国产精品99国产| 欧美午夜不卡| 最新亚洲一区| 亚洲精品电影| 伊人精品在线| 香蕉人人精品| 国产一区日韩欧美| 群体交乱之放荡娇妻一区二区| 久久亚洲精品中文字幕| 国产欧美日本|