日本不卡不码高清免费观看,久久国产精品久久w女人spa,黄色aa久久,三上悠亚国产精品一区二区三区

您的位置:首頁技術文章
文章詳情頁

淺談Python xlwings 讀取Excel文件的正確姿勢

瀏覽:59日期:2022-06-27 09:44:56

使用Python加載最新的Excel讀取類庫xlwings可以說是Excel數據處理的利器,但使用起來還是有一些注意事項,否則高大上的Python會跑的比老舊的VBA還要慢。

這里我們對比一下,用幾種不同的方法,從一個Excel表格中讀取一萬行數據,然后計算結果,看看他們的耗時。

1. 處理要求:

一個Excel表格中包含了3萬條記錄,其中B,C兩個列記錄了某些計算值,讀取前一萬行記錄,將這兩個列的差值進行計算,然后匯總得出差的和。

文件是這個樣子:Book300s.xlsx 。

淺談Python xlwings 讀取Excel文件的正確姿勢

2. 處理方式有以下3種,我們對比一下耗時的大小。

處理方式 代碼名稱 1. 使用Python的xlwings類庫,讀取Excel文件,然后采用Excel的Sheet和Range的引用方式讀取并計算 XLS_READ_SHEET.py 2. 直接使用Excel自帶的VBA語言進行計算 VBA

3. 使用Python的xlwings類庫,讀取Excel文件,然后采用Python的自帶數據類型List列表進行數據存儲和計算

XLS_READ_LIST.py

3. 首先測試第一種,XLS_READ_SHEET.py

使用Python的xlwings類庫,讀取Excel文件,然后引用Excel的Sheet和Range的方式來讀取并計算

#coding=utf-8import xlwings as xwimport pandas as pdimport timestart_row = 2 # 處理Excel文件開始行end_row = 10002 # 處理Excel結束行#記錄打開表單開始時間start_open_time = time.time()#指定不顯示地打開Excel,讀取Excel文件app = xw.App(visible=False, add_book=False)wb = app.books.open(’D:/PYTHON/TEST_CODE/Book300s.xlsx’) # 打開Excel文件sheet = wb.sheets[0] # 選擇第0個表單#記錄打開Excel表單結束時間end_open_time = time.time()#記錄開始循環計算時間start_run = time.time()row_content = []#讀取Excel表單前10000行的數據,Python的in range是左閉右開的,到10002結束,但區間只包含2到10001這一萬條for row in range(start_row, end_row): row_str = str(row) #循環中引用Excel的sheet和range的對象,讀取B列和C列的每一行的值,對比計算 start_value = sheet.range(’B’ + row_str).value end_value = sheet.range(’C’ + row_str).value if start_value <= end_value: values = end_value - start_value #同時測試List數組添加記錄 row_content.append(values)#計算和total_values = sum(row_content)#記錄結束循環計算時間end_run = time.time()sheet.range(’E2’).value = str(total_values)sheet.range(’E3’).value = ’使用Sheet計算時間(秒):’ + str(end_run - start_run)#保存并關閉Excel文件wb.save()wb.close()print (’結果總和:’, total_values)print (’打開并讀取Excel表單時間(秒):’, end_open_time - start_open_time)print (’計算時間(秒):’, end_run - start_run)print (’處理數據條數:’ , len(row_content))

用Python直接訪問Sheet和Range取值的計算結果如下:

讀取Excel文件用時 4.47秒

處理Excel 10000 行數據花費了117秒的時間。

淺談Python xlwings 讀取Excel文件的正確姿勢

4. 然后我們用Excel自帶的VBA語言來處理一下相同的計算。也是直接引用Sheet,Range等Excel對象,但VBA的數組功能實在是不好用,就不測試添加數組了。

Option ExplicitSub VBA_CAL_Click() Dim i_count As Long Dim offset_value, total_offset_value As Double Dim st, et As Date st = Time() i_count = Sheets('Sheet1').Cells(Rows.Count, 1).End(xlUp).Row i_count = 10001 For i_count = 2 To i_count If Range('C' & i_count).Value > Range('B' & i_count).Value Then offset_value = Range('C' & i_count).Value - Range('B' & i_count).Value total_offset_value = total_offset_value + offset_value End If Next i_count et = Time() Range('E2').Value = total_offset_value Range('E3').Value = et - st MsgBox 'Result: ' & total_offset_value & Chr(10) & 'Running time: ' & et - stEnd Sub

VBA處理計算結果如下:

保存了3萬條數據的Excel文件是通過手工打開的,在電腦上大概花費了8.2秒的時間

處理Excel 前10000行數據花費了1.16秒的時間。

淺談Python xlwings 讀取Excel文件的正確姿勢

5.使用Python的xlwings類庫,讀取Excel文件,然后采用Python的自帶數據類型List進行數據存儲和計算,計算完成后再將結果寫到Excel表格中

#coding=utf-8import xlwings as xwimport pandas as pdimport time#記錄打開表單開始時間start_open_time = time.time()#指定不顯示地打開Excel,讀取Excel文件app = xw.App(visible=False, add_book=False)wb = app.books.open(’D:/PYTHON/TEST_CODE/Book300s.xlsx’) # 打開Excel文件sheet = wb.sheets[0] # 選擇第0個表單#記錄打開Excel表單結束時間end_open_time = time.time()#記錄開始循環計算時間start_run = time.time()row_content = []#讀取Excel表單前10000行的數據,并計算B列和C列的差值之和list_value = sheet.range(’A2:D10001’).valuefor i in range(len(list_value)): #使用Python的類庫直接訪問Excel的表單是很緩慢的,不要在Python的循環中引用sheet等Excel表單的單元格, #而是要用List一次性讀取Excel里的數據,在List內存中計算好了,然后返回結果 start_value = list_value[i][1] end_value = list_value[i][2] if start_value <= end_value: values = end_value- start_value #同時測試List數組添加記錄 row_content.append(values)#計算和total_values = sum(row_content)#記錄結束循環計算時間end_run = time.time()sheet.range(’E2’).value = str(total_values)sheet.range(’E3’).value = ’使用List 計算時間(秒):’ + str(end_run - start_run)#保存并關閉Excel文件wb.save()wb.close()print (’結果總和:’, total_values)print (’打開并讀取Excel表單時間(秒):’, end_open_time - start_open_time)print (’計算時間(秒):’, end_run - start_run)print (’處理數據條數:’ , len(row_content))

用Python的LIST在內存中計算結果如下:

讀取Excel文件用時 4.02秒

處理Excel 10000 行數據花費了 0.10 秒的時間。

淺談Python xlwings 讀取Excel文件的正確姿勢

6 結論:

Python操作Excel的類庫有以往有 xlrd、xlwt、openpyxl、pyxll等,這些類庫有的只支持讀取,有的只支持寫入,并且有的不支持Excel的xlsx格式等。

所以我們采用了最新的開源免費的xlwings類庫,xlwings能夠很方便的讀寫Excel文件中的數據,并支持Excel的單元格格式修改,也可以與pandas等類庫集成使用。

VBA是微軟Excel的原生二次開發語言,是辦公和數據統計的利器,在金融,統計,管理,計算中應用非常廣泛,但是VBA計算能力較差,支持的數據結構少,編輯器粗糙。

雖然VBA有很多不足,但是VBA的宿主Office Excel卻是天才程序員基于C++開發的作品,穩定,高效,易用 。

有微軟加持,VBA雖然數據結構少,運行速度慢,但訪問自己Excel的Sheet,Range,Cell等對象卻速度飛快,這就是一體化產品的優勢。

VBA讀取Excel的Range,Cell等操作是通過底層的API直接讀取數據的,而不是通過微軟統一的外部開發接口。所以Python的各種開源和商用的Excel處理類庫如果和VBA來比較讀寫Excel格子里面的數據,都是處于劣勢的(至少是不占優勢的),例子2的VBA 花費了1.16秒就能處理完一萬條數據。

Python基于開源,語法優美而健壯,支持面向對象開發,最重要的是,Python有豐富而功能強大的類庫,支持多種工作場景的開發。

我們應該認識到,Excel對于Python而言,只是數據源文件的一種,當處理大量數據時,Python處理Excel就要把Excel當數據源來處理,一次性地讀取數據到Python的數據結構中,而不是大量調用Excel里的對象,不要說頻繁地寫入Excel,就是頻繁地讀取Excel里面的某些單元格也是效率較低的。例子1的Python頻繁讀取Sheet,Range數據,結果花費了117秒才處理完一萬條數據。

Python的計算效率和數據結構的操作方便性可比VBA強上太多,和VBA聯合起來使用,各取所長是個好主意。

當Excel數據一次性讀入Python的內存List數據結構中,然后基于自身的List數據結構在內存中計算,例子3的Python只用了 0.1秒就完成了一萬條數據的計算并將結果寫回Excel。

總結:

處理方式-計算Excel里的一萬條記錄的差值的總和 效率 1. 使用Python的xlwings類庫,采用Excel的Sheet和Range的引用方式,按行讀取Excel文件的記錄并計算 差,計算用時 117秒 2. 直接使用Excel自帶的VBA語言進行計算,也是采用Excel的Sheet和Range的引用方式,按行讀取Excel文件的記錄并計算 很高 ,計算用時 1.16秒

3. 使用Python的xlwings類庫,一次性讀取Excel文件中的數據到Python的List數據結構中,然后在Python的List列表中進行數據存儲和計算

最高,計算用時 0.1秒

到此這篇關于淺談Python xlwings 讀取Excel文件的正確姿勢的文章就介紹到這了,更多相關Python xlwings 讀取Excel內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網!

標簽: python
相關文章:
日本不卡不码高清免费观看,久久国产精品久久w女人spa,黄色aa久久,三上悠亚国产精品一区二区三区
成人久久一区| 国产精品成人一区二区不卡| 日本a口亚洲| 99精品综合| 91亚洲国产| 激情综合五月| 久久精品人人| 国产精品视频一区二区三区| 国产日韩一区二区三免费高清| 亚洲精品三级| 亚洲精品高潮| 欧美综合社区国产| 奇米色欧美一区二区三区| 日韩国产一二三区| 国产精品最新| 老司机免费视频一区二区| 欧美aaaaaa午夜精品| 国产情侣久久| 欧美黑人巨大videos精品| 亚洲精品少妇| 精品午夜视频| 日本久久成人网| 99成人在线| 蜜桃91丨九色丨蝌蚪91桃色| 日韩精品亚洲一区二区三区免费| 国产精品香蕉| 欧美日韩精品免费观看视完整| 激情欧美亚洲| 日韩综合一区二区| 久久字幕精品一区| 99成人在线视频| 日本在线成人| 黑人精品一区| 国产视频一区三区| 国产999精品在线观看| 日韩视频不卡| 精品亚洲成人| 天海翼亚洲一区二区三区| 欧美aa在线视频| 午夜欧美理论片| 精品深夜福利视频| 亚洲在线久久| 国产在线成人| 国产精品一区免费在线| 亚洲第一精品影视| 国产亚洲字幕| 亚洲国产不卡| 老牛影视精品| 综合激情在线| 国产在线观看www| 首页欧美精品中文字幕| 国产一区二区三区不卡视频网站| 免费在线观看不卡| 国产精品久久| 亚洲久久在线| 日韩在线二区| 国产精品一页| 亚洲人成毛片在线播放女女| 都市激情国产精品| 日韩在线观看一区二区三区| 久久网站免费观看| 国产激情在线播放| 国产精品亚洲综合在线观看| 日韩国产网站| 精品久久亚洲| 欧美日韩1区| 国产亚洲毛片在线| 影音国产精品| 红桃视频欧美| 亚洲精品1区2区| 久久国产精品毛片| 免费人成黄页网站在线一区二区 | 亚洲a级精品| 婷婷精品在线| 91麻豆精品| 国产精品久久久网站| 亚洲毛片视频| 色8久久久久| 亚洲精品九九| 91精品国产自产精品男人的天堂 | 九九99久久精品在免费线bt| 国产精品第十页| 国产精品日韩久久久| 国产中文一区| 美女精品一区| 日韩精品欧美大片| 欧美日韩国产高清电影| 亚洲欧美专区| 蜜臀va亚洲va欧美va天堂 | 国产一区清纯| 国产精品呻吟| 五月天av在线| 亚洲视频www| 亚欧成人精品| 日韩av中文在线观看| 亚洲一区二区三区四区电影| 免费日韩一区二区| 青草国产精品| 亚洲啊v在线| 不卡av一区二区| 亚洲男人在线| 欧美成人精品一级| 91精品韩国| 欧美一区二区三区免费看| 日韩欧美一区二区三区在线观看| 国产精品社区| 精品日韩一区| 日本中文字幕一区二区| 欧美三级精品| 欧美视频久久| 黄色成人91| 福利一区二区三区视频在线观看| 亚洲电影在线一区二区三区| 国产日韩三级| 日韩一级不卡| 成人亚洲精品| 久久不射网站| 在线亚洲人成| 欧美日韩18| 综合一区二区三区| 国产综合色产| 久久免费精品| 91精品国产经典在线观看| 成人看片网站| 精品国产一区二区三区2021| 亚洲影院天堂中文av色| 99精品综合| 国产精品成人a在线观看| 日本少妇精品亚洲第一区| 亚洲精品少妇| 亚洲三级av| 九九久久婷婷| 欧洲一级精品| 日韩免费小视频| 国产精品分类| 麻豆国产欧美一区二区三区| 久久精品999| 日韩二区在线观看| 亚洲精品伊人| 亚洲人www| 欧美亚洲综合视频| 日本va欧美va精品发布| 日韩综合小视频| 日韩精品成人在线观看| 日韩精品免费一区二区夜夜嗨| 日韩欧美2区| 蜜桃视频一区二区三区在线观看| 亚洲一级网站| 国产综合亚洲精品一区二| 亚洲香蕉网站| 久久国产99| 日韩av成人高清| 国产精品毛片久久久| 日本色综合中文字幕| 国产精品一区二区中文字幕| 狂野欧美性猛交xxxx| 日韩欧美在线中字| 99香蕉国产精品偷在线观看| 免费成人在线观看| 婷婷成人av| 中文在线а√在线8| 在线日韩一区| 色综合www| 视频一区视频二区中文| 亚洲影视一区二区三区| 精品日产乱码久久久久久仙踪林| 成人久久一区| 日韩精品国产精品| 国产亚洲一区二区手机在线观看 | 一区二区三区国产在线| 国产精品欧美日韩一区| 国产欧美高清| 欧美gv在线| 日本va欧美va瓶| re久久精品视频| 日韩av资源网| 蜜桃tv一区二区三区| 国产精品色婷婷在线观看| 精品成人免费一区二区在线播放| 免费看日韩精品| 欧洲av不卡| 日韩毛片网站| 婷婷综合在线| 极品av在线| 国产剧情一区二区在线观看| 欧美精品一二| 亚洲天堂av影院| 国产欧美一区二区三区精品观看| 欧美不卡视频| 狠狠久久伊人中文字幕| 久久国产中文字幕| 久久69成人| 国产欧美日韩在线一区二区 | 免费久久99精品国产自在现线| 免费一区二区三区在线视频| 在线亚洲自拍| 国产理论在线| 精品高清久久| 欧美激情精品| 久久精品xxxxx|