[分享文]用EXCEL VBA網路爬蟲擷取YAHOO股市資料

因應疫情，剛好可以好好學習網路爬蟲，
最簡單的還是用EXCEL裡的VBA來抓資料，
這個範例適用IE物件來抓取，
程式可以用本來改一改就好，細節不要出錯，
很快資料就全部下來了，如下。
用EXCEL錄製巨集爬取YAHOO股市資料，
會有亂碼的問題，用PYTHON來爬取，
對一般人來說門檻又太高，
如果如何在EXCEL VBA就可以輕鬆爬取網路資料，
就是本文所要分享的重點。
當然本文不是要推崇VBA有多棒，Python不好用，
我的想法是只要用對工具，工作可以很愜意，
可以協同應用工具，讓彼此都能發揮最大的強項，
是本文寫說明的，
另外順便分享在EXCEL除了用匯入資料從WEB功能外，
也可以用IE物件，
功能很像是Python的requests加上beautifulsoup4差不多功能，
不同的是，可以將下載的資料直接放在EXCEL，
也就是把EXCEL當成資料庫用，這樣可以減少很多資料庫匯入匯出的麻煩。

完整教學與影片連結：
https://terry55wu.blogspot.com/2021/05/excel-vbayahoo.html

吳老師 2021/5/22

今日內容摘要

✅ 開源的行銷自動化工具
✅ 開源的團隊聊天伺服器
✅ 一個 JavaScript/HTML5資料網格，具有試算表的外觀。支援 React、 Vue 和 Angular
✅ 實現了一個 HTTP Live Streaming 客戶端 Javascript 程式庫
✅ 使用 Vanilla javascript 開發的幻燈片
✅ 超強的 Laravel Excel 套件 – 匯入和匯出
✅ 一個 Laravel 套件幫助你瘋狂地生成幾乎完整的 CRUD 頁面
✅ 一個用 Python 和 Flask 編寫的微部落格網頁應用程式
✅ 一套以人工智慧為中心的 JupyterLab Notebooks 擴充套件
✅ 在 PyTorch 中快速、模組化地實現實例分割和目標檢測分割演算法
✅ 一個可以將你的機器學習模型大規模地部署到 Kubernetes 上的開源平台
✅ 客製化 kubernetes 多用途的 YAML 配置管理
✅ Elasticsearch & Logstash 的輕量級傳輸器
✅ 仿製一個 SnapChat
✅ 用於與 OAuth 2.0和 OpenID Connect 提供者通訊的 Android 客戶端 SDK
✅ 使用 .Net Core 3.1 ，C# 8 和 React + Redux 等技術的乾淨架構範例

https://softnshare.com/opensource-news-170/

用EXCEL VBA快速將大量的EXCEL檔轉為PDF檔

完整連結：
https://terry55wu.blogspot.com/2019/11/excel-vbaexcelpdf.html

這是EXCEL VBA進階課程的單元七的大量工作表的分割時講到，剛好有學員問道如果想把大量的工作表，直接分割為PDF檔，該怎麼做？其實只要一個For迴圈配合ExportAsFixedFormat方法，就可以快速的將大量的工作表輸出為一個一個的PDF檔，省去人工所要花費的時間，如果你每天都需要將工作表轉為PDF，這個分享，應該可以幫到您很多的忙，節省大量時間。

其他可參考
如何用EXCEL VBA批次轉PDF檔 [連結
[問題詢問]如何修改VBA讓EXCEL自動轉存成PDF時不會出現副檔名 [連結
先學會如何用EXCEL VBA批次另存成2003與CSV等格式 [連結
與如何用EXCEL VBA自動批次匯入圖片與超連結 [連結
與如何增加EXCEL VBA按鈕 [連結
大數時代來臨如果不懂得裡用自動化方式處理資料，
處理資料將非常沒有效率，至於處理大數據的方案很多，
但最通行也沒有額外費用的大概只剩VBA了。
而且開啟EXCEL就包含VBA，除了在Windows外，
MAC蘋果電腦一樣也有EXCEL，VBA也可以沿用以前VB的資源。

教學影音完整版在論壇：
https://groups.google.com/forum/#!forum/scu_excel_vba2_86

EXCEL VBA進階班的課程規劃
主要是延伸入門課，延伸資料庫、多工作表、工作簿、網路爬蟲、視覺化報表等應用並與Python程式協同應用

單元01_資料拆解相關(VBA)
單元02_輸入自動化與表單設計
單元03_用ADO匯入與匯出資料庫
單元04_大量工作表合併與分割
單元05_資料查詢(篩選與分割工作表)
單元06_下載網路資料(YAHOO股市)
單元07_活頁簿與檔案處理(工作表分割與合併活頁簿)
單元08_視覺化報表與快速匯入圖片

吳老師 2019/11/22

VBA到Python程式2019開發2班第14次整理證照303題果菜批發市場&DataFrame&305登革熱病例統計先用樞紐分析表統計&用樞紐分析表統計&TQC+Python網頁資料擷取與分析證照說明)

01_證照303題果菜批發市場
02_303題果菜批發市場產生DataFrame
03_303題果菜批發市場產生DataFrame與排序
04_303題取得台北一所有資料4
05_303題修改DataFrame與匯出EXCEL檔
06_305 登革熱病例統計
07_用樞紐分析表統計登革熱病例
08_用樞紐分析表統計各區
09_用樞紐分析表統計最近發病日
10_用樞紐分析表統計試作
11_用Python產生居住縣市結果
12_用Python產生感染國家結果
13_增加發病月欄位
14_TQC+Python網頁資料擷取與分析證照說明

完整影音
http://goo.gl/aQTMFS

教學論壇(之後課程會放論壇上課學員請自行加入)：
https://groups.google.com/forum/#!forum/tcfst_python_2019_2

懶人包：
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524

[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類：
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類：
進階控制流程與函式(Function) 9

[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰：處理 CSV 檔和 JSON 資料 3
10 實戰：PM2.5即時監測顯示器轉存資料庫 3
11 實戰：下載台銀外匯、下載YAHOO股市類股 3
12 實戰：下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類：資料處理能力 3
14 TQC+Python 3第2類：網頁資料擷取與轉換 6
15 TQC+Python 3第3類：資料分析能力 6
16 TQC+Python 3第4類：資料視覺化能力 6

上課用書：
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者： 鄧文淵/總監製, 文淵閣工作室/編著
出版社：碁峰? 出版日期：2016/11/29

吳老師 108/6/21

EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝環境,資料視覺化

VBA到Python程式2019開發2班第14次整理證照303題果菜批發市場&DataFrame&305登革熱病例統計先用樞紐分析表統計&用樞紐分析表統計&TQC+Python網頁資料擷取與分析證照說明)

01_證照303題果菜批發市場
02_303題果菜批發市場產生DataFrame
03_303題果菜批發市場產生DataFrame與排序
04_303題取得台北一所有資料4
05_303題修改DataFrame與匯出EXCEL檔
06_305 登革熱病例統計
07_用樞紐分析表統計登革熱病例
08_用樞紐分析表統計各區
09_用樞紐分析表統計最近發病日
10_用樞紐分析表統計試作
11_用Python產生居住縣市結果
12_用Python產生感染國家結果
13_增加發病月欄位
14_TQC+Python網頁資料擷取與分析證照說明

完整影音
http://goo.gl/aQTMFS

教學論壇(之後課程會放論壇上課學員請自行加入)：
https://groups.google.com/forum/#!forum/tcfst_python_2019_2

懶人包：
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524

[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類：
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類：
進階控制流程與函式(Function) 9

[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰：處理 CSV 檔和 JSON 資料 3
10 實戰：PM2.5即時監測顯示器轉存資料庫 3
11 實戰：下載台銀外匯、下載YAHOO股市類股 3
12 實戰：下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類：資料處理能力 3
14 TQC+Python 3第2類：網頁資料擷取與轉換 6
15 TQC+Python 3第3類：資料分析能力 6
16 TQC+Python 3第4類：資料視覺化能力 6

上課用書：
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者： 鄧文淵/總監製, 文淵閣工作室/編著
出版社：碁峰? 出版日期：2016/11/29

吳老師 108/6/21

EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝環境,資料視覺化

VBA到Python程式2019開發2班第14次整理證照303題果菜批發市場&DataFrame&305登革熱病例統計先用樞紐分析表統計&用樞紐分析表統計&TQC+Python網頁資料擷取與分析證照說明)

01_證照303題果菜批發市場
02_303題果菜批發市場產生DataFrame
03_303題果菜批發市場產生DataFrame與排序
04_303題取得台北一所有資料4
05_303題修改DataFrame與匯出EXCEL檔
06_305 登革熱病例統計
07_用樞紐分析表統計登革熱病例
08_用樞紐分析表統計各區
09_用樞紐分析表統計最近發病日
10_用樞紐分析表統計試作
11_用Python產生居住縣市結果
12_用Python產生感染國家結果
13_增加發病月欄位
14_TQC+Python網頁資料擷取與分析證照說明

完整影音
http://goo.gl/aQTMFS

教學論壇(之後課程會放論壇上課學員請自行加入)：
https://groups.google.com/forum/#!forum/tcfst_python_2019_2

懶人包：
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524

[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類：
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類：
進階控制流程與函式(Function) 9

[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰：處理 CSV 檔和 JSON 資料 3
10 實戰：PM2.5即時監測顯示器轉存資料庫 3
11 實戰：下載台銀外匯、下載YAHOO股市類股 3
12 實戰：下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類：資料處理能力 3
14 TQC+Python 3第2類：網頁資料擷取與轉換 6
15 TQC+Python 3第3類：資料分析能力 6
16 TQC+Python 3第4類：資料視覺化能力 6

上課用書：
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者： 鄧文淵/總監製, 文淵閣工作室/編著
出版社：碁峰? 出版日期：2016/11/29

吳老師 108/6/21

EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝環境,資料視覺化