返回列表 上一主題 發帖

想要優化網路爬取選股網站資料

vuptp6

帖子
16 
主題
3 
精華
0 
積分
65 
點名
0  
作業系統
windows7 
軟體版本
office2010 
閱讀權限
20 
註冊時間
2019-2-19 
最後登錄
2025-5-12 
1# 跳轉到 » 倒序看帖
打印
tT
發表於 2021-7-14 15:09 | 顯示全部帖子

想要優化網路爬取選股網站資料

一直都是用 Excel 內建的 Web 連線功能抓取網站的數據資料
把要的個股如2330
從2021年1月1日到2021年7月13日的法人買賣超
更改券商的網頁
https://fubon-ebrokerdj.fbs.com.tw/z/zc/zcl/zcl.djhtm?a=2330&c=2021-1-1&d=2021-7-13
就能抓到2330這個區間的資料
可是爬出來的資料還很多是我不想要的文字及欄位
都要再經過程式搜尋或著對該爬下來的欄或列直接刪除
才會剩下我想要的資料

該網頁我純粹只要
"日期"
"外資的買賣超"
"投信的買賣超"
"外資的估計持股"
"投信的估計持股"

是否有可能直接就抓取這些欄位就好?

看了該網頁的原始碼
view-source:https://fubon-ebrokerdj.fbs.com.tw/z/zc/zcl/zcl.djhtm?a=2330&c=2021-1-1&d=2021-7-13
在188行開始有看到我想要的資料
有辦法直接從這開始抓取嗎??
收藏 分享

vuptp6

帖子
16 
主題
3 
精華
0 
積分
65 
點名
0  
作業系統
windows7 
軟體版本
office2010 
閱讀權限
20 
註冊時間
2019-2-19 
最後登錄
2025-5-12 
2#
發表於 2021-7-15 15:20 | 顯示全部帖子
回復 2# singo1232001
回復 3# quickfixer


謝謝singo1232001及quickfixer兩位的幫助
因為本人技術不夠能力也不足實在看不懂兩位前輩寫的內容(難過)
說實在的其實每一行都看不懂
quickfixer您可以跟我說明網址怎麼由
https://fubon-ebrokerdj.fbs.com.tw/z/zc/zcl/zcl.djhtm?a=2330&c=2021-1-1&d=2021-7-13
變成
https://fubon-ebrokerdj.fbs.com.tw/Z/ZC/ZCL/CZCL3.DJBCD?A=2330&B=Y

我是不是要放棄網路爬資料
資料庫及網頁的知識我完全沒有

TOP

vuptp6

帖子
16 
主題
3 
精華
0 
積分
65 
點名
0  
作業系統
windows7 
軟體版本
office2010 
閱讀權限
20 
註冊時間
2019-2-19 
最後登錄
2025-5-12 
3#
發表於 2021-7-16 09:39 | 顯示全部帖子
回復 5# quickfixer

謝謝你
vba我只會基本的儲存格的控制複製等等
從網頁、網路抓取完全一竅不通甚麼js,xhmal等等的
之前都是用錄製
可是抓取下來的效率不太好

另外提問
https://fubon-ebrokerdj.fbs.com.tw/Z/ZC/ZCL/CZCL3.DJBCD?A=2330&B=Y
這個網址從該券商的伺服器抓出來的資料
我怎麼改日期區間都是從110/01/13開始
例如
https://fubon-ebrokerdj.fbs.com.tw/z/zc/zcl/zcl.djhtm?a=2330&c=2019-1-1&d=2019-12-31
他一樣是給這個網址
https://fubon-ebrokerdj.fbs.com.tw/Z/ZC/ZCL/CZCL3.DJBCD?A=2330&B=Y
資料並非從2019年(108)開始

若是這個網頁
https://stock.wearn.com/cdata.asp?Year=110&month=07&kind=2330
似乎不能套用該方法
能否指導其他方式擷取

TOP

vuptp6

帖子
16 
主題
3 
精華
0 
積分
65 
點名
0  
作業系統
windows7 
軟體版本
office2010 
閱讀權限
20 
註冊時間
2019-2-19 
最後登錄
2025-5-12 
4#
發表於 2021-7-20 10:45 | 顯示全部帖子
回復 8# quickfixer


謝謝
看樣子還有很多要學習的
我再研究看看

TOP

        靜思自在 : 唯其尊重自己的人，才更勇於縮小自己。
返回列表 上一主題