ftp下載每日rpt檔(期貨及選擇權)2011.1.1起

小娃 · 發表於 11-5-14 09:53

小娃把Linux自動抓rpt檔的shell script和ftp設定好了，
建議大家近30日的資料還是上期交所抓，過期的資料再來ftp抓，
這樣子COCO的流量才能更有效率的使用。

ftp連進去有2個folder, future_rpt是期貨的rpt檔。
op_rpt是選擇權的rpt檔。本ftp只能下載不能上傳，檔案從2011.1.1起

2016.09.27 更新感謝醉在咖啡香大大幫忙修改script，可避免抓檔錯誤的問題
http://www.coco-in.net/forum.php ... id=712582&fromuid=3
抓rpt的shell script如下

get_rpt.rar (875 Bytes, 下載次數: 182)

2016.3.3 更新。
由於期交所路徑改變。所以抓rpt檔的shell script也改變。

2016.2.23更新
請使用WinSCP下載rpt的資料，不可用Filezilla。否則會被防火牆擋下。
WinSCP下載網址
https://winscp.net/eng/download.php

自動排程工作的crontab檔案(新增最後2行)

SHELL=/bin/bash
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root
HOME=/
# run-parts
01 * * * * root run-parts /etc/cron.hourly
02 4 * * * root run-parts /etc/cron.daily
22 4 * * 0 root run-parts /etc/cron.weekly
42 4 1 * * root run-parts /etc/cron.monthly
#wawa88123
00 3 * * * root /root/local/bakdzmysql.sh
#everyday am 3:00 backup
#everyday get rpt
00 18 * * * root /root/local/download_rpt_future.sh
05 18 * * * root /root/local/download_rpt_op.sh

複製代碼

我設定每天晚上6:00抓檔，不過說不定會有剛好server連不上的時候，
這個我就不敢保證了。

最後...需要ftp站帳號的人請花錢買文...

購買主題 已有 865 人購買 本主題需向作者支付 3 金錢 才能瀏覽

futurebox · 發表於 17-1-2 21:20

今天整理資料時才發現
選擇權檔案解zip有問題
2016/7/13
2016/7/14
2016/7/15
2016/8/3
不知有人是否有備份資料
感謝

Jeff · 發表於 19-8-20 10:36

感謝分享! 請問FTPˊ中資料內容只到2019/6/28,之後還會補上傳嗎?
謝謝

醉在咖啡香 · 發表於 18-9-25 03:30

前幾天突然發現 ...
期交所準備改新版頁面
到 2018-10-01 終止舊版

附件中兩個檔案 (get_taifex_file.sh + taifex_function.sh) 要放在一起
cron 中執行 get_taifex_file.sh 即可

我已將可變參數都放在 get_taifex_file.sh 中 , 並寫上註解
您可編輯此檔 , 啟用想抓的檔案

您 ftp 中 , 所有檔案放同一資料夾
進入資料夾瀏覽將 list 上千條 ... 影響速度
所以也設計了是否按照年份分放資料夾
若不願您可設定 no , 若願意 .. 舊檔還得勞您手動搬

"儲存主目錄" 與 "log 目錄" 變更到 /tmp/xxx 可方便您測試

最後與此程式無關 ...
備份至 google 網盤 , 您可搜尋 gdrive 此程式
gdrive sync upload --keep-remote "/home/cocoin" "google上資料夾ID"
放入 cron 即可同步

BVL · 發表於 17-7-9 20:27

如 futurebox 所說的一樣  我也解不開
2016/7/13
2016/7/14
2016/7/15
2016/8/3
四天的檔案  後來在 lwhuang 的分享當中找到了四個檔案
我抓下來後  放在我的dropbox 上給大家參考(好像權限不夠不能上傳檔案)

goo.gl/fia4jL  20160713
goo.gl/z2dhFB  20160714
goo.gl/5W9ynJ  20160715
goo.gl/Acr2yA 20160803

hihihlo · 發表於 17-9-26 23:20

感謝分享, 大大真是幫了大忙

ironheart · 發表於 11-5-14 12:22

謝謝娃大分享

冷氣工人 · 發表於 11-5-14 14:47

站長您好丫~新生編號999999報到

jinace · 發表於 11-5-14 16:30

小弟剛好用得上!謝謝站長了~

yuchih1111 · 發表於 11-5-14 21:21

我也正好需要!萬分感激!

docchantw · 發表於 11-5-15 09:00

站長真的是造福大家了,感謝!

sqs · 發表於 11-5-14 14:28

謝謝您的分享喔,以後就不怕漏了!

Branson · 發表於 11-5-16 23:39

回復 1# 小娃

超感謝小娃站長的貢獻! 有甚麼需要幫忙的請別客氣! 我也會盡力幫忙 :)

Dogfaceman · 發表於 11-5-17 11:45

雖然沒在用
但是這功能太棒了
感謝站長的付出

kenngy812566 · 發表於 11-5-19 17:46

好讚喔!!!一定要推一個啦!!!!!感謝站長分享!!!!!

MorganLiu · 發表於 11-5-30 09:24

謝謝分享...正好需要這個資料

ppp0417p · 發表於 11-5-30 10:21

需要這個資料
感謝站長

chyu1019 · 發表於 11-6-4 22:40

謝謝資料分享....整理資料中....^^

風火林山 · 發表於 11-6-5 16:57

謝謝站長

tamago797 · 發表於 11-6-6 09:37

雖然還沒有用上, 但還是進來按個讚

		自動登錄	找回密碼
密碼			註冊

小娃小娃當前離線積分 1972	發表於 11-5-14 09:53 \| 顯示全部樓層 \|閱讀模式小娃把Linux自動抓rpt檔的shell script和ftp設定好了，建議大家近30日的資料還是上期交所抓，過期的資料再來ftp抓，這樣子COCO的流量才能更有效率的使用。 ftp連進去有2個folder, future_rpt是期貨的rpt檔。 op_rpt是選擇權的rpt檔。本ftp只能下載不能上傳，檔案從2011.1.1起 2016.09.27 更新感謝醉在咖啡香大大幫忙修改script，可避免抓檔錯誤的問題 http://www.coco-in.net/forum.php ... id=712582&fromuid=3 抓rpt的shell script如下 get_rpt.rar (875 Bytes, 下載次數: 182) 16-9-27 16:55 上傳點擊文件名下載附件 2016.3.3 更新。由於期交所路徑改變。所以抓rpt檔的shell script也改變。 2016.2.23更新請使用WinSCP下載rpt的資料，不可用Filezilla。否則會被防火牆擋下。 WinSCP下載網址 https://winscp.net/eng/download.php 自動排程工作的crontab檔案(新增最後2行) SHELL=/bin/bash PATH=/sbin:/bin:/usr/sbin:/usr/bin MAILTO=root HOME=/ # run-parts 01 * * * * root run-parts /etc/cron.hourly 02 4 * * * root run-parts /etc/cron.daily 22 4 * * 0 root run-parts /etc/cron.weekly 42 4 1 * * root run-parts /etc/cron.monthly #wawa88123 00 3 * * * root /root/local/bakdzmysql.sh #everyday am 3:00 backup #everyday get rpt 00 18 * * * root /root/local/download_rpt_future.sh 05 18 * * * root /root/local/download_rpt_op.sh 複製代碼我設定每天晚上6:00抓檔，不過說不定會有剛好server連不上的時候，這個我就不敢保證了。最後...需要ftp站帳號的人請花錢買文... 購買主題已有 865 人購買本主題需向作者支付 3 金錢才能瀏覽
小娃小娃當前離線積分 1972	相關帖子 • ftp下載每日rpt檔(期貨及選擇權)2011.3.17起 • 火狐萃簿V1.0 • 摸摸茶的創業機會
	回復使用道具舉報提升卡置頂卡沉默卡變色卡千斤頂顯身卡

ftp下載每日rpt檔(期貨及選擇權)2011.1.1起

相關帖子

評分