Palm 火車時刻表 2 資料庫轉檔程式發表

tsyang

主程式請至 http://joey.gotdns.com/sch/phpBB2/viewtopic.php?t=299 抓取TrainTime2_5719_5819.zip
(目前似乎已連不上，請至 這裡 抓主程式)

資料來源是台鐵網頁 http://new.twtraffic.com.tw/twrail/schedule.aspx
轉換方式主要是參考 xbug 前輩釋出的原始碼 http://joey.gotdns.com/sch/phpBB2/viewtopic.php?t=300
並參照台鐵現有網頁內容加以修改。
大概試了一下幾條常用的站，跨縣市大致 OK，有時還可以查出台鐵網頁查不到的班次 (非對號).. ^^;

還請大家幫忙測試
Thanks.

---

update:

20060816: 用第一版轉檔程式做出來的，無法正確處理西部某些電車較複雜的時間

20060822: 修正前一版的 bug，建資料檔時改以發車時間做排序，缺點是經過且不停靠的站不會顯示

20061010: 原始碼釋出，含 2006/10/10 資料檔

ps: 因為perl2exe有版權的問題 (用p2x轉出來的 .exe 檔不能公開傳播)，
所以要用這支程式用起來會麻煩一些 (請見壓縮檔中的readme)

20070113:

1. 修正山海線判斷的寫法，更有彈性。
2. 選單中的"關於"下的"資料庫版本"改成 2.7113，表示pdb是2007/1/13產生的版本。

20070302:

1. 感謝PipperL發現程式中山海線誤判的bug，並找出修正的方法。
2.選單中的"關於"下的"資料庫版本"改成 2.7302，表示pdb是2007/3/2產生的版本。

20070627:

1. 資料來源：台鐵火車時刻查詢系統。原網頁上每站皆有到達及開車兩種時間，以開車時間為準。
2. 新增長興、南祥、寶山、桃中、嘉北、古莊、加祿、內獅、枋山等站
3. 加入高鐵時刻資料 (感謝 hsming13 的點子，偷來用 )
4.選單中的"關於"下的"資料庫版本"改成 2.7627，表示pdb是2007/6/27產生的版本。
5. 轉檔程式因為要從台鐵的網頁下載資料頁龐大 (~50MB )，暫不提供，還請見諒

20070729:

1. 選單中的"關於"下的"資料庫版本"改成 2.7729，表示pdb是2007/7/29產生的版本。
2. 更新高鐵時刻表
3. 台鐵時刻表更新，新增屏東枋野站
4. 整理火車時刻表轉換程式原始碼，改變下載資料量，希望可以在下次釋出。

20070918:

1. 選單中的"關於"下的"資料庫版本"改成 2.7917，表示pdb是2007/9/17產生的版本。
2. 更新高鐵時刻表
3. 台鐵時刻表更新，新增台東中央站
4. 釋出轉檔程式原始碼，執行run.bat即可。執行前請修改 traintime2db2.pl 的第 59, 82, 211, 687 行內的日期，有時候一行內會出現不只出現一個日期，格式也不一定相同，要記得都改到。這次下載的方式分兩階段，第一階段是先根據 table.txt 下載各站時刻表放入sta\，(table.txt藏在台鐵網頁中，不過現在找不到…Orz)；第二階段再過瀘第一階段中下載的時刻表，來下載所有的車次表放入html\。需要的資料量較大，請大家小心測試。

20071222:

更新台鐵、高鐵時刻表

20080102:

1. 更新台鐵、高鐵時刻表
2. 更新00readme.txt，內有更詳細的修改教學

20080217:

1. 更新台鐵、高鐵時刻表
2. 配合高鐵時刻表改版做對應的修改

20080228:

1. 更新台鐵、高鐵時刻表
2. 新增[更新通知]辦法，詳見附檔 [更新通知.txt]

20080322:

1. 更新台鐵、高鐵時刻表
2. 選舉日前後加開列車更新
3. 更新通知名單25人次

20080403:

1. 更新台鐵、高鐵時刻表
2. 清明節前後加開列車更新
3. 更新通知名單29人次

20080519:

1. 更新台鐵、高鐵時刻表
2. 因應台鐵新增環島列車，修改程式
3. 高鐵限制自動下載，改用手動下載
4. 更新通知名單49人次

20080525:

1. 更新台鐵、高鐵時刻表
2. 修改程式僅能抓到週間/週末車班的bug
3. 更新通知名單55人次

20080705:

1. 更新台鐵、高鐵時刻表
2. 配合台鐵網頁格式變更修改程式
3. 更新通知名單69人次

[ 本文最後由 tsyang 於 2008-7-5 19:05 編輯 ]

tsyang

原文章由 PipperL 於 2006-8-16 22:16 發表
哇! 想不到你還在努力.....

因為自己有需要，加上不小心發現 xbug已經放出原始碼了..
一時手癢就..

不過台鐵的網頁三天兩頭在更新，
可下載的資料(html,pdf,xls)又跟 http://new.twtraffic.com.tw/twrail/index.aspx 不盡相同
看來要搭火車的人要提前個十分鐘較為保險

只是這次的 html 格式不知道能撐多久不改..

tsyang

原文章由 loren 於 2006-8-17 20:54 發表
追註：測試過之前發生過問題的班次，看起來都是 OK 的，所以應該會發生問題的機會很小了。不過還是有可以改進的地方，主要是在中部地方，有山線、海線電車混合的怪問題。

舉例：2248 班次 17:44 ~ 20:14 后里到新竹這班電車，是后里經台中到彰化(山線)，接下來走海線(彰化、沙鹿、大甲、竹南，最後到新竹)。在顯示上，因為不是依照時間來排序，所以看起來很怪。另外從海線也是查不到這班車的(暈)，小弟自己俗稱這班是隱形電車。如果能將這部份改進的話當然更好^^a，不過現在這樣也就很好了啦。

抱歉，我不大了解您的意思
實際查了一下，這班列車並沒有到彰化？

因為不常坐分山、海線的路線
不是很了解它的分法，程式裡是這樣寫的..不知道對不對?
#  海   山
# [後龍 苗栗]
# [通霄 銅鑼]
# [苑裡 三義]
# [大甲 后里]
# [清水 豐原]
# [沙鹿 潭子]
# [大肚 台中]

如果把轉換程式釋出的話，就更加造福大眾了，再度感謝 tsyang 兄啦～拜一下m(_ _)m

呵，這是一定要的啦
只是現在還不大完整，後半部還是"改"出來的..
晚點吧~

tsyang

原文章由 loren 於 2006-8-18 08:26 發表

昨天講錯了....正常來講山線在【成功】之後應該是要逆向【往南】走向【彰化】，不過這班電車會順向【北上】經【追分】往【新竹】。一輛電車同時擁有【南下】跟【北上】兩種性質。

正常這種狀況只應該發生在東西幹線列車才會有這問題，除非把程式判斷改成利用時間排序，不然問題可能不好解決(暈倒)

辛苦啦，加油～小弟提的這個問題可以先不要管啦，先把大家通用的部份弄好比較重要，畢竟這種車並不多^^a。

原來還有這種列車，沒坐過就都不知道.. :p
找了一下原因後發現台鐵提供的 html 有錯，缺少正常行駛的路段，沒辦法正確轉出來
不過一旦知道有這種例外就可以處理掉
感謝

這個應該是對應而已，海線應該以竹南、彰化為分界如下：
竹南、談文、大山、後龍、龍港、白沙屯、新埔、通宵、苑裡、日南、大甲、台中港、清水、沙鹿、龍井、大肚、追分、彰化。
山線也是以竹南、彰化為分界如下：
竹南、造橋、豐富、苗栗、南勢、銅鑼、三義、泰安、后里、豐原、潭子、太原、台中、大慶、烏日、成功、彰化。

soga~
是我搞錯了
那個表是適用於對號列車上，同一行要放山線或海線的權宜辦法
一般非對號列車就不用這個表
總而言之，現階段轉檔方式不會轉錯山線、海線  

tsyang

下載更新檔請到這個討論串的第一篇。

這版改成依時間排序，也可以解掉火車時間遞增或遞減的問題
把經過但不停靠的站砍掉了 (因為用時間排序..所以....)
所以車次資訊中[僅顯示停靠站]這個選項沒有用了
請大家幫忙測試看看有沒有什麼明顯的問題

不過loren兄提到的那班車次台鐵提供的 html 中還是少了彰化到竹南這段的車班資料
這樣就沒辦法囉..

tsyang

原文章由 CLC 於 2006-9-2 17:49 發表
請問大家安裝20060822的db之後，看"關於"的資料庫版本，是否顯示為2.5716而不是2.6822呢?

這邊提到的資料庫版本應該指的是格式的版本
而不是資料庫最後更新的日期
更新日可以用 filez 或其他程式看檔案建立或更動日期即可得知

tsyang

原文由 juangjy 於 2006-10-3 11:31 發表
由於這星期要回台灣一趟, 因此正在安裝tsyang兄這個好用的程式
但剛剛發現台鐵網頁又改了
http://new.twtraffic.com.tw/twrail/schedule.aspx
上面的製表日期是10/2, 但生效日期卻是10/11

另外想請教各位 ...

您列出的網址裡就有 html 了
點看看中文路線名吧

tsyang

原文由 dean526 於 2006-10-6 08:08 發表
請問現在是不是要一個一個抓取http://new.twtraffic.com.tw/twrail/schedule.aspx這邊的網頁，然後在另存新檔到html資料夾中？
因為之前我把html資料夾中的檔案全殺了，然後再執行Tst2DBV5710，選擇「執行」， ...

台鐵網頁格式修改過，原來的轉檔程式已無法使用。
已上傳新版的火車時刻表資料庫轉檔程式。
請試用看看，謝謝。

ps: 因為perl2exe有版權的問題 (用p2x轉出來的 .exe 檔不能公開傳播)，
所以要用這支程式用起來會麻煩一些 (請見壓縮檔中的readme)

tsyang

更新轉檔程式與資料庫，主要修改如下：

1. 修正山海線判斷的寫法，更有彈性。
之後山海線有變更的話可直接改下面這兩行變數即可

@sea_line =      qw/大山 後龍 白沙屯 通霄 苑裡 大甲 清水 沙鹿 大肚/;
@mountain_line = qw/苗栗 銅鑼 三義 后里 豐原 潭子 台中/;

2. 選單中的"關於"下的"資料庫版本"改成 2.7113。
表示在2007/1/13 產生出來的。

下載點一樣放在第一頁第一篇，請大家幫忙測試，
有問題歡迎一起討論，感謝。

tsyang

上網找了一下高鐵時刻表
發現其實不大...
呵，這個存成text應該就行了

tsyang

感謝PipperL熱心協助，找出了原程式中的bug
此bug會造成山海線判斷不正確
請至本討論串第一頁/第一篇文章下載更新檔
再次感謝PipperL

tsyang

前陣子常坐火車時才發現台鐵又改時刻表了..真是#%$&&(...
寫了一版從查詢系統抓的資料轉的程式
上來後才發現 hsming13 已寫了新版程式造福眾胖友
熱心的朋友越來越多，真是件不錯的事！

轉出來的資料檔照例放在這個討論串第一頁第一篇
轉檔程式釋出考慮中...
因為要從台鐵的網頁下載資料頁龐大 (~50MB )，暫不提供，還請見諒
懷疑這幾天台鐵網頁怪怪跟我有關

ps: 一樣的資料庫，台鐵也可以搞成查詢網頁與 xls 資料不盡相同，我真是搞不懂你...

tsyang

根據台灣高鐵所提供的時刻表
它的確是列這幾個站名：

台北          板橋          桃園          新竹          台中          嘉義          台南          左營

命名規則除高雄->左營外，其餘皆以大城市名為主
這點還請大家多多習慣

tsyang

請問是那些列車時刻改變了？
可以舉出一些具體的班次例子以供對照嗎？
感謝~

tsyang

原文由 wenchin 於 2007-7-29 22:19 發表
http://www.trc.club.tw/news/20070729121740
自8月1日起，2527次區間車調整後新開車時刻:
◆2527次區間車(基隆-新竹):
(基隆15:58-三坑16:01-八堵16:06-七堵16:11-百福16:15-五堵16:20-汐止16:22-南港16: ...

20070729版釋出，一樣請至本討論串第一頁第一篇下載~(2527次區間車未包含)

1. 選單中的"關於"下的"資料庫版本"改成 2.7729，表示pdb是2007/7/29產生的版本。
2. 更新高鐵時刻表
3. 台鐵時刻表更新，新增屏東枋野站
4. 整理火車時刻表轉換程式原始碼，改變下載資料量，希望可以在下次釋出。

tsyang

新版資料檔及轉檔程式原始碼更新
一樣放在本討論串第一篇
使用前請看一下更新註解：
20070918:
1. 選單中的"關於"下的"資料庫版本"改成 2.7917，表示pdb是2007/9/17產生的版本。
2. 更新高鐵時刻表
3. 台鐵時刻表更新，新增台東中央站
4. 釋出轉檔程式原始碼，執行run.bat即可。執行前請修改 traintime2db2.pl 的第 59, 82, 211, 687 行內的日期，有時候一行內會出現不只出現一個日期，格式也不一定相同，要記得都改到。這次下載的方式分兩階段，第一階段是先根據 table.txt 下載各站時刻表放入sta\，(table.txt藏在台鐵網頁中，不過現在找不到…Orz)；第二階段再過瀘第一階段中下載的時刻表，來下載所有的車次表放入html\。需要的資料量較大，請大家小心測試。

之後大概會越來越沒空更新了。所以把原始碼釋出，有興趣的網友可以參考台鐵時刻表 XML 的下載，應該可以大符簡化轉檔花費的時間與精力…繼續為眾palm友服務

tsyang

高鐵改太多，想想也很久沒改版了
上傳了12/22的資料檔，一樣放在第一篇
有需要者請自取

tsyang

to Elison:
收到眾palm友幫忙太多，剛好有機會回饋大家~
真的想贊助的話，請參照這篇吧

to hjlai:
我的確有改一下code，晚點再補上來...

對了，再廣告一下…之前在這篇中有提到希望有人可以提供資源，拿到台鐵的 xml 檔。這個願望還在不變喔~~~

tsyang

補上 diff 檔

tsyang

上傳了2008/1/2版本
這次有更新 00readme.txt
提供詳細的修改方式
應該會有幫助

照例到討論串第一篇找

tsyang

to pching3:
因為沒有對應的compiler 環境，這個建議可能有點困難..

to tcchen:
理論上可以直接從網頁上抓下來..不過因為變動的機率不大，所以沒有刻意寫出來，這部分有機會可以再改進。
呵~沒注意到有重複，不過應該只會影響抓網頁資料的次數而已。

tsyang

太久沒更新了，高鐵多了好多班次
花了一點時間修改後
照例請至本串第一篇取用

tsyang

不是bug，是轉檔方式異動的"修正"
詳情請看這篇

tsyang

最近需要，且台鐵多開了彰化/花蓮間太魯閣號
所以更新一次
照例請至這裡取用

20080228:
1. 更新台鐵、高鐵時刻表
2. 新增[更新通知]辦法，詳見附檔 [更新通知.txt]

tsyang

原文由 周子 於 2008-3-10 22:28 發表
補充一下，如果依照tsyang大哥的指示到“這裡取用”，結果顯示的是“你的組別無法下載附件...”要如何才具有資格呢？看站上的分類新會員是可以下載的。謝謝。

檢查一下link過去時，是否被登出了？
是的話重新登入一次應該就可以
不然就要問站長了..

tsyang

另外一個情況，我偶而會遇到
就是在跳網頁時 (pil->pil) 會出現無法下載
解法：從pil首面一步一步走進去即可

tsyang

1. 更新台鐵、高鐵時刻表
2. 選舉日前後加開列車更新
3. 更新通知名單25人次

照例這邊

tsyang

1. 更新台鐵、高鐵時刻表
2. 清明節前後加開列車更新
3. 更新通知名單29人次

照例這邊

tsyang

20080519:
1. 更新台鐵、高鐵時刻表
2. 因應台鐵新增環島列車，修改程式
3. 高鐵限制自動下載，改用手動下載
4. 更新通知名單49人次

照例這邊

tsyang

1. 更新台鐵、高鐵時刻表
2. 修改程式僅能抓到週間/週末車班的bug
3. 更新通知名單55人次

照例請至這邊下載最新資料檔