開放台灣民間租屋資料打包回家玩關於資料集部落格
第 2019-00 號爬蟲錯誤說明

第 2019-00 號爬蟲錯誤說明

  • 錯誤發生時間:
    • 第一波:2019-03-08 ~ 2019-03-12 ,因為資料庫空間用盡,導致部份物件更新失敗
    • 第二波:2019-03-14 ~ 2019-03-19 ,因為 591 網站更新,導致無法抓到新物件
    • 2019-03-19 開始爬蟲恢復正常
  • 對資料的影響:
    1. 這兩段時間內的建立而且關閉的物件,有可能不會出現在資料庫中
    2. 在這兩段時間內建立的物件,物件首次發現時間 會是錯誤的
    3. 在這兩段時間內更新,而且之後就沒有再更新的物件,物件最後更新時間 會是錯誤的
    4. 在這兩段時間內標記為出租,而且之後就沒有再次出租過得物件,出租大約時間出租所費天數 會是錯誤的
    5. 其他的資料欄位均不受影響
  • 建議使用方式
    1. 因為 2019-03-19 開始恢復正常,所有更新時間在 2019-03-20 之後的物件,資料都是正確的
    2. 更新時間在 2019-03-08 ~ 2019-03-19 的資料,不要使用上述 2~4 提及的時間相關欄位