在十月初步釋出後,十一月開始進行定期紀錄、合併資料的工作,並且一併跟上最新的租屋平台網頁結構。十一月以幾乎一週一次的頻率,完成三輪資料爬取,並將這些資料合併成一份完整的測試用資料集,數量已開始接近過去的水準,以去重複後的物件數來看,大約是 2023 同期的 95% 。
測試期間的資料特性說明
十一月分別在十一月上旬、十二月初,完成了三輪資料爬取,對資料的主要影響為:
- 資料更新頻率降低:目前僅每週更新一次,導致部分出租狀態等欄位,可能與實際狀況有較大落差,但由於從月初就開始進行,因此資料的完整度已有顯著提升
- 資料品質不穩定:爬蟲仍在調整中,部分欄位可能存在較多錯誤,請使用者在使用資料時,多加留意,若有發現明顯錯誤,歡迎回報至 GitHub Issues
在確認資料穩定性後,十二月將開始強化資料品質監測、機器人自動化測試等工作,期望能在年底前,恢復到穩定運作的狀態。
