寫左隻Web Crawler集中公營機構嘅職位空缺,你問我答(2)

咕狗 2018-5-7 19:44:57 我都無乜方法. 我D listing page reducers都係c&p.
都會有寫D builder func 去build d 簡單CRUD reducers/actions (i.e. input prefix => redux actions / state handling for reducers). 但主要都係c&p. 有bug就真係仆街

咕狗 2018-5-11 12:04:38

:^(

忽高 2018-5-11 12:40:39 請教一下crawler果part既spec係點樣？
直接retrieve html再拆？還是抽json出黎？定係其他？
同埋係咪係js裡面做？

咕狗 2018-5-11 18:55:24 每個site唔同.
大部份都係拆HTML,都有D係搵佢API URL拆json

server有隻cron定時做, Java Jsoup parse DOM

咕狗 2018-5-15 17:36:22

:^(

咕狗 2018-5-21 15:36:32

:^(

咕狗 2018-5-25 20:58:40

:^(

咕狗 2018-5-28 13:07:22

:^(

咕狗 2018-5-31 18:27:04

:^(

蟹柳 2018-5-31 18:32:13 正評#

:^(

咕狗 2018-6-6 13:04:43

:^(

咕狗 2018-6-11 23:46:51

:^(

屎笠蕭 2018-6-13 09:43:11 推
留名學野+睇到有幾份IT工啱自己

蘭桂坊公廁 2018-6-13 10:54:33 想問下你係拎咩做web crawler?
Python嗰啲？

鎳資本鷹 2018-6-13 11:28:22 我都睇到，但有好多工都無寫幾錢人工，
咁點apply 啊....

屎笠蕭 2018-6-13 11:44:29 呢啲濕勁機構不嬲價低者得
send 自己目標價去試囉

掙扎的鄭恩地男友 2018-6-14 00:11:30 此回覆已被刪除

蘭桂坊公廁 2018-6-14 08:59:15 好似好勁我唔太識
暫時淨係識用python做local crawler

咕狗 2018-6-14 12:49:04 其實無乜咁勁.都係一樣咁9拆html

自用write做excel, 我要放出黎就write mongodb. Crawler part本質一樣.

咁http api 就同crawler完全無關,單純係query db => return data.

website/app又係同以上無關,單純係call http api => display data in UI

分開睇就知好simple

咕狗 2018-6-19 21:05:37

:^(

咕狗 2018-6-22 18:22:08

:^(

咕狗 2018-6-28 20:49:27

:^(

咕狗 2018-7-3 18:10:23

:^(

咕狗 2018-7-10 20:30:34

:^(

咕狗 2018-7-16 18:23:55

:^(