
服務(wù)質(zhì)量評(píng)分0.0分 棒
統(tǒng)籌負(fù)責(zé)商客網(wǎng)點(diǎn)管理工具的需要整理,設(shè)計(jì)和開發(fā),后期對(duì)商客服務(wù)商的申請(qǐng)過審的執(zhí)行,域名申請(qǐng),企業(yè)服務(wù)器維護(hù)和網(wǎng)站備案申請(qǐng)以及拼多多服務(wù)商云服務(wù)器部署和維護(hù),整個(gè)后端功能開發(fā),爬蟲數(shù)據(jù)開發(fā)和數(shù)據(jù)整理以及拼多多服務(wù)商商品管理API對(duì)接,上線和維護(hù)。
背景:開發(fā)一套跨平臺(tái)店鋪商品自動(dòng)上架的服務(wù)商工具,解決無貨源客戶的商品自動(dòng)化的整體應(yīng)用工具,目前實(shí)現(xiàn)了從1688和淘寶做貨源,自動(dòng)搬運(yùn)上架到拼多多中
任務(wù):
問題1:1688和淘寶在做數(shù)據(jù)抓取爬蟲的時(shí)候,總是出現(xiàn)人機(jī)驗(yàn)證
問題2:節(jié)點(diǎn)運(yùn)行過久后出現(xiàn)內(nèi)存泄漏
行動(dòng):
問題1方案:拆分節(jié)點(diǎn),拆分?jǐn)?shù)據(jù)接收端和爬蟲端的應(yīng)用,并降低爬蟲端頻率,同時(shí)使用自動(dòng)鼠標(biāo)腳本,檢測(cè)到出現(xiàn)人機(jī)滑動(dòng)驗(yàn)證,出發(fā)鼠標(biāo)宏腳本自動(dòng)通過人機(jī)驗(yàn)證
問題2方案:內(nèi)存泄漏節(jié)點(diǎn)現(xiàn)象主要是不工作,在爬蟲端加入檢測(cè)線程,發(fā)現(xiàn)長(zhǎng)時(shí)間沒更新執(zhí)行任務(wù)時(shí)間,釋放資源重新啟動(dòng)任務(wù),對(duì)未執(zhí)行的任務(wù)進(jìn)行重新分析提交
結(jié)束:
成功通過拼多多開放平臺(tái)的服務(wù)商認(rèn)證,并通過應(yīng)用審核,繳納保證金后成為可正常拼多多開放平臺(tái)服務(wù)商經(jīng)營,為無貨源客戶提供商品遷移和自動(dòng)商品上架服務(wù),并每天嗅探更新下架商品,并同步到關(guān)聯(lián)的店鋪商品列表。
?