數(shù)據(jù)采集及數(shù)據(jù)分析入庫(后端開發(fā))
- 合作方式：
- 項目制 全國遠程
- 預(yù)估日薪：
- 500
- 預(yù)估總價：
- 1500元
- 預(yù)估工時：
- 3天
- 所在區(qū)域：
- 全國遠程
需求描述
數(shù)據(jù)采集及數(shù)據(jù)分析入庫(后端開發(fā))
1. 熟悉PYTHON爬蟲(動態(tài)循環(huán)采集)
2. 熟悉REDIS + LUA + MYSQL 編程及應(yīng)用
3. 熟悉數(shù)據(jù)清洗, 數(shù)據(jù)結(jié)構(gòu)化, 算法定義(解析及計算模塊)
統(tǒng)一循環(huán)時間, 對多條源網(wǎng)址( xml + json )進行關(guān)鍵字段采集
對采集數(shù)值做并行計算之后, 可實時調(diào)用及入庫
有高并發(fā)的查詢需求
與股票實時采集及計算分析相似
相似職位推薦
-
后臺PHP二次開發(fā)（laravel框架）總價：800元概要：已完成的后臺需要二次開發(fā)需求是 1. 富文本編輯器中增加設(shè)置行間距和首行縮進功能 2. 上傳圖
-
基于web的催收系統(tǒng)網(wǎng)站（PHP全棧）總價：10000元概要：第一個版本涉及權(quán)限管理，任務(wù)管理，外呼接口對接和數(shù)據(jù)統(tǒng)計。 第一個版本有一個PPT做的原型。 預(yù)
-
競彩足球、競彩籃球賽果開獎計算（PHP）總價：8000元概要：根據(jù)數(shù)據(jù)庫已存的方案、比賽賽果來計算最終的中獎、未中獎、獎金計算 希望做過競彩足球、籃球的有經(jīng)
-
開發(fā)隨機生成成千上萬種動畫圖總價：5000元概要：需求：開發(fā)開發(fā)類似以太貓的成千上萬種動畫圖形 大致介紹：在這里，我簡稱我需要的動畫圖為猴。我不管你
-
php python開發(fā)工程師總價：800元概要：修改原微信公眾號爬蟲，增加自動運行腳本的功能。注意：原爬蟲抓取搜狗微信公眾號會有彈出驗證碼的問題，運
-
一個javascript庫開發(fā)（js+python）總價：1000元概要：已有： 1. 一個AWS提供的Mysql實例，景點數(shù)據(jù)和相關(guān)的數(shù)據(jù)已存入 需要： 1. 一個從
微信客服
需求方請加需求方端客服溝通需求，工程師請加工程師端客服瀏覽推送職位
需求方端客服
工程師端客服