職位描述
崗位描述: 1. 負(fù)責(zé)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)的架構(gòu)設(shè)計(jì)與開發(fā)(如抓取調(diào)度,多樣化抓取,頁面解析和結(jié)構(gòu)化抽取,海量數(shù)據(jù)存儲和讀取等); 2. 負(fù)責(zé)爬蟲核心算法的策略優(yōu)化研究,提升爬蟲抓取效率和質(zhì)量(如調(diào)權(quán)調(diào)度、分析預(yù)測、質(zhì)量判斷、封禁與反封禁研究等); 3. 負(fù)責(zé)HTTP、AJAX等各類網(wǎng)絡(luò)請求分析,探索和研究高效的數(shù)據(jù)抓取解決方案; 任職資格: 1、本科及以上學(xué)歷,良好的代碼能力,扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底,有快速迭代、逐步優(yōu)化的工程項(xiàng)目經(jīng)驗(yàn); 2、有良好邏輯思維能力、溝通能力、團(tuán)隊(duì)合作精神、學(xué)習(xí)能力,抗壓能力,對挑戰(zhàn)性問題充滿激情; 3、熟悉linux和Java開發(fā),熟悉shell/perl/python等腳本語言,熟練掌握正則表達(dá)式; 4、精通一種開源爬蟲框架,如scrapy、webmagic、nutch、heritrix等,有開發(fā)爬蟲框架經(jīng)驗(yàn)優(yōu)先;熟悉反爬蟲、驗(yàn)證碼識別技術(shù)者優(yōu)先; 5、有多線程、網(wǎng)絡(luò)數(shù)據(jù)處理經(jīng)驗(yàn)優(yōu)先(如HTTP協(xié)議,AJAX,爬蟲開發(fā),瀏覽器內(nèi)核開發(fā),Web服務(wù)開發(fā)等); 6、有大規(guī)模分布式海量數(shù)據(jù)處理經(jīng)驗(yàn)優(yōu)先(如Hadoop/Hbase/Spark/Strom/Flink等);
公司簡介
??????柳州飛熊網(wǎng)絡(luò)科技有限公司,代理VR/AR/MR軟硬件產(chǎn)品與技術(shù)服務(wù),是VR/AR項(xiàng)目建設(shè)與產(chǎn)品集成服務(wù)的供應(yīng)商。
??????致力于以3R為代表的新興技術(shù)產(chǎn)業(yè)引入,重點(diǎn)為3R技術(shù)在教育、雙創(chuàng)和產(chǎn)業(yè)領(lǐng)域的應(yīng)用推廣貢獻(xiàn)力量。
??????公司目前打造年輕化團(tuán)隊(duì),歡迎各類精英加入我們,一經(jīng)入職,我們將提供寬松的工作環(huán)境,優(yōu)厚的薪資待遇,廣闊的個(gè)人發(fā)展空間。
上班地點(diǎn)

-
可能感興趣的職位
-
高級大數(shù)據(jù)開發(fā)工程師6000-11000元柳州-城中區(qū)-時(shí)代商廈廣西順川貿(mào)易有限公司貿(mào)易/進(jìn)出口1. 扎實(shí)的編程能力:熟悉至少一門編程語言,如Python、Java或Scala,并能在數(shù)據(jù)處理和數(shù)據(jù)分析方面進(jìn)行開發(fā)。 2. 數(shù)據(jù)庫和SQL技能:熟悉關(guān)系型數(shù)據(jù)庫和SQL語言,能夠進(jìn)行高效的數(shù)據(jù)提取、轉(zhuǎn)換和加載(ETL)操作。 3. 大數(shù)據(jù)技術(shù)和工具:熟悉大數(shù)據(jù)技術(shù)棧,如Hadoop、Spark、Hive等,并能夠使用相關(guān)工具進(jìn)行數(shù)據(jù)處理和分析。 4. 數(shù)據(jù)建模和設(shè)計(jì):具備數(shù)據(jù)建模和設(shè)計(jì)的能力,能夠理解和設(shè)計(jì)復(fù)雜的數(shù)據(jù)結(jié)構(gòu)和關(guān)系,以支持?jǐn)?shù)據(jù)分析和報(bào)表需求。 5. 數(shù)據(jù)倉庫和數(shù)據(jù)湖:了解數(shù)據(jù)倉庫和數(shù)據(jù)湖的概念和架構(gòu),能夠設(shè)計(jì)和實(shí)現(xiàn)可擴(kuò)展的數(shù)據(jù)存儲和管理方案。 6. 數(shù)據(jù)質(zhì)量和數(shù)據(jù)治理:具備數(shù)據(jù)質(zhì)量和數(shù)據(jù)治理的意識,能夠進(jìn)行數(shù)據(jù)清洗、驗(yàn)證和監(jiān)控,確保數(shù)據(jù)的準(zhǔn)確性和完整性。 7. 溝通和團(tuán)隊(duì)合作能力:能夠與數(shù)據(jù)科學(xué)家、業(yè)務(wù)分析師等團(tuán)隊(duì)成員緊密合作,理解業(yè)務(wù)需求并提供有效的解決方案。 8. 持續(xù)學(xué)習(xí)和自我提升:保持對最新數(shù)據(jù)技術(shù)和趨勢的關(guān)注,并不斷學(xué)習(xí)和提升自己的技能和知識。 崗位福利:2025-07-20潘業(yè)媛
-
數(shù)據(jù)專員4000-5000元柳州-柳南區(qū)柳州市理想睡衣經(jīng)營部批發(fā)/零售崗位職責(zé) 一、業(yè)務(wù)管理:負(fù)責(zé)貨品的分配、調(diào)拔等管理工作 1、負(fù)責(zé)所管轄區(qū)域門店貨品的分配、調(diào)撥管理。 2、負(fù)責(zé)所管轄區(qū)域門店要貨情況分析、審核與跟進(jìn); 3、負(fù)責(zé)店鋪之間、區(qū)域之間合理的貨品調(diào)動、補(bǔ)充; 4 、跟進(jìn)店鋪、倉庫貨品調(diào)配的及時(shí)性和準(zhǔn)確度; 5、公司關(guān)于貨品調(diào)動的執(zhí)行操作 二、日常管理: 負(fù)責(zé)商品日常工作報(bào)表分析、制作,確保貨品分布的合理性 1、所管轄區(qū)域、門店貨品結(jié)構(gòu)分析; 2、所管轄區(qū)域、門店貨品進(jìn)銷存分析 3 、定期分析門店貨品結(jié)構(gòu)及銷售情況,制定調(diào)整方案 4、定期分析門店庫銷、售罄情況,制作分析報(bào)表,為公司貨品補(bǔ)充、調(diào)整提供依據(jù); 5 、重大節(jié)日、大型促銷活動貨品組織和調(diào)配 6、跟進(jìn)貨品流通環(huán)節(jié),提出合理化建議或解決方案2025-07-20翁小姐
-
2025-07-20小吳
柳州相關(guān)熱門崗位
數(shù)據(jù)治理數(shù)據(jù)大數(shù)據(jù)數(shù)據(jù)分析數(shù)據(jù)庫數(shù)據(jù)需求分析用戶分析銷售數(shù)據(jù)分析行業(yè)數(shù)據(jù)分析數(shù)據(jù)庫開發(fā)數(shù)據(jù)整理經(jīng)營分析sqlsql開發(fā)大數(shù)據(jù)架構(gòu)經(jīng)營數(shù)據(jù)分析直播數(shù)據(jù)分析數(shù)據(jù)處理oracle數(shù)據(jù)庫開發(fā)大數(shù)據(jù)工程師大數(shù)據(jù)建模數(shù)據(jù)處理分析大數(shù)據(jù)應(yīng)用工程師數(shù)據(jù)管理sqlserver數(shù)據(jù)分析主管數(shù)據(jù)分析建模數(shù)據(jù)專員etl系統(tǒng)分析crm數(shù)據(jù)分析數(shù)據(jù)倉庫數(shù)據(jù)庫工程師數(shù)據(jù)分析崗大數(shù)據(jù)專員大數(shù)據(jù)開發(fā)數(shù)據(jù)分析經(jīng)理spark開發(fā)大數(shù)據(jù)etl開發(fā)etl數(shù)據(jù)庫開發(fā)bi

- 柳州飛熊網(wǎng)絡(luò)科技有限公司
- 所在行業(yè) 網(wǎng)絡(luò)
- 成立時(shí)間 --
- 企業(yè)性質(zhì) 有限責(zé)任
- 公司規(guī)模 --