大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)SEARCH AGGREGATION
回答:作為一名大數(shù)據(jù)方向的研究生導(dǎo)師，我來(lái)回答一下這個(gè)問(wèn)題。從大數(shù)據(jù)的技術(shù)體系來(lái)看，主要涉及到三大方面的內(nèi)容，其一是大數(shù)據(jù)平臺(tái)；其二是大數(shù)據(jù)開(kāi)發(fā)；其三是大數(shù)據(jù)分析，對(duì)于具有Java編程基礎(chǔ)的人來(lái)說(shuō)，學(xué)習(xí)大數(shù)據(jù)會(huì)相對(duì)容易一些，但是依然需要一個(gè)系統(tǒng)的學(xué)習(xí)過(guò)程，具體需要多長(zhǎng)的學(xué)習(xí)時(shí)間取決于自身的學(xué)習(xí)計(jì)劃、學(xué)習(xí)環(huán)境等因素。大數(shù)據(jù)的技術(shù)體系目前已經(jīng)趨于成熟，而且大數(shù)據(jù)涉及到的知識(shí)量也比較龐大，所以應(yīng)該找一個(gè)切入點(diǎn)...
leo108
|
1704人閱讀
回答:隨著大數(shù)據(jù)應(yīng)用的逐漸落地，很多人都想從事大數(shù)據(jù)方面的工作，這其中自然就有很多非大數(shù)據(jù)相關(guān)專業(yè)（數(shù)學(xué)、計(jì)算機(jī)、統(tǒng)計(jì)學(xué)）的從業(yè)者，那么大數(shù)據(jù)到底能不能從零基礎(chǔ)開(kāi)始學(xué)呢？答案是肯定的，但是也要根據(jù)自身的知識(shí)結(jié)構(gòu)來(lái)選擇大數(shù)據(jù)的學(xué)習(xí)方向。大數(shù)據(jù)技術(shù)體系在2016年的時(shí)候已經(jīng)趨于成熟，目前正處在落地應(yīng)用的階段，大數(shù)據(jù)的細(xì)分崗位比較多，自然也就需要具備不同的知識(shí)結(jié)構(gòu)。大數(shù)據(jù)的崗位集中在數(shù)據(jù)采集、整理、存儲(chǔ)、分析...
wuyangnju
|
1063人閱讀
回答:數(shù)據(jù)庫(kù)開(kāi)發(fā)工程和大數(shù)據(jù)開(kāi)發(fā)嚴(yán)格意義上來(lái)說(shuō)不算轉(zhuǎn)行，從技術(shù)層面來(lái)講大數(shù)據(jù)開(kāi)發(fā)需要更深層的技術(shù)基礎(chǔ)和更廣的架構(gòu)思路，也其說(shuō)轉(zhuǎn)行不如說(shuō)是對(duì)自身職業(yè)的一個(gè)飛躍。數(shù)據(jù)庫(kù)開(kāi)發(fā)工程對(duì)于基本的數(shù)據(jù)庫(kù)開(kāi)發(fā)比如說(shuō)SQL的熟練，表結(jié)構(gòu)的分析，數(shù)據(jù)庫(kù)編程的掌握，數(shù)據(jù)庫(kù)的運(yùn)維，這都是數(shù)據(jù)庫(kù)開(kāi)發(fā)工程師的天然優(yōu)勢(shì)和技術(shù)積累，如果要上升到大數(shù)據(jù)開(kāi)發(fā)顯示是比小白更具優(yōu)勢(shì)，向大數(shù)據(jù)庫(kù)開(kāi)發(fā)提升，建議從以下幾方面著手：1.從技術(shù)上要學(xué)習(xí)...
sean
|
988人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向，除了大數(shù)據(jù)平臺(tái)應(yīng)用及開(kāi)發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外，還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)，除了以上四個(gè)大的工作方向之外，還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái)，這部分工作的難度較高，從事這部分工作的研發(fā)級(jí)崗位也并不多?，F(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
zhangxiangliang
|
4097人閱讀
回答:是的。一方面，大數(shù)據(jù)計(jì)算通常不能在內(nèi)存中完成，需要多次讀寫硬盤數(shù)據(jù)。另一方面，數(shù)據(jù)分布在不同的機(jī)器上，需要對(duì)數(shù)據(jù)進(jìn)行網(wǎng)絡(luò)傳輸。因此，大數(shù)據(jù)運(yùn)算更多的時(shí)間是在讀寫磁盤和網(wǎng)絡(luò)傳輸數(shù)據(jù)。因?yàn)閿?shù)據(jù)I/O的效率通常低于CPU運(yùn)算效率。因此，對(duì)讀寫同一張表的多個(gè)SQL進(jìn)行合并，可以減少本地磁盤讀寫次數(shù)，以及網(wǎng)絡(luò)傳輸?shù)臄?shù)據(jù)，從而提高程序運(yùn)行效率。
李增田
|
1219人閱讀
回答:誠(chéng)邀回答，下面我來(lái)說(shuō)說(shuō)我的個(gè)人觀點(diǎn)：隨著大數(shù)據(jù)的熱度不斷升溫、技術(shù)日趨成熟，應(yīng)用越來(lái)越廣泛，很多人都看好大數(shù)據(jù)未來(lái)的發(fā)展前景。這其中不乏大量Java開(kāi)發(fā)崗位轉(zhuǎn)大數(shù)據(jù)方向的程序員。究竟是堅(jiān)守java崗還是去做大數(shù)據(jù)？我認(rèn)為最重要的還是要結(jié)合個(gè)人的職業(yè)發(fā)展來(lái)定位。并不是大數(shù)據(jù)火了，轉(zhuǎn)行做大數(shù)據(jù)就業(yè)前景就更可觀，個(gè)人能力、與企業(yè)技能要求的匹配度、市場(chǎng)競(jìng)爭(zhēng)環(huán)境、行業(yè)人才需求及機(jī)遇等都會(huì)左右我們最終的職業(yè)走...
Tony_Zby
|
1314人閱讀
達(dá)觀數(shù)據(jù)招人啦！ 面向北京、上海、深圳、成都四個(gè)地區(qū) 提供人工智能、算法、產(chǎn)品、銷售等多類崗位 畢業(yè)多年，你的狀態(tài)還好嗎？ 是否憂慮被甩在時(shí)代的邊緣？ 是否擔(dān)心被機(jī)器取代？ 是否不安現(xiàn)狀、躍躍欲試？ 來(lái)吧， ...
...組織結(jié)構(gòu)、模塊劃分、功能分配、接口設(shè)計(jì)、運(yùn)行設(shè)計(jì)、數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)和出錯(cuò)處理設(shè)計(jì)等，為軟件的詳細(xì)設(shè)計(jì)提供基礎(chǔ)。 詳細(xì)設(shè)計(jì) 在概要設(shè)計(jì)的基礎(chǔ)上，開(kāi)發(fā)者需要進(jìn)行軟件系統(tǒng)的詳細(xì)設(shè)計(jì)。在詳細(xì)設(shè)計(jì)中，描述實(shí)現(xiàn)具體模塊...
據(jù)平臺(tái)產(chǎn)品形象大圖.png?v=1632377121)
...rm（簡(jiǎn)稱 USDP），是 UCloud 推出的云上智能化、輕量級(jí)的大數(shù)據(jù)基礎(chǔ)服務(wù)平臺(tái)，能夠幫您快速構(gòu)建起大數(shù)據(jù)的分析處理能力。USDP 構(gòu)建于 UCloud 的云服務(wù)上，無(wú)縫集成云端 IaaS 資源能力，通過(guò)自研的 USDP Manager 管理工具，支持用戶創(chuàng)...
...rm（簡(jiǎn)稱 USDP），是 UCloud 推出的云上智能化、輕量級(jí)的大數(shù)據(jù)基礎(chǔ)服務(wù)平臺(tái)，能夠幫您快速構(gòu)建起大數(shù)據(jù)的分析處理能力。USDP 構(gòu)建于 UCloud 的云服務(wù)上，無(wú)縫集成云端 IaaS 資源能力，通過(guò)自研的 USDP Manager 管理工具，支持用戶創(chuàng)...
...rm（簡(jiǎn)稱 USDP），是 UCloud 推出的云上智能化、輕量級(jí)的大數(shù)據(jù)基礎(chǔ)服務(wù)平臺(tái)，能夠幫您快速構(gòu)建起大數(shù)據(jù)的分析處理能力。USDP 構(gòu)建于 UCloud 的云服務(wù)上，無(wú)縫集成云端 IaaS 資源能力，通過(guò)自研的 USDP Manager 管理工具，支持用戶創(chuàng)...
...產(chǎn)品價(jià)格產(chǎn)品價(jià)格簡(jiǎn)稱，是推出的云上智能化輕量級(jí)的大數(shù)據(jù)基礎(chǔ)服務(wù)平臺(tái)，能夠幫您快速構(gòu)建起大數(shù)據(jù)的分析處理能力。 產(chǎn)品概述本篇目錄產(chǎn)品特點(diǎn)功能簡(jiǎn)介操作指南開(kāi)發(fā)指南任務(wù)調(diào)度產(chǎn)品價(jià)格UCloud Smart Data Platform（簡(jiǎn)稱 USDP...
...的共同驅(qū)使下，HTML5終于進(jìn)入了大幅調(diào)整期 一起來(lái)看基本數(shù)據(jù) 數(shù)據(jù)采集來(lái)源：智聯(lián)招聘網(wǎng)； 數(shù)據(jù)采集人：HTML5學(xué)堂（碼匠）-利利、堡堡、國(guó)榮 采集時(shí)間：每周周三下午17:00； 搜索關(guān)鍵詞：WEB； 搜索類型：根據(jù)職位進(jìn)行搜索...
...的共同驅(qū)使下，HTML5終于進(jìn)入了大幅調(diào)整期 一起來(lái)看基本數(shù)據(jù) 數(shù)據(jù)采集來(lái)源：智聯(lián)招聘網(wǎng)； 數(shù)據(jù)采集人：HTML5學(xué)堂（碼匠）-利利、堡堡、國(guó)榮 采集時(shí)間：每周周三下午17:00； 搜索關(guān)鍵詞：WEB； 搜索類型：根據(jù)職位進(jìn)行搜索...
...的共同驅(qū)使下，HTML5終于進(jìn)入了大幅調(diào)整期 一起來(lái)看基本數(shù)據(jù) 數(shù)據(jù)采集來(lái)源：智聯(lián)招聘網(wǎng)； 數(shù)據(jù)采集人：HTML5學(xué)堂（碼匠）-利利、堡堡、國(guó)榮 采集時(shí)間：每周周三下午17:00； 搜索關(guān)鍵詞：WEB； 搜索類型：根據(jù)職位進(jìn)行搜索...
摘要：友盟大數(shù)據(jù)平臺(tái)的架構(gòu)借鑒了Lambda架構(gòu)思想，數(shù)據(jù)接入層讓Kafka集群承擔(dān)，后面由Storm消費(fèi)，存儲(chǔ)在MongoDB里面，通過(guò)Kafka自帶的Mirror功能同步，兩個(gè)Kafka集群，可以分離負(fù)載；計(jì)算有離線和實(shí)時(shí)兩部分，實(shí)時(shí)是Storm，離線...
...個(gè)簡(jiǎn)歷名字，分別在各個(gè)招聘網(wǎng)站投了雙份簡(jiǎn)歷，一個(gè)是數(shù)據(jù)分析的簡(jiǎn)歷、一個(gè)是web全棧開(kāi)發(fā)的簡(jiǎn)歷，我真正接觸python快2年，不管是學(xué)習(xí)還是工作學(xué)到的東西，這兩年大概掌握了（前端+django+爬蟲(chóng)+數(shù)據(jù)分析+機(jī)器學(xué)習(xí)+NLP+Linux）技...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
營(yíng)銷賬號(hào)總被封？TK直播頻繁掉線？雙ISP靜態(tài)住宅IP+輕量云主機(jī)打包套餐來(lái)襲，確保開(kāi)出來(lái)的云主機(jī)不...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
