在千鋒大數(shù)據(jù)培訓(xùn)已經(jīng)過(guò)去了一段時(shí)間,自己在看書的時(shí)候,也經(jīng)常總結(jié)。此次總結(jié)的這些知識(shí)點(diǎn)都是從自己結(jié)合千鋒大數(shù)據(jù)培訓(xùn)以及各方的大數(shù)據(jù)總結(jié)的,雖然自己對(duì)大數(shù)據(jù)技術(shù)的了解不屬于大神級(jí)別,但我相信通過(guò)自己的努力定會(huì)有不同層面的提高和進(jìn)步。
,大數(shù)據(jù)主要側(cè)重于數(shù)據(jù)的處理,流數(shù)據(jù)、批量數(shù)據(jù)、圖計(jì)算等。在數(shù)據(jù)處理過(guò)程中,批量的數(shù)據(jù)處理的代表工具是Hadoop,流數(shù)據(jù)的數(shù)據(jù)處理代表的是Storm技術(shù),而圖計(jì)算這種密集型的代表是Spark,Spark對(duì)于迭代算法的處理很有效。
第二,無(wú)論是Hadoop還是Spark的架構(gòu)原理都側(cè)重于分為三部分:資源的管理、服務(wù)計(jì)算狀態(tài)的監(jiān)控、服務(wù)的運(yùn)行。把數(shù)據(jù)處理、數(shù)據(jù)處理監(jiān)控和資源管理分開,可以容易地進(jìn)行分布式系統(tǒng)的擴(kuò)展。
第三,從數(shù)據(jù)的存儲(chǔ)、數(shù)據(jù)的處理和數(shù)據(jù)的應(yīng)用三個(gè)方面進(jìn)行了解,每一個(gè)方面要結(jié)合現(xiàn)在的熱門工具進(jìn)行實(shí)情實(shí)景的分析。
第四,在學(xué)習(xí)的過(guò)程中,我覺(jué)得印象深的部分是關(guān)于機(jī)器學(xué)習(xí)和深度學(xué)習(xí)以及常規(guī)對(duì)算法的認(rèn)識(shí)不同,這些算法通過(guò)專業(yè)的數(shù)學(xué)知識(shí)進(jìn)行計(jì)算后,瞬間覺(jué)得自己作為一個(gè)985的程序員,有機(jī)會(huì)需要重新學(xué)習(xí)一下高數(shù)。
第五,對(duì)于電子商務(wù)與社會(huì)網(wǎng)絡(luò)大數(shù)據(jù)分析,我認(rèn)為重要的是結(jié)合電子商務(wù)網(wǎng)站的推薦算法、推薦算法中數(shù)據(jù)的歸一化處理和距離度量、相似度度量等。
其實(shí)對(duì)于大數(shù)據(jù)的學(xué)習(xí),多的是在千鋒講師系統(tǒng)的學(xué)科之下,外加自己不斷地學(xué)習(xí)和分析,才會(huì)讓自己的技術(shù)知識(shí)不斷的豐富起來(lái),希望在接下的學(xué)習(xí)中自己能夠加努力,爭(zhēng)取有多的進(jìn)步!
相關(guān)文章
了解千鋒動(dòng)態(tài)
關(guān)注千鋒教育服務(wù)號(hào)
掃一掃快速進(jìn)入
千鋒移動(dòng)端頁(yè)面
掃碼匿名提建議
直達(dá)CEO信箱