MATLAB大數(shù)據(jù)培訓(xùn)與咨詢(xún)
本課程為期一天,重點(diǎn)介紹調(diào)整現(xiàn)有算法處理文件集合或者超出內(nèi)存的單個(gè)文件。學(xué)習(xí)在?MATLAB??中表示大數(shù)據(jù),調(diào)整現(xiàn)有代碼提升處理效率,并且利用自己的計(jì)算資源或者云擴(kuò)大分析。內(nèi)容包括:
·?從數(shù)據(jù)源讀取數(shù)據(jù)創(chuàng)建數(shù)據(jù)存儲(chǔ)
·?使用tall 數(shù)組表示和運(yùn)算大數(shù)據(jù)
·?tall 數(shù)組導(dǎo)入自定義數(shù)據(jù)格式以及引用自定義函數(shù)
·?使用計(jì)算機(jī)集群和云環(huán)境
課程要求
MATLAB 數(shù)據(jù)處理和可視化, 或者同等 MATLAB 使用經(jīng)驗(yàn)
|
Day 1 of 1
|
|
大數(shù)據(jù)算法原型
|
目標(biāo):對(duì)無(wú)法裝入內(nèi)存的數(shù)據(jù)集應(yīng)用現(xiàn)有算法。使用數(shù)據(jù)存儲(chǔ)導(dǎo)入數(shù)據(jù)
·?創(chuàng)建?tall?數(shù)組
·?tall?數(shù)組運(yùn)行算法
·?tall?數(shù)組優(yōu)化代碼
·?云環(huán)境讀取數(shù)據(jù)
|
|
處理自定義數(shù)據(jù)和算法
|
目標(biāo):導(dǎo)入自定義格式數(shù)據(jù)以及應(yīng)用?tall?數(shù)組未實(shí)現(xiàn)的算法使用文件數(shù)據(jù)存儲(chǔ)和自定義數(shù)據(jù)存儲(chǔ)導(dǎo)入自定義格式數(shù)據(jù)
·?部分導(dǎo)入單個(gè)文件
·?tall?數(shù)組應(yīng)用轉(zhuǎn)換,減少和移動(dòng)窗口操作
|
|
使用集群和云
|
目標(biāo):在計(jì)算機(jī)集群或者云環(huán)境運(yùn)行大數(shù)據(jù)算法。本地和遠(yuǎn)程集群
·?集群發(fā)現(xiàn)和連接
·?在云環(huán)境設(shè)置集群
·?文件訪(fǎng)問(wèn)注意事項(xiàng)
|
?