大數(shù)據(jù)采用什么架構(gòu)SEARCH AGGREGATION
回答:這個太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點，暫時沒有太好的解決方案，kylin等框架也只是一個折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級響應(yīng)的話sparkSql、presto等都是不錯的方案，分鐘級別可以返回。
Paul_King
|
683人閱讀
回答:近幾年，大數(shù)據(jù)的概念逐漸深入人心，大數(shù)據(jù)的趨勢越來越火爆。但是，大數(shù)據(jù)到底是個啥？怎么樣才能玩好大數(shù)據(jù)呢？大數(shù)據(jù)的基本含義就是海量數(shù)據(jù)，麥肯錫全球研究所給出的定義是：一種規(guī)模大到在獲取、存儲、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍的數(shù)據(jù)集合，具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價值密度低四大特征。數(shù)字經(jīng)濟的要素之一就是大數(shù)據(jù)資源，現(xiàn)在大家聊得最多的大數(shù)據(jù)是基于已經(jīng)存在的...
khlbat
|
814人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個大的工作方向，除了大數(shù)據(jù)平臺應(yīng)用及開發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺集成與運維之外，還有大數(shù)據(jù)平臺架構(gòu)與研發(fā)，除了以上四個大的工作方向之外，還有一個工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺，這部分工作的難度較高，從事這部分工作的研發(fā)級崗位也并不多。現(xiàn)在不少技術(shù)研發(fā)團隊都以Hadoop、Spark平...
zhangxiangliang
|
3499人閱讀
回答:采集記錄足夠多的數(shù)據(jù)，使工作更加針對化和精準化，這是大數(shù)據(jù)嗎？這不是大數(shù)據(jù)而只是數(shù)據(jù)化。什么是大數(shù)據(jù)呢？例如洛杉磯警方曾對以往的刑事案件做了統(tǒng)計，通過算法得出了第二天的高概率犯罪地點，然后有針對性的派警察去該處巡邏，從而使得當(dāng)?shù)氐姆缸铿F(xiàn)象下降20%。這是大數(shù)據(jù)。再比如，經(jīng)濟學(xué)家都認為股票無法預(yù)測，而一位劍橋大學(xué)畢業(yè)的博士搞了個公司，對有史以來幾乎所有的證券交易的數(shù)據(jù)進行記錄，然后通過算法進行分析。...
DevWiki
|
664人閱讀
回答:很高興能夠看到和回答這個問題！如今這個時代，大數(shù)據(jù)，云計算這些熱門概念是人們茶余飯后議論的熱點話題，然而很多人還是搞不清楚什么是大數(shù)據(jù)。今天，每日精彩科技將根據(jù)自己的經(jīng)驗回答這個問題！什么是大數(shù)據(jù)？半個世紀以來，當(dāng)計算機技術(shù)全面融入社會，信息不斷積累，直至變革開始。它不僅充滿了信息，而且加速了信息的增長。在天文學(xué)、遺傳學(xué)等信息爆炸的領(lǐng)域，出現(xiàn)了 大數(shù)據(jù) 的概念。如今，這一概念幾乎適用于人類思維和發(fā)...
guyan0319
|
731人閱讀
本文授權(quán)轉(zhuǎn)載自公眾號蛋蛋團。 01 數(shù)據(jù)中心是什么 數(shù)據(jù)中心，指用于安置計算機系統(tǒng)及相關(guān)部件的設(shè)施，例如電信和儲存系統(tǒng)。 為了滿足自身的業(yè)務(wù)需求，保證數(shù)據(jù)的穩(wěn)定和可靠。無論是互聯(lián)網(wǎng)還是傳統(tǒng)行業(yè)，都會有自己...
...系統(tǒng)，以及很多太短的通用平臺與系統(tǒng)，主要關(guān)注架構(gòu)、數(shù)據(jù)庫、O2O等方面的技術(shù)。 壹佰案例： 作為同時負責(zé)過58同城和58到家業(yè)務(wù)的架構(gòu)師，可否從架構(gòu)方向談下兩項業(yè)務(wù)的技術(shù)難點有何不同？ 沈劍：58同城是一個信息平臺...
大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? ? 根據(jù)IDC的報告，未來十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國人每分鐘寫3條Tweet，而...
?????? 大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? 根據(jù)IDC的報告，未來十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國人每分鐘寫3條...
淺談云計算數(shù)據(jù)中心對布線系統(tǒng)的影響 羅森伯格亞太電子有限公司：孫慧永 在談云計算數(shù)據(jù)中心之前，我們要先了解一下，什么是云計算？云計算是指IT基礎(chǔ)設(shè)施的交付和使用模式，指通過網(wǎng)絡(luò)以按需、易擴展的方式獲得所需...
...項垂直業(yè)務(wù)系統(tǒng)搭建上線、產(chǎn)品端極大豐富用戶投資、大數(shù)據(jù)平臺研究并使用 第三代架構(gòu)特點；SOA治理，使用zookeeper作為注冊中心，dubbo做監(jiān)控和調(diào)度中心；cas實現(xiàn)單點登錄，使用shiro做權(quán)限控制 第四代架構(gòu)特點；全面啟用微服...
...項垂直業(yè)務(wù)系統(tǒng)搭建上線、產(chǎn)品端極大豐富用戶投資、大數(shù)據(jù)平臺研究并使用 第三代架構(gòu)特點；SOA治理，使用zookeeper作為注冊中心，dubbo做監(jiān)控和調(diào)度中心；cas實現(xiàn)單點登錄，使用shiro做權(quán)限控制 第四代架構(gòu)特點；全面啟用微服...
在互聯(lián)網(wǎng)行業(yè)，隨著信息化的普及，數(shù)據(jù)量的暴增使得人們對存儲空間又有了新要求，同時，機器學(xué)習(xí)、人工智能、無人駕駛、工業(yè)仿真等領(lǐng)域的崛起，使得通用CPU在處理海量計算、海量數(shù)據(jù)／圖片時遇到越來越多的性能瓶頸，...
...件，在中小型企業(yè)中應(yīng)用廣泛! MQ衡量指標：服務(wù)性能、數(shù)據(jù)存儲、集群架構(gòu)。 ActiveMQ現(xiàn)在用的比較少，因為ActiveMQ相比其他的MQ的性能來說比較一般。現(xiàn)如今高并發(fā)、大數(shù)據(jù)的應(yīng)用場景隨處可見。如果這時候在MQ的選擇上，那么A...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時根據(jù)訓(xùn)練、推理能力由高到低做了...
余學(xué)文
