簡(jiǎn)單大數(shù)據(jù)架構(gòu)SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
691人閱讀
回答:什么是大數(shù)據(jù)及應(yīng)用？大數(shù)據(jù)即為海量數(shù)據(jù)。人類生活在三維空間中，一草一木，一山一水，人類活動(dòng)的行為軌跡，都能用數(shù)據(jù)來(lái)表達(dá)。如企業(yè)的生產(chǎn)運(yùn)營(yíng)，商品標(biāo)準(zhǔn)。政府的管理決策，消費(fèi)者的消費(fèi)水平，消費(fèi)習(xí)慣。地理環(huán)境的一條公路，一條河流等等。每方面都有每方面的大數(shù)據(jù)。每個(gè)行業(yè)都有每個(gè)行業(yè)的大數(shù)據(jù)。通過(guò)各企業(yè)，行業(yè)，社會(huì)主體等等數(shù)據(jù)的集成。形成了概念更大，更有價(jià)值的大數(shù)據(jù)流。通過(guò)宇宙萬(wàn)物是互聯(lián)的原理。以及邏輯關(guān)系的...
宋華
|
862人閱讀
回答:1.數(shù)據(jù)量太大，比如上億，就用oracle，優(yōu)點(diǎn)上億數(shù)據(jù)對(duì)Oracle來(lái)說(shuō)輕飄飄的，也不用太多優(yōu)化配置，缺點(diǎn)安裝比較麻煩，上手比較慢。2.數(shù)據(jù)量較大，比如千萬(wàn)級(jí)，用postgresql，它號(hào)稱對(duì)標(biāo)Oracle，處理千萬(wàn)級(jí)數(shù)據(jù)還是可以的，也是易學(xué)易用。3.數(shù)據(jù)量一般，比如百萬(wàn)級(jí)，用mysql，這個(gè)級(jí)別的數(shù)據(jù)量mysql處理還是比較快的。4.數(shù)據(jù)量較小，比如十萬(wàn)以下，sqlite、access都可以。...
yearsj
|
1543人閱讀
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型，負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計(jì)。高性能的數(shù)據(jù)架構(gòu)（High Performance Data Architecture），正是我們架構(gòu)轉(zhuǎn)型的重點(diǎn)。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線上消費(fèi)的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢(shì)，全球銀行業(yè)正迎來(lái)一場(chǎng)聲勢(shì)浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費(fèi)者的生活及行為模式帶來(lái)翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競(jìng)...
Lowky
|
546人閱讀
回答:操作簡(jiǎn)單的現(xiàn)成數(shù)據(jù)庫(kù)？這個(gè)當(dāng)然是有的，下面我簡(jiǎn)單介紹3個(gè)非常輕便靈活的關(guān)系型數(shù)據(jù)庫(kù)，分別是access、sqlite和mysql，對(duì)于日常使用來(lái)說(shuō)非常容易掌握，感興趣的朋友可以嘗試一下：office自帶access這是windows office組件自帶的一個(gè)輕量級(jí)關(guān)系型數(shù)據(jù)庫(kù)，具有強(qiáng)大的數(shù)據(jù)處理能力，利用access的查詢功能，可以輕松的進(jìn)行各類文件匯總和統(tǒng)計(jì)分析，同時(shí)支持各種軟件開(kāi)發(fā)，包括生產(chǎn)...
livem
|
758人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會(huì)涉及事務(wù)，所以數(shù)據(jù)庫(kù)引擎必選innodb，innodb支持事務(wù)，事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開(kāi)啟序列化級(jí)別，這樣就完全隔離事務(wù)，但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2：讀寫(xiě)分離，數(shù)據(jù)庫(kù)分成主庫(kù)和從庫(kù)，主庫(kù)負(fù)責(zé)寫(xiě)數(shù)據(jù)，叢庫(kù)負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫(kù)數(shù)據(jù)一致性問(wèn)題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計(jì)采用冷熱...
Vultr
|
1281人閱讀
...式檢索-Solr，在研究分布索引的時(shí)候發(fā)現(xiàn)單機(jī)索引是相對(duì)簡(jiǎn)單的，我們提供針對(duì)二級(jí)索引采取內(nèi)置的分布式Region的分布式架構(gòu)，針對(duì)全文索引采取外置Solr分布式索引方案第六層：建設(shè)在分布式KV之上，有NewSQL套件、時(shí)空套件、時(shí)...
...的服務(wù)治理機(jī)制。 服務(wù)化框架平臺(tái)早期，規(guī)模小、結(jié)構(gòu)簡(jiǎn)單。伴隨公司互聯(lián)網(wǎng)轉(zhuǎn)型，用戶規(guī)模高速增長(zhǎng)、業(yè)務(wù)增多，平臺(tái)關(guān)系復(fù)雜、擴(kuò)展難、開(kāi)發(fā)效率低，原有架構(gòu)完全無(wú)法服務(wù)大規(guī)模的Flyme用戶。 為了減少業(yè)務(wù)依賴、提升集...
...更大量的工作負(fù)載、持續(xù)負(fù)載以及批負(fù)載、操作性查詢、簡(jiǎn)單報(bào)表和復(fù)雜的分析，所有功能均在同一個(gè)平臺(tái)上運(yùn)行。與上一代產(chǎn)品相比，動(dòng)態(tài)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)5650的性能提高了43%，占地面積保持不變，減少了能源消耗和空間需求...
...大量的工作 負(fù)載、持續(xù)負(fù)載以及批負(fù)載、操作性查詢、簡(jiǎn)單報(bào)表和復(fù)雜的分析，所有功能均在同一個(gè)平臺(tái)上運(yùn)行。與上一代產(chǎn)品相比，動(dòng)態(tài)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)5650的性能提高 了43%，占地面積保持不變，減少了能源消耗和空間需求。...
...點(diǎn)如果不是出自某廠家或者供應(yīng)商，也太偏頗了。我覺(jué)得簡(jiǎn)單看兩種技術(shù)適合不同規(guī)模，中小規(guī)模（包括平臺(tái)規(guī)模，也包括人力資源規(guī)模）下超融合優(yōu)勢(shì)明顯，大規(guī)模分布式存儲(chǔ)優(yōu)勢(shì)更大。良好的設(shè)計(jì)，恰當(dāng)?shù)钠胶獠攀顷P(guān)鍵，沒(méi)...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
