數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢(xún)本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話(huà)sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
691人閱讀
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型，負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計(jì)。高性能的數(shù)據(jù)架構(gòu)（High Performance Data Architecture），正是我們架構(gòu)轉(zhuǎn)型的重點(diǎn)。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線(xiàn)上消費(fèi)的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢(shì)，全球銀行業(yè)正迎來(lái)一場(chǎng)聲勢(shì)浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費(fèi)者的生活及行為模式帶來(lái)翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競(jìng)...
Lowky
|
546人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會(huì)涉及事務(wù)，所以數(shù)據(jù)庫(kù)引擎必選innodb，innodb支持事務(wù)，事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開(kāi)啟序列化級(jí)別，這樣就完全隔離事務(wù)，但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2：讀寫(xiě)分離，數(shù)據(jù)庫(kù)分成主庫(kù)和從庫(kù)，主庫(kù)負(fù)責(zé)寫(xiě)數(shù)據(jù)，叢庫(kù)負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫(kù)數(shù)據(jù)一致性問(wèn)題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計(jì)采用冷熱...
Vultr
|
1281人閱讀
回答:目前最可靠的倉(cāng)庫(kù)不是機(jī)械硬盤(pán)，不是ssd，不是u盤(pán)，是光盤(pán)，雖然，市面上已經(jīng)很少見(jiàn)到光盤(pán)，但光盤(pán)目前還是最廉價(jià)最可靠的個(gè)人用存儲(chǔ)介質(zhì)，本人20年前刻錄的dvd光盤(pán)，依然能讀取數(shù)據(jù)，試問(wèn)，還有多少人20年前的硬盤(pán)還健在?目前，容量最大的光盤(pán)是藍(lán)光光盤(pán)，價(jià)格也很低廉，一片容量為23g的刻錄光盤(pán)，最多3元錢(qián)，藍(lán)光刻錄光驅(qū)，也僅300元左右一臺(tái)，僅僅是一塊1t機(jī)械盤(pán)的價(jià)格，但它可存儲(chǔ)的容量，就是它的刻錄壽...
Neilyo
|
2142人閱讀
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的，從單體服務(wù)架構(gòu)發(fā)展到現(xiàn)在的服務(wù)化、微服務(wù)的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務(wù)模塊都是耦合在一個(gè)項(xiàng)目中，開(kāi)發(fā)、部署都在一起；如果其中一個(gè)模塊需要上線(xiàn)升級(jí)，那么所有模塊都要一起啟停；在早期，單體架構(gòu)的項(xiàng)目團(tuán)隊(duì)成員需要是全棧，因?yàn)榍岸恕⒑蠖恕?shù)據(jù)庫(kù)都是一波人負(fù)責(zé)，后來(lái)開(kāi)始進(jìn)行了邏輯分層，團(tuán)隊(duì)也分成了前端 UI 團(tuán)隊(duì)、后端和 DBA 團(tuán)隊(duì)，每個(gè)團(tuán)隊(duì)都有自己負(fù)責(zé)的職責(zé)。然而隨...
khs1994
|
1877人閱讀
回答:到底怎樣的程序員能稱(chēng)為架構(gòu)師？首先要知道架構(gòu)師是做什么的，架構(gòu)師主要職責(zé)是確認(rèn)和評(píng)估系統(tǒng)需求，給出開(kāi)發(fā)規(guī)范，搭建系統(tǒng)實(shí)現(xiàn)的核心構(gòu)架，并澄清技術(shù)細(xì)節(jié)、掃清主要難點(diǎn)的技術(shù)人員。那么怎樣從一個(gè)程序員成為架構(gòu)師呢，我總結(jié)了以下幾個(gè)方面： 意識(shí)方面首先程序員自身想往架構(gòu)師方向發(fā)展，然后換位思考與架構(gòu)師的差距，該如何努力才能符合一個(gè)優(yōu)秀的架構(gòu)師，所以關(guān)注范圍是不同的，程序員專(zhuān)注于具體細(xì)節(jié)，而架構(gòu)師專(zhuān)注于宏觀視...
edgardeng
|
615人閱讀
大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? ? 根據(jù)IDC的報(bào)告，未來(lái)十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬(wàn)億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國(guó)人每分鐘寫(xiě)3條Tweet，而...
?????? 大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? 根據(jù)IDC的報(bào)告，未來(lái)十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬(wàn)億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國(guó)人每分鐘寫(xiě)3條...
... (有墻各位懂的) Laravel簡(jiǎn)單架構(gòu)： 簡(jiǎn)單的小項(xiàng)目可能會(huì)把數(shù)據(jù)庫(kù)查詢(xún)，業(yè)務(wù)邏輯，數(shù)據(jù)傳給View幾乎所有操作都放在Controller，如何項(xiàng)目后期需求變大，最后Controller會(huì)變得很臃腫，難懂，不易維護(hù)（同樣，有些會(huì)把所有增刪改查，...
...為主題，云集了國(guó)內(nèi)外頂尖專(zhuān)家，共同探討云計(jì)算和大數(shù)據(jù)等技術(shù)背景下，如何通過(guò)架構(gòu)創(chuàng)新及各種IT新技術(shù)來(lái)帶動(dòng)企業(yè)轉(zhuǎn)型增效。作為一家專(zhuān)注于云端數(shù)據(jù)倉(cāng)庫(kù)的初創(chuàng)公司，酷克數(shù)據(jù)受邀在SACC2016 數(shù)據(jù)庫(kù)平臺(tái)架構(gòu)及變遷...
大數(shù)據(jù)時(shí)代為數(shù)據(jù)存儲(chǔ)帶來(lái)壓力，越來(lái)越多的組織需要在云計(jì)算的技術(shù)基礎(chǔ)上搭建起能夠存儲(chǔ)大量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)平臺(tái)。云存儲(chǔ)應(yīng)云而生。 所謂云存儲(chǔ)，是指通過(guò)集群應(yīng)用、網(wǎng)格技術(shù)或分布式文件系統(tǒng)等...
...，比如說(shuō)，容器管理、編排、應(yīng)用打包、容器間的網(wǎng)絡(luò)、數(shù)據(jù)快照等； 其次，當(dāng)企業(yè)想構(gòu)建一套網(wǎng)絡(luò)方案，需要精通 Linux 提供的各種高級(jí)網(wǎng)絡(luò)功能，這個(gè)技術(shù)門(mén)檻太高了。特別是對(duì)專(zhuān)注于業(yè)務(wù)開(kāi)發(fā)的 Docker 用戶(hù)而言，這類(lèi)操作...
...迎訪(fǎng)問(wèn)網(wǎng)易云社區(qū)，了解更多網(wǎng)易技術(shù)產(chǎn)品運(yùn)營(yíng)經(jīng)驗(yàn)。 數(shù)據(jù)倉(cāng)庫(kù)作為企業(yè)提供決策支持而構(gòu)建的集成化數(shù)據(jù)環(huán)境，本身并不產(chǎn)生或者消費(fèi)數(shù)據(jù)，基本架構(gòu)包含的是數(shù)據(jù)流入流出的過(guò)程，首先放上一張數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)圖。數(shù)據(jù)倉(cāng)...
云計(jì)算和數(shù)據(jù)倉(cāng)庫(kù)是合理的一對(duì)。云存儲(chǔ)可以按需擴(kuò)展，云可以將大量服務(wù)器貢獻(xiàn)于某一具體任務(wù)。數(shù)據(jù)倉(cāng)庫(kù)通用功能是本地?cái)?shù)據(jù)分析工具，受到計(jì)算和存儲(chǔ) 資源的限制，同時(shí)也受到設(shè)計(jì)者考慮新數(shù)據(jù)源集成的能力的限制。如...
...用性。在二中使用Docker的第二種方式就可以看出，我們將數(shù)據(jù)庫(kù)和Tomcat運(yùn)行在不同的容器中，從某種角度來(lái)說(shuō)，這也降低了模塊之間的耦合性，便于拓展。比如我們要把MySQL替換為oracle，只需要再構(gòu)建一個(gè)oracle鏡像并啟動(dòng)與Tomcat...
...架、開(kāi)源中間件，系統(tǒng)架構(gòu)、項(xiàng)目管理、經(jīng)典架構(gòu)案例、數(shù)據(jù)庫(kù)、常用三方庫(kù)、線(xiàn)上運(yùn)維等知識(shí)。 fullstack-tutorial Github地址： https://github.com/frank-lam/...star: 2.8k介紹: Full Stack Developer Tutorial，后臺(tái)技術(shù)棧/全棧開(kāi)發(fā)/架構(gòu)師之路，秋招...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
