數據湖架構SEARCH AGGREGATION
回答:這個太范化了吧。大數據架構選擇的方案就有很多，海量數據的即席查詢本省就是業內目前的痛點，暫時沒有太好的解決方案，kylin等框架也只是一個折中方案，如果你不是要求海量數據分析的秒級響應的話sparkSql、presto等都是不錯的方案，分鐘級別可以返回。
Paul_King
|
683人閱讀
回答:現在有幸參與傳統銀行數字化轉型，負責技術架構部分的轉型設計。高性能的數據架構（High Performance Data Architecture），正是我們架構轉型的重點。隨著科技的蓬勃發展、社交網絡的廣泛使用、線上消費的普及、數據挖掘的技術提升等大趨勢，全球銀行業正迎來一場聲勢浩大的數字化創新浪潮。數字化為消費者的生活及行為模式帶來翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競...
Lowky
|
535人閱讀
回答:以mysql為列：1：支撐高并發系統，一定會涉及事務，所以數據庫引擎必選innodb，innodb支持事務，事務級別根據業務而定，如果業務數據一致性要求很高，事務就開啟序列化級別，這樣就完全隔離事務，但是會導致鎖資源競爭加劇。mysql的性能有一定的降低。2：讀寫分離，數據庫分成主庫和從庫，主庫負責寫數據，叢庫負責讀數據。注意主從數據庫數據一致性問題。3：冷熱數據分離，美團，餓了么部分設計采用冷熱...
Vultr
|
1273人閱讀
回答:軟件產品架構是不斷迭代演化的，從單體服務架構發展到現在的服務化、微服務的架構。單體架構單體架構就是所有的業務模塊都是耦合在一個項目中，開發、部署都在一起；如果其中一個模塊需要上線升級，那么所有模塊都要一起啟停；在早期，單體架構的項目團隊成員需要是全棧，因為前端、后端、數據庫都是一波人負責，后來開始進行了邏輯分層，團隊也分成了前端 UI 團隊、后端和 DBA 團隊，每個團隊都有自己負責的職責。然而隨...
khs1994
|
1871人閱讀
回答:超融合是什么參考維基百科中的超融合定義：超融合基礎架構（hyper-converged infrastructure）是一個軟件定義的 IT 基礎架構，它可虛擬化常見硬件定義系統的所有元素。HCI 包含的最小集合是：虛擬化計算（hypervisor），虛擬存儲（SDS）和虛擬網絡。HCI 通常運行在標準商用服務器之上。超融合基礎架構（hyper-converged infrastructure）與...
mdluo
|
1018人閱讀
回答:從系統架構本身來說，一般系統優化主要從三個方面入手，數據持久層、業務邏輯層和前端展示層。數據持久層限制系統性能主要有兩個方面，一是數據庫自身的性能，二是對數據庫操作的方式，數據庫自身相對簡單，一般通過優化配置、采用高可用方案、搭建集群或者使用性能更好的數據庫來提升性能；數據庫操作主要是數據庫讀寫操作，可以通過SQL優化的方式來提升讀寫速度，或者通過緩存的方式減低并發、提升性能。業務邏輯層代碼層面常...
senntyou
|
1094人閱讀
數據湖（Data Lake)，湖倉一體（Data Lakehouse）儼然已經成為了大數據領域最為火熱的流行詞，在接受這些流行詞洗禮的時候，身為技術人員我們往往會發出這樣的疑問，這是一種新的技術嗎，還是僅僅只是概念上的翻新（新瓶裝舊...
...面實現彈性能力的云平臺、第一個采用容器架構來支撐大數據能力的平臺、以及去年我們提出的在云中交付機器學習人工智能這樣的業務能力。截至2017年底，品高云的產品激活量已達到了3萬臺，其中最長的客戶穩定使用時間已...
...各個微服務可被獨立部署，服務間是松耦合的關系，以及數據和治理的去中心化管理。微服務能夠幫助企業應對業務復雜、頻繁更新以及團隊規模龐大帶來的挑戰，實現IT對業務創新的驅動。 1月12日，網易云主辦的微服務實踐...
當前，大數據的價值已無需贅述，作為衡量一個公司核心能力的最底層標準，數據的建設也面臨著諸多難題。為了幫助企業用戶解決大數據分析門檻高、效率低的問題，UCloud USQL數據湖分析應運而生，可輕松完成面向海量數據的...
...云計算的一小步，但可能是存儲行業的一大步。 關于數據存儲，學究們可以追溯到遠古時期最早的結繩計數，或是以龜甲上刻下的第一個字為源頭……時間和方式可能并不重要，重要的是數據存儲自此而始。 對于現代人來說...
...、部署多云戰略、將移動應用程序納入云端、構建可行的數據湖，以及使用數據的民主化。這些分析工具對于幫助行業部門成為人工智能驅動型企業至關重要。人工智能不僅僅是一種技術，也是一種不可忽視的商業模式轉變。云...
...個新名詞了？先說我的想法，其實還是用戶需求驅動數據服務，大家開始關注 Data Lake 的根本原因是用戶需求發生了質變，過去的數據倉庫模式以及涉及到的相關組件沒有辦法滿足日益進步的用戶需求。趨勢這里聊一個很重...
...631.png style=max-width:650px/>1、數據結構：數據倉庫只能存儲經過處理和提煉的數據，而數據湖存儲尚未出于某種目的處理的原始數據。因此，數據湖需要比數據倉庫大得多的存儲容量，且數據靈活、分...
評論
收藏
...欠東風。現在公共云混戰，我想說，無災備不上云，保護數據，未雨綢繆，帶了雨傘，還需雨衣。未雨綢繆，到底是帶雨傘還是雨衣呢？時代在變，人的追求也在變。隨著公共云對企業用戶的影響加深，一大批上云企業越來越重...
...最近吳寧川一篇《厲害了，螞蟻金服！創造了中國自己的數據庫OceanBase》報道了OceanBase誕生的前因后果。內容非常詳實，值得分享。同時自己也分享幾點雜想： 第一，殺熟不僅僅是大數據時代的產物 之前從某網平臺爆出的訂購...
ChatGPT和Sora等AI大模型應用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關性能圖表。同時根據訓練、推理能力由高到低做了...
