架構大數據SEARCH AGGREGATION
回答:這個太范化了吧。大數據架構選擇的方案就有很多，海量數據的即席查詢本省就是業內目前的痛點，暫時沒有太好的解決方案，kylin等框架也只是一個折中方案，如果你不是要求海量數據分析的秒級響應的話sparkSql、presto等都是不錯的方案，分鐘級別可以返回。
Paul_King
|
683人閱讀
回答:現在有幸參與傳統銀行數字化轉型，負責技術架構部分的轉型設計。高性能的數據架構（High Performance Data Architecture），正是我們架構轉型的重點。隨著科技的蓬勃發展、社交網絡的廣泛使用、線上消費的普及、數據挖掘的技術提升等大趨勢，全球銀行業正迎來一場聲勢浩大的數字化創新浪潮。數字化為消費者的生活及行為模式帶來翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競...
Lowky
|
535人閱讀
回答:以mysql為列：1：支撐高并發系統，一定會涉及事務，所以數據庫引擎必選innodb，innodb支持事務，事務級別根據業務而定，如果業務數據一致性要求很高，事務就開啟序列化級別，這樣就完全隔離事務，但是會導致鎖資源競爭加劇。mysql的性能有一定的降低。2：讀寫分離，數據庫分成主庫和從庫，主庫負責寫數據，叢庫負責讀數據。注意主從數據庫數據一致性問題。3：冷熱數據分離，美團，餓了么部分設計采用冷熱...
Vultr
|
1272人閱讀
回答:目前階段大數據技術及體系已經逐漸趨于成熟，不再是以概念貫穿的模式，大數據越來越多的被使用，伴隨互聯網化的發展更多的企業信息化已經由IT時代轉變為DT時代，以數據為核心，用數據進行決策，基于數據驅動企業的創新與發展，相信在將來大數據也會有更廣泛的應用空間，對于大數據的理解主要分為以下幾個層面。1.數據來源：對于大數據時代而言更多強調基于業務數據的沉淀，在一定規模的數據上進行進一步的分析、處理、轉換，...
arashicage
|
1241人閱讀
回答:在大數據領域大概有四個大的工作方向，除了大數據平臺應用及開發、大數據分析與應用和大數據平臺集成與運維之外，還有大數據平臺架構與研發，除了以上四個大的工作方向之外，還有一個工作方向是大數據技術推廣和培訓，這部分工作目前也有不少人在從事。大數據平臺架構與研發主要的工作內容是研發底層的大數據平臺，這部分工作的難度較高，從事這部分工作的研發級崗位也并不多。現在不少技術研發團隊都以Hadoop、Spark平...
zhangxiangliang
|
3499人閱讀
回答:近幾年，大數據的概念逐漸深入人心，大數據的趨勢越來越火爆。但是，大數據到底是個啥？怎么樣才能玩好大數據呢？大數據的基本含義就是海量數據，麥肯錫全球研究所給出的定義是：一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統數據庫軟件工具能力范圍的數據集合，具有海量的數據規模、快速的數據流轉、多樣的數據類型和價值密度低四大特征。數字經濟的要素之一就是大數據資源，現在大家聊得最多的大數據是基于已經存在的...
khlbat
|
814人閱讀
...些問題： ?? ●?你擁有的數據到底有多龐大，你目前的架構能保證擴展這些量嗎？ ?? ●?你的數據在結構、半結構、非結構方面有什么特征？目前來說，你的系統架構和技術是否能支撐這些不同類型的數據？ ?? ●?你的數據...
12月22日至23日，高可用架構和msup聯合主辦的GIAC 全球互聯網架構大會將于上海光大會展中心舉行。GIAC 全球互聯網架構大會是高可用架構技術社區推廣的面向架構師、技術負責人及高端技術從業人員的技術架構大會。GIAC于2016...
12月22日至23日，高可用架構和msup聯合主辦的GIAC 全球互聯網架構大會將于上海光大會展中心舉行。GIAC 全球互聯網架構大會是高可用架構技術社區推廣的面向架構師、技術負責人及高端技術從業人員的技術架構大會。GIAC于2016...
...驟升導致的另一方資源枯竭，從而影響性能并在整個基礎架構中產生的漣漪效應；和在超融合部署方式在集群規模較大后，網絡、硬盤、服務器發生故障的概率都會增大；以及數據重刪、壓縮、加密糾刪碼等功能、故障的自修復...
2017年12月22日-23日，由高可用架構技術社區聯合麥思博（msup）有限公司共同主辦的 GIAC全球互聯網架構大會在上海光大會展中心成功舉行。 本屆全球互聯網架構大會以改變未來的互聯網構建方式為主題，分為經典架構、D...
2017年12月22日-23日，由高可用架構技術社區聯合麥思博（msup）有限公司共同主辦的 GIAC全球互聯網架構大會在上海光大會展中心成功舉行。 本屆全球互聯網架構大會以改變未來的互聯網構建方式為主題，分為經典架構、D...
...絡特性可以通過升級設備或線路來提升，但是有些與網絡架構有關。升級或者改動網絡架構帶來的風險和成本是巨大的，因此在架設數據中心初始，網絡架構的選擇和設計尤其需要謹慎。 那么，從過去的傳統數據中心，到如今...
...的大數據增長。?? 毫無疑問，大數據將挑戰企業的存儲架構及數據中心基礎設施等，也會引發云計算、數據倉庫、數據挖掘、商業智能等應用的連鎖反應。2011年企業會將更多的多TB(1TB=1000GB)數據集用于商務智能和商務分析;到20...
...大數據增長。 毫無疑問，大數據將挑戰企業的存儲架構及數據中心基礎設施等，也會引發云計算、數據倉庫、數據挖掘、商業智能等應用的連鎖反應。2011年企業會將更多 的多TB(1TB=1000GB)數據集用于商務智能和商務分析;到202...
摘要：友盟大數據平臺的架構借鑒了Lambda架構思想，數據接入層讓Kafka集群承擔，后面由Storm消費，存儲在MongoDB里面，通過Kafka自帶的Mirror功能同步，兩個Kafka集群，可以分離負載；計算有離線和實時兩部分，實時是Storm，離線...
ChatGPT和Sora等AI大模型應用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關性能圖表。同時根據訓練、推理能力由高到低做了...
