回答:這個太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多,海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點,暫時沒有太好的解決方案,kylin等框架也只是一個折中方案,如果你不是要求海量數(shù)據(jù)分析的秒級響應的話sparkSql、presto等都是不錯的方案,分鐘級別可以返回。
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型,負責技術(shù)架構(gòu)部分的轉(zhuǎn)型設計。高性能的數(shù)據(jù)架構(gòu)(High Performance Data Architecture),正是我們架構(gòu)轉(zhuǎn)型的重點。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡的廣泛使用、線上消費的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢,全球銀行業(yè)正迎來一場聲勢浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費者的生活及行為模式帶來翻天覆地的變化,也孵化出一批新型的金融科技(Fintech)競...
回答:以mysql為列:1:支撐高并發(fā)系統(tǒng),一定會涉及事務,所以數(shù)據(jù)庫引擎必選innodb,innodb支持事務,事務級別根據(jù)業(yè)務而定,如果業(yè)務數(shù)據(jù)一致性要求很高,事務就開啟序列化級別,這樣就完全隔離事務,但是會導致鎖資源競爭加劇。mysql的性能有一定的降低。2:讀寫分離,數(shù)據(jù)庫分成主庫和從庫,主庫負責寫數(shù)據(jù),叢庫負責讀數(shù)據(jù)。注意主從數(shù)據(jù)庫數(shù)據(jù)一致性問題。3:冷熱數(shù)據(jù)分離,美團,餓了么部分設計采用冷熱...
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的,從單體服務架構(gòu)發(fā)展到現(xiàn)在的服務化、微服務的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務模塊都是耦合在一個項目中,開發(fā)、部署都在一起;如果其中一個模塊需要上線升級,那么所有模塊都要一起啟停;在早期,單體架構(gòu)的項目團隊成員需要是全棧,因為前端、后端、數(shù)據(jù)庫都是一波人負責,后來開始進行了邏輯分層,團隊也分成了前端 UI 團隊、后端和 DBA 團隊,每個團隊都有自己負責的職責。然而隨...
回答:超融合是什么參考維基百科中的超融合定義:超融合基礎(chǔ)架構(gòu)(hyper-converged infrastructure)是一個軟件定義的 IT 基礎(chǔ)架構(gòu),它可虛擬化常見硬件定義系統(tǒng)的所有元素。HCI 包含的最小集合是:虛擬化計算(hypervisor),虛擬存儲(SDS)和虛擬網(wǎng)絡。HCI 通常運行在標準商用服務器之上。超融合基礎(chǔ)架構(gòu)(hyper-converged infrastructure)與...
回答:從系統(tǒng)架構(gòu)本身來說,一般系統(tǒng)優(yōu)化主要從三個方面入手,數(shù)據(jù)持久層、業(yè)務邏輯層和前端展示層。數(shù)據(jù)持久層限制系統(tǒng)性能主要有兩個方面,一是數(shù)據(jù)庫自身的性能,二是對數(shù)據(jù)庫操作的方式,數(shù)據(jù)庫自身相對簡單,一般通過優(yōu)化配置、采用高可用方案、搭建集群或者使用性能更好的數(shù)據(jù)庫來提升性能;數(shù)據(jù)庫操作主要是數(shù)據(jù)庫讀寫操作,可以通過SQL優(yōu)化的方式來提升讀寫速度,或者通過緩存的方式減低并發(fā)、提升性能。業(yè)務邏輯層代碼層面常...
...日后臺架構(gòu)專場的出品人我今天給大家?guī)怼稑?gòu)造高可靠海量用戶服務-SNG數(shù)億級日活躍業(yè)務后臺核心技術(shù)揭秘》,一起探討怎么從可用性的維度提升海量服務的可靠性及海量服務的故障處理方式,包括:SNG后臺架構(gòu)的概覽;面...
...音樂,圖片,視頻監(jiān)控文件,軟件,鏡像,掃描件等其他海量文件的存儲,這些都可以使用,主要還是易用性跟性價比。 分享三: 從架構(gòu)來看,云存儲比緊耦合設計的傳統(tǒng)存儲有更好的橫向擴展性,這樣在容量和性能上有...
...音樂,圖片,視頻監(jiān)控文件,軟件,鏡像,掃描件等其他海量文件的存儲,這些都可以使用,主要還是易用性跟性價比。分享三:從架構(gòu)來看,云存儲比緊耦合設計的傳統(tǒng)存儲有更好的橫向擴展性,這樣在容量和性能上有更大的...
...微云、QQ空間相冊等的運維工作。 12月16日,首期沙龍海量運維實踐大曝光在騰訊大廈圓滿舉行。沙龍出品人騰訊運維技術(shù)總監(jiān)、復旦大學客座講師、DevOps專家梁定安,講師騰訊手機QQ運維負責人郭智文,騰訊高級工程師魏旸...
...打造極致的技術(shù)基礎(chǔ)和質(zhì)量口碑。 12月16日,首期沙龍海量運維實踐大曝光在騰訊大廈圓滿舉行。沙龍出品人騰訊運維技術(shù)總監(jiān)、復旦大學客座講師、DevOps專家梁定安,講師騰訊手機QQ運維負責人郭智文,騰訊高級工程師魏...
...0年,曾師從圖靈獎獲得者Jim Grey,還在惠普實驗室從事過海量并行內(nèi)存數(shù)據(jù)庫開發(fā),根正苗紅,習得一身硬本事;回國后的10年,歷任華勝天成CTO、惠普大中華區(qū)數(shù)據(jù)挖掘總監(jiān)、SUN/ORACLE大中華區(qū)服務總裁,創(chuàng)造過一年翻22倍,近1...
... 冰河出版的技術(shù)圖書 即將出版的《深入理解XXXXXXXXX》 《海量數(shù)據(jù)處理與大數(shù)據(jù)技術(shù)實戰(zhàn)》 《MySQL技術(shù)大全:開發(fā)、優(yōu)化與運維實戰(zhàn)》 《深入理解高并發(fā)編程》 《并發(fā)編程核心知識》 《冰河的滲透實戰(zhàn)筆記》 《我要進大廠系...
...了100%的 CAP。 云原生數(shù)據(jù)庫 POLARDB:極致彈性+兼容性 為海量數(shù)據(jù)和海量并發(fā)而生 前面介紹了數(shù)據(jù)庫市場背景和云原生數(shù)據(jù)庫的基本要素,接下來我將結(jié)合阿里云 POLARDB 以及 AnalyticDB 兩款數(shù)據(jù)庫系統(tǒng),分享以上技術(shù)的具體落地情...
ChatGPT和Sora等AI大模型應用,將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
一、活動亮點:全球31個節(jié)點覆蓋 + 線路升級,跨境業(yè)務福音!爆款云主機0.5折起:香港、海外多節(jié)點...
大模型的訓練用4090是不合適的,但推理(inference/serving)用4090不能說合適,...