簡單大數(shù)據(jù)架構(gòu)SEARCH AGGREGATION
回答:這個太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點，暫時沒有太好的解決方案，kylin等框架也只是一個折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級響應(yīng)的話sparkSql、presto等都是不錯的方案，分鐘級別可以返回。
Paul_King
|
785人閱讀
回答:什么是大數(shù)據(jù)及應(yīng)用？大數(shù)據(jù)即為海量數(shù)據(jù)。人類生活在三維空間中，一草一木，一山一水，人類活動的行為軌跡，都能用數(shù)據(jù)來表達(dá)。如企業(yè)的生產(chǎn)運營，商品標(biāo)準(zhǔn)。政府的管理決策，消費者的消費水平，消費習(xí)慣。地理環(huán)境的一條公路，一條河流等等。每方面都有每方面的大數(shù)據(jù)。每個行業(yè)都有每個行業(yè)的大數(shù)據(jù)。通過各企業(yè)，行業(yè)，社會主體等等數(shù)據(jù)的集成。形成了概念更大，更有價值的大數(shù)據(jù)流。通過宇宙萬物是互聯(lián)的原理。以及邏輯關(guān)系的...
宋華
|
1291人閱讀
回答:1.數(shù)據(jù)量太大，比如上億，就用oracle，優(yōu)點上億數(shù)據(jù)對Oracle來說輕飄飄的，也不用太多優(yōu)化配置，缺點安裝比較麻煩，上手比較慢。2.數(shù)據(jù)量較大，比如千萬級，用postgresql，它號稱對標(biāo)Oracle，處理千萬級數(shù)據(jù)還是可以的，也是易學(xué)易用。3.數(shù)據(jù)量一般，比如百萬級，用mysql，這個級別的數(shù)據(jù)量mysql處理還是比較快的。4.數(shù)據(jù)量較小，比如十萬以下，sqlite、access都可以。...
yearsj
|
2130人閱讀
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型，負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計。高性能的數(shù)據(jù)架構(gòu)（High Performance Data Architecture），正是我們架構(gòu)轉(zhuǎn)型的重點。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線上消費的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢，全球銀行業(yè)正迎來一場聲勢浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費者的生活及行為模式帶來翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競...
Lowky
|
694人閱讀
回答:操作簡單的現(xiàn)成數(shù)據(jù)庫？這個當(dāng)然是有的，下面我簡單介紹3個非常輕便靈活的關(guān)系型數(shù)據(jù)庫，分別是access、sqlite和mysql，對于日常使用來說非常容易掌握，感興趣的朋友可以嘗試一下：office自帶access這是windows office組件自帶的一個輕量級關(guān)系型數(shù)據(jù)庫，具有強(qiáng)大的數(shù)據(jù)處理能力，利用access的查詢功能，可以輕松的進(jìn)行各類文件匯總和統(tǒng)計分析，同時支持各種軟件開發(fā)，包括生產(chǎn)...
livem
|
977人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會涉及事務(wù)，所以數(shù)據(jù)庫引擎必選innodb，innodb支持事務(wù)，事務(wù)級別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開啟序列化級別，這樣就完全隔離事務(wù)，但是會導(dǎo)致鎖資源競爭加劇。mysql的性能有一定的降低。2：讀寫分離，數(shù)據(jù)庫分成主庫和從庫，主庫負(fù)責(zé)寫數(shù)據(jù)，叢庫負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫數(shù)據(jù)一致性問題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計采用冷熱...
Vultr
|
1582人閱讀
...式檢索-Solr，在研究分布索引的時候發(fā)現(xiàn)單機(jī)索引是相對簡單的，我們提供針對二級索引采取內(nèi)置的分布式Region的分布式架構(gòu)，針對全文索引采取外置Solr分布式索引方案第六層：建設(shè)在分布式KV之上，有NewSQL套件、時空套件、時...
...的服務(wù)治理機(jī)制。 服務(wù)化框架平臺早期，規(guī)模小、結(jié)構(gòu)簡單。伴隨公司互聯(lián)網(wǎng)轉(zhuǎn)型，用戶規(guī)模高速增長、業(yè)務(wù)增多，平臺關(guān)系復(fù)雜、擴(kuò)展難、開發(fā)效率低，原有架構(gòu)完全無法服務(wù)大規(guī)模的Flyme用戶。 為了減少業(yè)務(wù)依賴、提升集...
...更大量的工作負(fù)載、持續(xù)負(fù)載以及批負(fù)載、操作性查詢、簡單報表和復(fù)雜的分析，所有功能均在同一個平臺上運行。與上一代產(chǎn)品相比，動態(tài)企業(yè)級數(shù)據(jù)倉庫5650的性能提高了43%，占地面積保持不變，減少了能源消耗和空間需求...
...大量的工作 負(fù)載、持續(xù)負(fù)載以及批負(fù)載、操作性查詢、簡單報表和復(fù)雜的分析，所有功能均在同一個平臺上運行。與上一代產(chǎn)品相比，動態(tài)企業(yè)級數(shù)據(jù)倉庫5650的性能提高 了43%，占地面積保持不變，減少了能源消耗和空間需求。...
...點如果不是出自某廠家或者供應(yīng)商，也太偏頗了。我覺得簡單看兩種技術(shù)適合不同規(guī)模，中小規(guī)模（包括平臺規(guī)模，也包括人力資源規(guī)模）下超融合優(yōu)勢明顯，大規(guī)模分布式存儲優(yōu)勢更大。良好的設(shè)計，恰當(dāng)?shù)钠胶獠攀顷P(guān)鍵，沒...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
營銷賬號總被封？TK直播頻繁掉線？雙ISP靜態(tài)住宅IP+輕量云主機(jī)打包套餐來襲，確保開出來的云主機(jī)不...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
