首頁(yè)最新資訊

全部 新聞動(dòng)態(tài) 技術(shù)文章 常見問(wèn)題 技術(shù)問(wèn)答

    • Spark SQL用法建議【大數(shù)據(jù)文章】

      參數(shù)默認(rèn)false。當(dāng)設(shè)為true，parquet會(huì)聚合所有parquet文件的schema，否則是直接讀取parquet summary文件，或者在沒(méi)有parquet summary文件時(shí)候隨機(jī)選擇一個(gè)文件的schema作為最終的schema。查看全文>>

      技術(shù)文章2021-01-14 |黑馬程序員 |Spark SQL性能調(diào)優(yōu),操作Spark SQLt調(diào)優(yōu)

    • Kafka數(shù)據(jù)是存在磁盤上還是內(nèi)存上？

      Kafka是一個(gè)高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)，它在實(shí)時(shí)計(jì)算系統(tǒng)中有著非常強(qiáng)大的功能。把topic中一個(gè)parition大文件分成多個(gè)小文件段，通過(guò)多個(gè)小文件段，就容易定期清除或刪除已經(jīng)消費(fèi)完文件，減少磁盤占用。查看全文>>

      技術(shù)文章2021-01-12 |黑馬程序員 |Kafka,Kafka數(shù)據(jù)存儲(chǔ)

    • Hadoop實(shí)現(xiàn)join的幾種方法【大數(shù)據(jù)開發(fā)面試】

      Hadoop實(shí)現(xiàn)join有三種方法，第一種是reduce side join，它是一種最簡(jiǎn)單的join方式，其主要思想如下：查看全文>>

      技術(shù)文章2021-01-12 |黑馬程序員 |實(shí)現(xiàn)join,Hadoop,大數(shù)據(jù)面試題

    • Spark RDD的兩種依賴關(guān)系？

      在Spark中，不同的RDD之間具有依賴的關(guān)系。RDD與它所依賴的RDD的依賴關(guān)系有兩種類型，分別是窄依賴（narrow dependency）和寬依賴（wide dependency）。查看全文>>

      技術(shù)文章2021-01-05 |黑馬程序員 |spark RDD,RDD的兩種依賴關(guān)系

    • 大數(shù)據(jù)離散流是什么？它的內(nèi)部結(jié)構(gòu)是怎樣的？

      Spark Streaming提供了一個(gè)高級(jí)抽象的流，即DStream（離散流）。DStream表示連續(xù)的數(shù)據(jù)流，可以通過(guò)Kafka、Flume和Kinesis等數(shù)據(jù)源創(chuàng)建，也可以通過(guò)現(xiàn)有DStream的高級(jí)操作來(lái)創(chuàng)建。查看全文>>

      技術(shù)文章2021-01-05 |黑馬程序員 |DStream,離散流,DStream是什么

    • CSS3顏色不透明度的設(shè)置方法【web前端】

      在CSS3之前，我們?cè)O(shè)置顏色的方式包含十六進(jìn)制顏色(如#F00)、rgb模式顏色、或指定顏色的英文名稱(如red)，但這些方法無(wú)法改變顏色的不透明度。在CSS3中新增了兩種設(shè)置顏色不透明度的方法，一種是使用rgba模式設(shè)置，另一種是使用opacity屬性設(shè)置。下面將詳細(xì)講解兩種設(shè)置方法。查看全文>>

      技術(shù)文章2020-12-30 |黑馬程序員 |CSS3顏色不透明度設(shè)置
和我們?cè)诰€交談！