全國咨詢/投訴熱線:400-618-4000

全部 大數據新聞動態 大數據技術文章 大數據常見問題 技術問答

    • 大數據疫情防控平臺搭建教程【傳智播客】

      實戰式教學,綜合運用多種技術,實現從數據爬取到數據分析再到數據可視化全流程。提取碼:oz7r 查看全文>>

      大數據技術文章2020-09-11 |傳智播客 |大數據疫情防控平臺搭建教程

    • Hive2.x壓縮配置教程

      除了創建表時指定保存數據時壓縮,在查詢分析過程中,Map的輸出也可以進行壓縮。由于map任務的輸出需要寫到磁盤并通過網絡傳輸到reducer節點,所以通過使用LZO、LZ4或者Snappy這樣的快速壓縮方式,是可以獲得性能提升的,因為需要傳輸的數據減少了。 查看全文>>

      大數據技術文章2020-07-30 |傳智播客 |Hive2.x壓縮配置教程

    • 大數據實戰之反爬蟲系統視頻教程【大數據培訓】

      通過不斷的訂座但不支付,利用這些虛占的座位進行非法盈利,通過系統日志分析等,發現官網存在大量的非法占座會員及非會員手機號用戶。 為了限制偽裝技術越來越強的爬蟲訪問和惡意占座行為,需要開發大數據防爬工具。 項目采用Lua+Spark+Redis+Hadoop框架搭建,包含狀態監控,反爬指標配置,運營指標監控展示等功能。 查看全文>>

      大數據技術文章2020-06-02 |傳智播客 |反爬蟲系統

    • Spark Streaming框架有什么特點?【大數據培訓】

      Spark Streaming是構建在Spark上的實時計算框架,且是對Spark Core API的一個擴展,它能夠實現對流數據進行實時處理,并具有很好的可擴展性、高吞吐量和容錯性。Spark Streaming具有如下顯著特點。 查看全文>>

      大數據技術文章2020-05-29 |Spark Streaming框架特點 |Spark Streaming框架

    • 大數據實時計算的框架有哪些?【大數據培訓】

      近年來,Web應用、網絡監控、傳感監測、電信金融、生產制造等領域,對數據實時處理的需求不斷增強,而Spark中的SparkStreaming實時計算框架就是為了實現對數據實時處理的需求而設計的。在電子商務中,淘寶、京東等網站從用戶點擊的行為(如加入購物車)和瀏覽的歷史記錄中發現用戶的購買意圖和興趣,然后通過Sparkstreaming實時計算框架分析處理,為之推薦相關商品,從而有效地提高商品的銷售量,同時也增加了用戶的滿意度,可謂是“一舉兩得”。 查看全文>>

      大數據技術文章2020-05-29 |傳智播客 |大數據實時計算框架

    • 2分鐘快速了解kafka[大數據培訓]

      Kafka是一個高吞吐量的分布式發布訂閱消息系統,它在實時計算系統中有著非常強大的功能。通常情況下,使用Kafka構建系統或應用程序之間的數據管道,用來轉換或響應實時數據,使數據能夠及時地進行業務計算,得出相應結果。 查看全文>>

      大數據技術文章2020-05-29 |傳智播客 |kafka

    • 點對點消息傳遞模式與發布訂閱消息傳遞模式【大數據培訓】

      大數據系統面臨的首要困難是海量數據之間該如何進行傳輸。為了解決大數據集的傳輸困難,就必須要構建一個消息系統。一個消息系統負責將數據從一個應用程序傳遞到另外一個應用程序中,應用程序只關注數據,無須關注數據在多個應用之間是如何傳遞的,分布式消息傳遞基于可靠的消息隊列,在客戶端應用和消息系統之間異步傳遞消息。 查看全文>>

      大數據技術文章2020-05-29 |傳智播客 |消息傳遞模式

    • Spark與Hadoop有哪些區別?【大數據培訓】

      Hadoop與Spark都是大數據計算框架,但是兩者各有自己的優勢,Spark與Hadoop的區別主要有以下幾點。 查看全文>>

      大數據技術文章2020-04-24 |傳智播客 |Spark與Hadoop的區別

    << < 1 2 3 4 5 6 7 8 9 ... 29 > >>
人妻系列无码专区_漂亮人妻被中出中文字幕_人妻中文制服巨乳中文