3月樂活體驗 --- Cloudera + HareDB 打造企業大數據平台

• 台灣微軟 開發體驗暨平台推廣事業部 技術傳教士 李匡正

  • 非結構化資料

  • Azure HDInsight (Apache Hadoop/HBase in Azure)

• 簡報

  • https://onedrive.live.com/?authkey=%21ANHLNERz4PQMLoU&cid=C3790CBE06BD94A6&id=C3790CBE06BD94A6%21652&parId=C3790CBE06BD94A6%21650&o=OneUp

  • https://onedrive.live.com/?authkey=%21AIZDZtoihGDKbmg&cid=C3790CBE06BD94A6&id=C3790CBE06BD94A6%21651&parId=C3790CBE06BD94A6%21650&o=OneUp

• Is-Land 亦思科技

  • 提供圖形化介面讓使用者好操作Hadoop

  • HareDB

    • 致力於讓Hadoop更好用, 更好上手, 架構在 Hadoop 環境之上的解決方案， 運用其擴展容易及備援穩定的優勢，協助企業客戶建立快速敏捷、高整合度及大容量的新一代資料庫, 官網

    • 視覺化操作HBase

    • 對Hadoop檔案搜尋及檢視

    • SQL查詢

  • HareDB Datawarehouse

    • PowerBI + HareDB + Cloudera Hadoop + Azure

  • 整合HareDB + Cloudera

  • Hadoop: open source, 管理資料群集

    • Cloudera是其中一個發行者

    • Cloudera manager

  • OLAP tool: Apache Kylin

    • 以HareDB惟資料來源, 使用者根據需求建立Cude

    • PowerBI提取cube資料

  • Cluster master 1, Cluster data node 3

  • 對企業級的經營管理來說, 比起一個開發者, 提供能增加效率的工具或是懂得這些工具知識的專家是更有價值的

• 緯謙科技 雲端事業部 產品副理 Eric Zhan

  • Microsoft OMS

    • 管理Azure, AWS, 私有雲(Azure stack, VMware, Open stack)

    • 混合雲的管理

      • Infrastructure, security, networking, application

      • alert, report, log, automation

  • 資料搜集: 資料散落各地 -> 背景搜集, 整合Azure, 365, SCOM

  • 資料篩選: 大量人力, 僵化腳本作業 -> 自定義搜尋, 資料保全

  • 資料儲存: 需要空間大, 搜尋效能低 -> 雲端儲存, 運算資源龐大

  • 資料應用: 缺乏客製 -> MakePlace, PowerBI