antony@notes:~$ cd data-platform && ls
資料與儲存平台
42 articles · sorted by date desc
建置 Apache Hadoop 3.3.3
Create VM-US2204 連結 > sudo apt autoremove 解釋 > sshd_config 詳細說明連結) > ssh_config 詳細說明連結 > Ubuntu Server 設定帳號自動登入
建置靜宜大學落地雲系統
總共有 28 ( 29 - 1 ) 台電腦 4 台 Gateway , 21 台 Windows 電腦 , 3 台 alp 電腦 一套 Hadoop , 12 台 VM 一套 Hadoop , 11 台 VM 一座 Kubernetes…
建置嶺東科大落地雲系統
總共有 5 台實體電腦 1 台實體電腦跑 2 台 VM dtw{1~5} 會分別建立在每一台實體電腦 dta1, dts1, dtm1, dtm2, 也會分別建立在每一台實體電腦 Guacamole 會建立在一台 dtw3…
MySQL 基本語法
使用者登入語法 整理連結 大小寫敏感性 :有個重要的點值得注意,SQLite 是不區分大小寫的,但也有一些命令是大小寫敏感的,比如 GLOB 和 glob 在 SQLite 的語句中有不同的含義。 注釋 :SQL 注釋以兩個連續的 "-" ,以 "/\" 開始,並擴展至下一個 "/" 字元對或直到輸入結束,以先到者為准。SQLite的注釋可以跨越多行。
MySQL and MySQL Workbench
紙本資料的不方便: 資料太多,浪費物理儲存空間 大量資料太重,不利於轉移 沒有備份,紙本資料遺失就永遠遺失了 與資料處於不同地點,就無法立即取得(物理傳輸耗費時間) 資料整理要耗費大量時間與人力整理 人為錯誤(書寫、分類錯誤)…
ELK-Overview
ELK Stack 統一為 log 收集儲存過濾和視覺畫的工具
ELK-cluster
建立索引為tibame類別employee的文件,並產生三筆資料,資料內容有firstname,lastname,age,about,interests
hadoop 設定檔
hive 跑程式會需要用到 java 我們在 linux 系統的任何目錄可以 run java 的命令是因為 Path 環境變數裡面有 /opt/openjdk-8u332-linux-x64/bin這個目錄
認識 資料科技 筆記連結
DataTechnology - Overview 手動建立 hadoop 連結 手動建立 hadoop 筆記 Apache Spark
Create VM-US2204
目錄 : Administrator 與 Student 規格 : 作業系統 : Ubuntu Server 22.04 LTS 記憶體 : 6 GB CPU : 2 C 硬碟 : 400 GB 網路模式 : bridge ip…