Skip to content

antony@notes:~$ cd data-platform && ls

資料與儲存平台

41 articles · sorted by date desc

data-platform · 2023-08-24 ·MySQL

MySQL_CDC (Change Data Capture)

:::success skip-networking=0 ,允許使用者透過 Internet Domain Socket 登入,其實就是遠端連線 user=rbean ,指定 mysql 的使用者 rbean…

data-platform · 2023-06-08

了解 Btrfs Filesystem 運作

Btrfs 檔案系統的所有寫入操作都會使用「Copy on Write(CoW)的機制」 如果你只是寫入一個之前不存在的檔案,那麼資料就會被寫入到空的空間中,並且組成檔案系統的一些 metadata blocks…

data-platform · 2023-02-19

Hadoop ha

m1, m2 都會有 Name Node, 和 Resource Manager

data-platform · 2023-02-19 ·資料科技平台

Apache Spark

:::spoiler 目錄 ( 點我可展開 )

data-platform · 2023-02-19 ·資料科技平台

Hive 資料倉儲工具

:::spoiler 目錄 ( 點我可展開 )

data-platform · 2023-02-14 ·資料科技平台

dt*_script 簡介

當我們透過 dtwget 33 到 apache.org 網站下載資料,要先確定 套件是否有更新,再執行 dtwget 33 這個命令

data-platform · 2023-02-07 ·資料科技平台

看見 HDFS 底層運作

:::spoiler 目錄 ( 點我可展開 )

data-platform · 2023-01-06

MYSQL 的 資料庫引擎 有兩個 都是單機版

優點 : innodb 強在交易 ( 新增 修改 刪除 ...等) myissam 強在搜尋

data-platform · 2022-09-08 ·資料科技平台

Linux Data Process

:::warning :::spoiler 目錄 ( :mag_right: 點我,可展開 )

data-platform · 2022-08-16 ·資料科技平台

建置 Apache Hadoop 3.3.3

Create VM-US2204 連結 :::spoiler 1. 啟動 US2004 虛擬主機, 執行以下設定命令