Tag: education

有陣子沒寫了，來還個債...

這個系列是從『MIT 的「The Missing Semester of Your CS Education」』這邊延伸出來的，這邊講的是「Data Wrangling」這篇。

這篇是在講 pipe 的用法，在講這些工具之前，其實有個很重要的概念應該要說明 (但沒有在這篇文章裡被提到)，也就是 Unix philosophy，這個哲學是指 unix 環境下的工具，都會設計成只做好一件事情。

而要怎麼把這些工具串起來，最常見的就是 pipe，你可以在文章裡看到 grep、sed 與 sort 這些工具的用法，以及怎麼用 pipe 串起來。

這邊剛好也可以提一下，利用 pipe 可以把不同功能打散到不同的 process 上，剛好也可以稍微利用到現在常見的多 CPU 的環境。

另外上面因為提到了 grep，文章內花了不少篇幅在講 Regular expression 這個在 CS 課程裡面也是重要的基礎。

會放這種篇幅長度，一方面是 Regular expression 的實用性很高，另外一方面，學術上與自動機理論中的 DFA 與 NFA 都有關，算是學習計算理論的起點：

然後後面就有提到 AWK 這個工具，這邊要注意的是，雖然可以用 Perl 之類的工具作到類似的事情 (而且更強大)，但 AWK 有被放到 POSIX 標準裡，所以在各種作業系統內幾乎都一定會出現，加上語法算是簡單，學起來還是很有幫助...

然後再最後面的段落冒出一個 gnuplot 畫個圖，以及示範 xargs 這種神器要怎麼用 (這邊會更建議看一下 manpage，可以配合 find 之類的工具用，並且平行化同時處理)。

然後最後示範了 binary data 怎麼處理。