• Object 泛指所有的物件，Instance 是明確指透過 Class 創建的 Object

  • Anonymous Types C#
  • Java ?

• Class 是 Object 的藍圖/設計書 ( Class 是 Object 的抽象 )

  • Object 是 Class 的具像化
  • 通常透過 new Class
  • 一種常見的應用是 Object 裡面只有欄位，用來作為資料的載體
  • 另一種常見的應用是 Object 包含可執行的 Function
  • Static 另作討論

• Abstract Class 是 Class 的藍圖/設計書 ( Abstract Class 是 Class 的抽象 )

  • Class 是 Abstract Class 具像化
    • 通常透過繼承方式
  • Abstract Class 會定義共用的欄位與方法給它的子類別
    • 當某一個方法，實作細節必須由子類別處理時，會宣告成抽象方法 abstract method
    • 子類別繼承後必須實作 abstract method
    • Abstract 無法直接具像成 Object

• Interface 是 Method 的藍圖/設計 ( Interface 是 Method 的抽象 )

  • Method 是 Interface 的具像化
    • 但是 Method 必須生存在 instance 上
    • 所以不會是 Static Object
    • 所以 Interface 必須與 Class 共存，才能在 instance 上實現

(fin)

前情提要

Tennis Kata 是我最常練習的一個題目，
就我個人而言，這個題目源起 91 大的極速開發，
目前最快只有在 17 分左右，使用 Rider with Mac 的話可能還會再慢一些。
我很熟悉，所以很少作需求分析，Test Case 也大多有即定的寫法。
手動得很快，腦卻不怎麼動了，明明這是一個相當經典的題目，
不過我卻被定錨了。

今年 5 月上了「測試驅動開發與持續重構」，
第一天 91 大也有透過 Tennis Kata 展示了一下火力，
那個時候又有提到可以使用 State Pattern 來實作，
最近工作上又恰巧有使用到 State Pattern。
於是我便決定要試著用 State Pattern 來進行 Tennis Kata 。

有兩種方法，一種是無到有的 Kata，
一種是將現有 Tennis Production Code，
透過重構轉換成 State Pattern，
這次我選擇從無到有。

第一次失敗

總歸來說，需求分析作得不夠徹底，
Test Case 設計不良，所以很難自然而然的讓 State 產生

上圖是我第一次畫的 State ，
現在回過頭來想想，圖型上其實可以很明顯看出重複的壞味道。
但是我當下完全沒有「覺察」，明明是想要消除 if else，
卻在 State 裡面產生了大量的 if else。

第二次不成功

總而言之是作完了，但是不是很順暢。

如上圖，我蠻粗暴的將所有比分轉換成可能的 State，
一樣我沒有注意到重複，但是比較起第一次的失敗，
這次的狀態機是將所有可能的狀態攤平，
這樣作是為了符合 Tennis 的規則。

Test Cases

• LoveAll
  • 產生 Context 類別與 Score 方法
  • 產生 LoveAll State
  • 產生 IState 介面，包含 Score 方法，讓 LoveAllState 實作 IState 介面
• FifteenLove
  • 產生 ServerScore 方法
  • 產生 FifteenLove State
  • 產生 SetContext 方法
  • 產生 ChangeState 方法
  • 轉換 IState 介面成為 State 抽象類別
• LoveFifteen
  • 產生 ReceiverScore 方法
  • 產生 LoveFifteen State
• LoveThirty
  • 產生 LoveThirty State
• LoveForty
  • 產生 LoveForty State
• FifteenAll
  • 產生 FifteenAll State
    略…
• 覺察重複，重構
  • 產生 NormalState
  • 產生 ServerPoint
  • 產生 ReceiverPoint
  • 使用 Dictionary 消除 if else
  • 產生 SameState
• Deuce
  • 產生 DeuceState
    以下略…

最後的狀態會如上圖，當大量的 State 產生之時，心裡真的有點慌慌的，
這次的 TDD 仍然不算順暢成功，設計階段就可以在腦中模擬的問題，
我拖到了開發階段，雖然後來收斂成 NormalState 時頗有一回事，
但如果在實務上，這段不確定且發散的時間仍然是太長。

第三次成功，仍然不足夠

參考第二次所作的 State Diagram。
可以看到缺少了 Normal to Normal 的線條。
第三次將它補上了。

參考上表製作測試案例，
這裡我想強調的是狀態改變的動線，
狀態由 SameState 開始。

簡單筆記一下測試與重構的幾個亮點
完整的 commit 可以從 d792b2e開始看

Highlight Test Cases

測試的案例的設計會依 State Diagram 的箭頭來設計，
也就是狀態的改變，初始狀態為 SameState 比分為 0 - 0 ，
並將 Design Pattern 作為指引重構出 SameState 。

第二個測試案例也很簡單，
因為 SameState 只會往 NormalState 移動，
所以只要使用 1 - 0 或是 0 - 1 這個案例，我就可以建立出 NormalState 類別。
並且可以觀察到兩個 State 的共通性，這個時候就會重構出 IState 介面。

一樣看圖開發，
NormalState 是最為複雜的一個狀態，他的狀態可能為

• 保持原樣 : NormalState
• 退回平手 : SameState
• 進入決勝 : DeuceState
• 直接獲勝 : WinState

而剩下的狀態都算是相當簡單，
WinState 的狀態不會再改變，
DeuceState 只會往 AdvState 狀態前進，
AdvState 是相對複雜的狀態，可能變成 WinState 也可能降回 DeuceState ，
與 NormalState 並沒有直接的關聯路徑，所以在案例設計上，應該放比較後面。

第三個案例，我會讓 NormalState 變回 SameState，除了可以完成一條狀態改變的路徑外，
好處是我不用新增類別，作到最小異動。
一開始我的邏輯會放在 GameContext 之中，但是不論是依循著 Design Pattern 的設計，
或是單純考量職責，很自然地將這裡的邏輯移至 NormalState 之中。
這裡案例會選用 1-1 。

但是要將邏輯移到 NormalState 之中時，會面臨一個問題。
NormalState 之中，為了判斷是否會回到 SameState，
需要知道 GameContext 的資訊 ( ServerPoint 與 ReceiverPoint )，
依循 Design Pattern 的指引，
將會在 IState 之中建立 SetContext 方法。
儘管 SameState 其實不用 ServerPoint 或 ReceiverPoint 的資訊。
但是因為我們相依於介面 IState 之上，導致 NormalState 或 SameState 都要實作 SetContext 方法。

再進一步，SetContext 在不同的 State 實作上是不會有變化的，
所以我會轉換 IState 為抽像類別 State。
而我也需要在比賽初始時呼蹈後 SetContext 並將初始狀態設為 SameState

案例 4、5、6 我選擇了 0-1 、0-2 、0-3 等案例，
這裡實作的是 Normal to Normal 的狀態改變(其實是沒變)，透過 Dictionary 消除 if 的手法就略過不提。
但是也許下次我不會急著完成 NormalState 而是先完成 WinState 與 DeuceState 。

接下來讓 3-3 這個案例，帶我們走到 DeuceState，
稍微繞了一點路作 4-4 這個案例，雖然一樣是 DeuceState，
我一開始的設計案例上並沒有考量清楚，從 3-3 走到 4-4 必須經過 AdvState，
下次應該先選擇 3-4 或 4-3 的案例，
再透過 4-4 的案例實作 AdvState 回到 DeuceState 的這條路徑。
最後再將透過案例 5-3 讓 AdvState 走到 WinState 與 案例 4-1 讓 NormalState 走到 Win 就可以結束主要的流程了。

收官的部份就是簡單的重構，與補足一些特殊比分的案例，
特別要注意的是 NormalState 的 Score 仍然有許多的 if 讓我想重構移除，
目前暫時沒有想法。
此外，實際上 Tennis 會特別重視得分的順序，
比如說 100-100 Deuce 這種極端案例，交互得分的情況應忠實呈現在測試之中。
所以在寫測試時，就要特別注意得分的順序性。

後記

這次還是有用到一些常用的重構套路，
比如說，用 Dictionary 消除 if else 的手段。
另一個則是 Template Method Pattern，
讓我們看看以下的 commit

• e8ddf8
• 145d3c

以 ServerScore 方法為例，
本來是在定義在 Abstract Class State 之中的抽像方法，
由各個 State (Normal、Same、Deuce、Adv 與 Win)實作，
但是我們可以明顯發現， Context.ServerPoint++ 是重複的，
而 ChangeState 才是真正抽像的地方，
所以我們可以在 Abstract Class State 加入以下的方法與抽像方法，

1
2
3
4
5
6
7

public void ServerScore()
{
    Context.ServerPoint++;
    ChangeState();
}

protected abstract void ChangeState();

這不就恰巧是 Template Method Pattern 嗎 ?
同樣的手段可以放在 ReceiverScore 方法再重構一次。

實務上 Design Pattern 本來就應該星月交輝，而非千里獨行。
在學習 Design Pattern 的路上，不是硬套，而是找出適用場景。

也是我比較建議的作法，透過重構自然走向 Pattern，
透過限制改變來提昇品質，首先要有測試保護，再找尋套路或壞味道重構，
最後讓 Design Pattern 成為指引，讓代碼自動躍然而上。

參考

• State Pattern
• Template Method Pattern
• Tennis Rules
• SOLID 五則皆變

(fin)

前情提要

前幾天有個小朋友問我說
「想問問 Tennis KATA 練習的重點是重構嗎
有沒有什麼重構的目標 ?」

反思

這讓我想起一年前寫的文章，[N社筆記] 在公司小規模玩 Coding Dojo
順便記錄一下後續，那個實驗大概在三月隨著參與的人員忙碌而停止了，
然後在後續有再重啟一次，那次是使用 Production Code 進行，
有多一些新的成員，但是也是隨著「忙碌」與「沒時間」而停止，
雖然我心裡比較想直接譙那些不出席又不出聲的人渣一些髒話，
不過我想這就是現實吧。這也引發我後續對 TDD 產鉗的反思。

回答

簡答版

Kata 可以幫助你學習到。

• 需求分析
• 寫測試案例
• TDD 與 Unit Test
• 找到壞味道與重構
• Design Pattern

詳答版

Kata 就是一個簡單的需求，當需求來的時候
你必需先作需求分析，透過需求分析找到測試案例。
如果你想學習 TDD 你可以試著讓每個測試案例趨動你的代碼生成。
也就是說分析測試案例的時候，你要考慮案例的順序與帶來代碼的改變。

試著遵守 TDD 的 紅-綠-重構 準則，
重構包含「測試代碼」與「產品代碼」，
如果是 OO 語言試著去遵循「SOLID原則」，
試著自已隨著 Kata 的過程流動可以看到代碼的變化。

Design Patten 可以當作目標或指引去重構代碼。
不過以 Design Patten 為目標的話，
有兩種可能:

1. 在「需求分析」階段覺察適合的 Patten 透過設計案例來趨動
2. 在已完成的代碼中覺察適合的 Patten 在不破壞測試的情況下重構(也有可能需要加測試案例)

原始回答

新的問題

要花多少時間才能培育一個懂「OO、TDD、Refactoring、DP」的工程師 ?
這個性價比符合商業利益嗎 ? 職涯規劃上值得嗎 ?
業界真的有需求嗎 ? 還是只要會剪下貼上就好 ?
真正的大公司是這樣開發的嗎 ? 業界很多公司不這樣作不也活得好好的 ?
目前的趨勢會更加的專業分工，這些準繩依舊適用嗎 ?

我還沒有答案，但我還在路上。

(fin)

前情提要

朋友在一個知識型部落客的團隊中工作，
作了一個有關 Scrum 的影片，
恰巧我最近的工作與 Scrum 的導入有比較深的關係，
影片我也蠻喜歡的，就稍微作個筆記當作回饋。

回饋隨筆

第一點，讓我可以看到非業界人員初探 Scrum 的角度，
我第一次「知道」Scrum 已經是在 C 社的事了。
有點忘了第一次接觸的「初心」，台灣非軟體人說這方面的非常稀少。
能夠提供不同視角是很重要的。

橄欖球列陣這部份我蠻喜歡的; 雖然直譯就知道 Scrum 原本的意思，
但是離「光速蒙面俠」太遠，已經有點忘了那些規則，
現在對比起來真的很像，為了一次的達陣，你需要多少衝刺 ?
戰術又該怎麼選擇 ? 球員平時的訓練與臨場反應是不是也可以映射到這個業界呢 ?

整個影片很淺顯易懂，口齒清晰即使放到 1.5 倍速還是聽得清楚，
可惜的是汽車廠 5 年轉型的故事我想知道更多細節或出處，
不是很喜歡「一半的時間，作兩倍的工作」的結論，
我覺得是書商的行銷手段，不是 Scrum 的目標與強項。
產能的提昇不過是個結果，重點是三大支柱對團隊帶來的效應。
沒提到透明性、檢視性與調適性我覺得蠻可惜的，

另外個人的工作流程我不覺得需要跑 Scrum ，
可以試試 GTD 或 PDCA ，而且你會發現很多類似的觀念與原則。
Scrum 設計上是適合小型團隊的，業界說法是 3~9 人，不含 PO 與 SM
多人的公司也有很多別的方法論(EX: LeSS or SAFe)，這裡我不多開戰線，敏捷無它「務實」而已。
方法沒有不好，只有適不適合。

差異

有些用字跟業界不太一樣有點可惜，硬要翻譯不如保留英文或是業界常用翻譯。
Scrum 跟規格固定應該沒有什麼關係，不過工程上的確這樣作會帶來一些好處。
Scrum 跟 Agile 本質上還是有些不同， Agile 比較像願景、原則比較抽象的層次。
複習一下 Agile 的宣言

• Individuals and interactions over processes and tools
• Working software over comprehensive documentation
• Customer collaboration over contract negotiation
• Responding to change over following a plan

Scrum 是業界較常見的框架而且與其它工作法相容性非常的高，
就我個人而言擷取過 XP、GTD、番茄鐘、ORID 與 ToC 等方法。
作為一個框架，有彈性的包容各種方法是它如此廣佈的原因之一。

最後 Scrum 無法擺脫加班、Scrum 無法擺脫加班、Scrum 無法擺脫加班
不要盲從，Google 是先成為 google 才有導入 Scrum，你導入 Scrum 也不會成為 Google。
丟書前多想 3 秒鐘，丟桌上不如丟臉上，丟書不如丟辭呈。

參考

• 為什麼 LeSS 這麼迷人，可是總是輸給 SAFe？
• 影片無法嵌入，改分享連結

(fin)

Why Unit Test 心法篇

網路上很多，自已找(兇)。

我的想法 about Unit Test

點

• 有驗收才有品質，所以我需要測試
  • 黑箱
  • 白箱
  • 整合
  • 單元
• UT 不過是驗收的最基本的單位。
• 開發人員一定會測試的，不論用何種方法
  • Debug
  • Console Output
  • Break Point
• 程式人員的好品德
  • Laziness
  • Impatience
  • Hubris
• 程式是照你寫的跑，而不是照你想的跑

線

• 既然你會測試，那麼為什麼不讓它可以[重複/一鍵]被執行

面

• 只是為了重複執行，何不使用現有的測試框架與工具?

體

先訂驗收標準，再進行開發是正常不過的作法，
只不過你太聰明而在腦中測試過了。
但是程式是照你寫的跑，而不是照你想的跑。
不如先寫下驗收標準(測試左移/DoD/TDD),再進行開發。
錦上添花的話，就透過工具讓「執行測試」可以快速重複。
剩下的問題是，這些驗收標準寫到多「鉅細靡遺」?
有沒有什麼方式可以提昇我撰寫的速度 ?

假設我有了測試保護，那麼重構將是一件安全的事。
壞味道可以給我提示，而 Design Pattern 可以是改善程式的一個指引。

Unit Test

3A

程式寫的是 AAA (正序)心裡想的是 AAA(逆序)

• Arrange
• Act
• Asset

紅、綠、重構

如果以 TDD 開發，寫完新的測試後，得到的一個「綠燈」反而是一個壞味道。

第一天分享

pair programming 30 min，QA 約 20 分鐘。
先請同事實作 1+1 的 Unit Test 看一下他對測試的理解。

• 建立測試專案，可以選用 xUnit

  1 2	不選 MsTest 的理由是，我比較喜歡建構子與解構子的寫法， 勝過 TestInitialize/TestCleanup 的 Attribute 的寫法

• 引導由測試寫出方法。

  1 2 3

  logic → function → class method 透過寫測試讓 Production 在思考中產生 引導的沒有很成功

• 3A 的寫法，未來會介紹沒有 3A 的寫法(為了更好的理解)

• 方法測試案例的命名

• 介紹 Assert.Equal 取代 Debug.Assert

• 簡單提到三種邏輯，回傳值、改變值、互動。

• 為什麼我討厭 Static

[未排序]預計要講的題目

• 範例是否為偶數 → 牛奶是否過期 → 如何透過一些手法，控制不可控的類別
• 怎麼對 Legacy Code 作解耦 ?
• 介紹 Mock Framework
• 怎麼寫出好理解的 Assertion ?
• 介紹 Assert Framework
• 建立 A 社的道場 Repo
• more …

問題

• 開發完後，自已會完全不自已測試就丟給 QA 或客戶嗎 ?
• 什麼是 Dojo ?
  • 日文的道場，把寫程式想像成是在練功，建立一個練功的環境。
• 什麼是 Kata ?
  • 日文的形，或是可以說是套路/招式，一樣透過練習招式來強化自已的能力。

參考

• RIP TDD
• Laziness Impatience Hubris
• 瞭解單元測試
• How YOU can Learn Dependency Injection in .NET Core and C#

(fin)

前篇

上次使用 Nlog 直接與 ElasticSearch 作結合，
這次來看看怎麼賽入資料給 ElasticSearch 。

NEST

一般來說，ElasticSearch 只要透過呼叫 API 就可
但是我將使用 C# 的 Nuget 套件 NEST 來簡化呼叫 API 的行為。

步驟

安裝套件

1

Install-Package NEST

建立連線

1
2
3

var node = new Uri("http://localhost:9200");
var settings = new ConnectionSettings(node);
var client = new ElasticClient(settings);

寫入資料

1
2
3
4
5
6
7

var json = new
{
    name = "test name",
    timestamp = DateTime.Now.ToString("yyyy-MM-ddTHH:mm:ss.fffffffK")
};
string indexName = $"test-index-{DateTime.Now:yyyy.MM.dd}";
client.Index(json, idx => idx.Index(indexName));

Create Index Pattern

連線進入 Kibana (http://localhost:5601/),

Setting > Kibana > Index patterns > Create index pattern

Step 1 of 2: Define index pattern
輸入 test-index-*

Step 2 of 2: Configure settings
記得選取時間軸(x 軸)為 timestamp，這裡會透過 automap 對應欄位，
故在產生測試資料時，記得先產出時間資料，
這個範例我使用的格式為

1

DateTime.Now.ToString("yyyy-MM-ddTHH:mm:ss.fffffffK")

設計共用型別

1
2
3
4
5
6

public class Record
{
    public DateTime Created { get; }
    public string Type { get; }
    public Object Record { get; }
}

想法是通用類別，或許用抽像類別繼承也可以 ?
Created 欄位用來記錄資料產生時間，
Type 用來記錄 Record 的型別，
Record 用來記錄實際的資料。

預計未來可能會需要取出 Json 資料再轉成物件操作。

大概就醬。

6/8 補充 .Net Logger 分級

(fin)

前言

Although implementing only parts of Scrum is possible, the result is not Scrum.

雖然實施部分的 Scrum 是可能的，但結果並不是 Scrum 《Scrum Guide》

之所以在文章一開頭就引述這段文字，是因為世界上太多 Scrum But 了;
而我下文所敘的則是 Not Scrum。
未來有機會再深入討論兩者的差異，對我來說主要是心態上的差異。

我們透明、檢核、調試，我們擁抱改變，我們有所堅持，我們有理想但我們也務實。
好啦，說不定只有你自已。

在 A 社的導入的過程中，我開場白通常會說「這不是 Scrum」然後開始拿 Scrum 的東西說嘴。
至少對我來說，這比那些號稱「我們跑 Scrum」「But #^%!~…」要好得多，
與其讓你難以分辨斷句在哪，或是誤會怎麼 Scrum 這麼糞，不如讓我明確的告訴你「這不是 Scrum」。

背景

蠻小巧的團隊，小到我覺得也許不用任何「敏捷」
分為兩個組成 QA 部門與 RD 部門，遠端工作的 RD 主管兼職 PM
QA 團隊的主管除了目前這個團隊，也要兼者作其它團隊的測試，
此外還有一個大主管，在國外有時差，每周固定會與成員們開 3 次的會。
RD 團隊成為會有一個 Daily Sync 的會議，每天約 5~10 分鐘。
整個團隊有使用 Azure DevOps 的看板，但是 QA 只會用來開 Bug。
但不知道什麼時候 Bug 才會被修復。

問題

Azure DevOps BackLogs 太像文件

Azure DevOps 的 BackLogs 放著許多 Feature ，
依據不同的功能，再將每個 Sprint 的 User Story 放進去
這些 Feature 永遠不會被作完，隨著時間過去，
儘管完成了許多 User Story ，但是也會有新的 User Story 被加進去。
而作為文件，他的巢狀結構又不足以面對複雜的需求內容，
分散式存儲對於維護與修改上也是相同不便。

Bug 隨時蹦出

QA 的工作就是不斷的測試，一有發現問題就開立 Bug，
RD 有空就會去領來作，有時候也會有 RD 主管確認過後再分配給 RD
這導致不同面向的問題，RD 自領的情況可能會無序的作，
導致真正有價值的 Bug 無法第一時間被修正。
而如果每件事情都要 RD 主管確認後再進行動作，
RD 主管恐怕會變成瓶頸所在。

BackLogs 簡介

下面是我在向團隊介紹 Backlogs 後的筆記。

在 Azure DevOps 上會有 BackLogs 與 Sprints > Backlog。
恰巧與 Scrum 的 Product BackLogs 與 Sprints Backlog 可以一一對應。
如果以 XP 來說，可以投射到發佈計劃會議與迭代計劃會議中討論的「用戶故事清單」。
如果以 GTD 的方法論來說 BackLogs 可以當作收集一切事務的 Inbox，
而 Sprints > Backlog 可以視作專案裡面的工作項目。

總的來說，這些方法論的名詞故有所不同，但本質上卻是非常接近的事務。
我們總是有許多新的想法，但是沒有足夠的時間作所有的事。
所以我們必須補捉這些想法，放入 BackLogs 之中
補捉了之後，必須排序，這裡的概念有「重要且緊急」先作 ( 參考 Eisenhower Matrix )，
或是「價值高」的先作，或是有影響力的先作 ( 參考 Impact Mapping )。
GTD 的概念是 5 分鐘能完成的想法，立刻去作不然就丟到 BackLogs ( Inbox ) 之中，
我認為團隊不適合這樣作，畢竟 GTD 是針對個人的工作法。
團隊反而要刻意不作為，才能讓真正重要的事情浮現，而不是被一堆雜訊 DDos，
所有想法我的建議是「丟到 Backlogs 之中」，然後定期梳理吧。

理論上大部份事情會由模糊到清晰，這是個過程，之後才會進入到一個可以被執行的階段。
在 Scrum 之中，常用「遠光燈」作例子，我個人比較喜歡用「通勤」舉例。

留個問題給你，誰來衡量 ? 團隊 ? PO ? 客戶 ?

想像一下你要上班了，在家裡你對公司的方向與位置其實有個大概的想法，
要走過哪些路口，經過某個大樓，穿越了一座橋後你需要待轉，
再過幾個紅綠燈，看到速食店後就可以開始找車位了。
實際上路後，也許路上施工，你必需繞個路，或是運氣很好一路綠燈。
哦，不!! 你的車拋錨了，你必須改搭公車，而它的路線是……

有個大方向就是你的目標，路口、橋、大樓，就是你的每個迭代，
每次的煞車、轉彎或催油門就是再被細分下來的工作項目，
紅燈、拋錨、下雨天就是你真實上路後才會體驗到的事。
有個概念「Road Map」其實也是在說差不多的事。

回到 Product BackLogs 與 Sprints Backlog ，
我們也就是不斷的細化這些項目，一直到可執行然後被執行為止。

至於怎麼變快呢 ?
也許你要選一條最優路線，最短的距離最少的車流，沒有紅綠燈之類的，
也許你要有最棒的工具，最好的機車、定期保養之類的，
也許你要改變的開車習慣，不要危險駕駛、不任意切換車道等等…

透過的調整工作順序、找尋最佳工具輔助與保持正確心態，是我目前的答案。

(fin)

前情提要

我將 ASP.Net Core 的 API 服務加上 Log。
Logger 使用 NLog ，載體我使用 Elasticsearch ，
使用者操作介面使用 Kibana。

然後面對開發者，我希望用 AOP 方式，
讓 Logger 與主邏輯分離。

• 這裡會用到簡單基本的 docker 技術
• 透過 docker-compose 建立 Kibana 與 Elasticsearch
• 假設你已經會使用 Dotnet Core DI 注入 Logger
• 用最原生的方法實作 AOP
• 對你可能沒有幫助

Run ElasticSearch & Kibana with docker

在本機建立 ElasticSearch & Kibana
首先建立 docker-compose.yaml 檔如下，
簡單說明一下內容:

• 起一個 elasticsearch，port : 9200
• 起一個 kibana ，port : 5601，設定環境變數 ELASTICSEARCH_URL 為 http://localhost:9200
• 網路名命為 elastic 使用 bridge 讓兩個 container 連起來
• elasticsearch-data: 實務上我想需要指定一個 storage(硬碟或 File System 之類的)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36

version: "3.1"

services:
  elasticsearch:
    container_name: elasticsearch
    image: docker.elastic.co/elasticsearch/elasticsearch:7.6.2
    ports:
      - 9200:9200
    volumes:
      - elasticsearch-data:/usr/share/elasticsearch/data
    environment:
      - xpack.monitoring.enabled=true
      - xpack.watcher.enabled=false
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
      - discovery.type=single-node
    networks:
      - elastic

  kibana:
    container_name: kibana
    image: docker.elastic.co/kibana/kibana:7.6.2
    ports:
      - 5601:5601
    depends_on:
      - elasticsearch
    environment:
      - ELASTICSEARCH_URL=http://localhost:9200
    networks:
      - elastic

networks:
  elastic:
    driver: bridge

volumes:
  elasticsearch-data:

執行

1

docker-compose up -d

完成後在本機瀏覽器瀏覽以下網址。
確定功能正常。

• Elasticsearch URL http://localhost:9200/
• Kibana URL http://localhost:5601/

雷包

第一次啟動 Kibana 要 5 分鐘左右，但是我不確定是 docker 或是 Kibana 的問題

Dotnet Core NLog with ElasticSearch

首先必需安裝相關套件

1
2
3
4
5

Install-Package NLog.Web.AspNetCore

Install-Package NLog

Install-package NLog.Targets.ElasticSearch

設定 appsettings.json
(請見 20200518 的補充)

1
2
3
4
5
6

{
  "ConnectionsString": {
    "ElasticSearchServerAddress": "http://localhost:9200/"
  }
  ///...
}

設定 nlog.config，注意以下路徑

• nlog > extenstions > assembly
• nlog > targets > target
• nlog > rules > logger

這裡的重點是 ElasticSearchServerAddress 這組字串需設定成你的 ElasticSearchServerAddress
(請見 20200518 的補充)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46

<?xml version="1.0" encoding="utf-8" ?>
<nlog xmlns="http://www.nlog-project.org/schemas/NLog.xsd"
      xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
      autoReload="true"
      internalLogLevel="Info"
      internalLogFile="c:\temp\internal-nlog.txt">

  
  <extensions>
    <add assembly="NLog.Web.AspNetCore"/>
    <add assembly="NLog.Targets.ElasticSearch"/>
  </extensions>

  
  <targets>
    
    <target xsi:type="File" name="allfile" fileName="${currentdir}\log\nlog-${shortdate}.log"
            layout="${longdate}|${event-properties:item=EventId_Id}|${uppercase:${level}}|${logger}|${message} ${exception:format=tostring}" />
    
    <target name="ElasticSearch"
            xsi:type="ElasticSearch"
            ConnectionStringName="ElasticSearchServerAddress"
            index="dotnetcore-nlog-elk-${date:format=yyyy.MM.dd}"
            documentType="logevent"
            includeAllProperties="true"
            layout="[${date:format=yyyy-MM-dd HH\:mm\:ss}][${level}] ${logger} ${message} ${exception:format=toString}">
      <field name="MachineName" layout="${machinename}" />
      <field name="Time" layout="${longdate}" />
      <field name="level" layout="${level:uppercase=true}" />
      <field name="logger" layout=" ${logger}" />
      <field name="message" layout=" ${message}" />
      <field name="exception" layout=" ${exception:format=toString}" />
      <field name="processid" layout=" ${processid}" />
      <field name="threadname" layout=" ${threadname}" />
      <field name="stacktrace" layout=" ${stacktrace}" />
      <field name="Properties" layout="${machinename} ${longdate} ${level:uppercase=true} ${logger} ${message} ${exception}|${processid}|${stacktrace}|${threadname}" />
    </target>
  </targets>

  
  <rules>
    
    <logger name="*" minlevel="Trace" writeTo="allfile" />
    <logger name="*" minlevel="Trace" writeTo="ElasticSearch" />
  </rules>
</nlog>

我的 Logger 代碼可能會類似這樣:
我想調整 Logger 代碼，不要與商務邏輯混在一起。

• 一般的 Logger 我會用 AOP 的方式作成 Audit Log 記錄
• catch Exception 的 Logger 我會統一處理

1
2
3
4
5
6
7
8
9
10
11
12
13

private readonly ILogger logger;

public Result MyMethod(Context ctx)
{
    this.logger.LogInformation("Hello Marsen");
    try{
      //// do some thing
    }
    catch
    {
        this.logger.LogError("What's a Wonderful World");
    }
}

20200518 補充

nlog.config 與 appsettings.json 內容調整。

使用Elasticsearch Cloud(以下簡稱 ESC)當作服務的儲存體。
踩到了一個雷包，當我把 ElasticSearchServerAddress 修改成 ESC 服務的 EndPoint
我發現 ESC 並未接收到 Log ，更奇怪的事情是，在我本機端 docker 所建置服務仍然收到了 Log。

查詢了一下最新的Nlog ElasticSearch Wiki後，
應該改用 uri 屬性設定 EndPoint ，而沒有設定的情況下預設為 localhost:9200 ，

1
2

uri - Uri of a Elasticsearch node. Multiple can be passed comma separated.
Ignored if cloud id is provided. Layout Default: http://localhost:9200

而要使用 ESC 的 EndPoint，除了設定 uri 外，還需要啟用授權。
requireAuth 設定為 true(預設為false)，另外還要設定 username 與 password。
appsettings.json 的 ConnectionsString 就可以刪除了。
nlog.config 修改大致如下

1
2
3
4
5
6
7
8
9
10
11
12

<target xsi:type="ElasticSearch"
  name="elastic.co"
  index="dotnetcore-nlog-elk-${date:format=yyyy.MM.dd}"
  documentType="_doc"
  includeAllProperties="true"
  layout="[${date:format=yyyy-MM-dd HH\:mm\:ss}][${level}] ${logger} ${message} ${exception:format=toString}"
  uri="https://**************elastic-cloud.com:9243"
  requireAuth="true"
  username="**********"
  password="******************">

Dotnet Core AOP

用 AOP 的方式作成 Audit Log 記錄，
想法是方法的 in / out 我將想知道資訊記錄下來。
比如輸入的參數或是回傳值。
題外話，因為 AOP 的特性，如果方法處理到一半想要記錄是作不到的，
這是不是意味著必須重構將方法一分為二 ?

參考這篇，我會使用最基本的 Filter 實作 AOP，

依據 Filter 的特性我在這裡會實作 IActionFilter

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19

public class AuditLogAttribute : Attribute, IActionFilter
{
    private readonly ILogger logger;

    public AuditLogAttribute(ILogger<AuditLogAttribute> logger)
    {
        this.logger = logger;
    }

    public void OnActionExecuted(ActionExecutedContext context)
    {
        this.logger.LogInformation("Result Filter End");
    }

    public void OnActionExecuting(ActionExecutingContext context)
    {
        this.logger.LogInformation("Result Filter Start");
    }
}

我的最終目標是透過掛載 Attribute 的方式來讓 Logger 與解耦，
參考下方的程式碼。

1
2
3
4
5
6
7
8
9
10
11
12
13

private readonly ILogger logger;

[AuditLog]
public Result MyMethod(Context ctx)
{
    try{
      //// do some thing
    }
    catch
    {
        this.logger.LogError("What's a Wonderful World");
    }
}

這裡就有一件討厭的事，因為我的 Logger 都是透過建構子注入產生，
而自已本身也比較傾向不要使用公開 Property Injection 的方式*。
但是使用建構子在這裡會產生另一個問題，
我將無法使用掛載 Attribute 的方式處理 Logger
解決的方式是透過另一個 Attribute ServiceFilterAttribute 作間接掛載

1
2
3
4
5
6
7
8
9
10
11
12
13

private readonly ILogger logger;

[ServiceFilter(typeof(AuditLogAttribute))]
public Result MyMethod(Context ctx)
{
    try{
      //// do some thing
    }
    catch
    {
        this.logger.LogError("What's a Wonderful World");
    }
}

這樣作還是有一些缺點，最明顯就是掛載的 Attribute 變長，
然後視覺上又是末端文字才能表達意涵，
另一點是原本約定成俗可以省略的*Attribute後綴不能省略了。

我想使用 Castle 與 AutoFac 重作一次。
應該可以變得更加簡潔。

參考

• https://www.humankode.com/asp-net-core/logging-with-elasticsearch-kibana-asp-net-core-and-docker
• https://kevintsengtw.blogspot.com/2018/07/aspnet-core-nlog-log-elasticsearch.html
• https://kevintsengtw.blogspot.com/2018/07/aspnet-core-nlog-log-elasticsearch_9.html
• https://www.cnblogs.com/jlion/p/12394949.html
• https://paper.dropbox.com/doc/202001-DIAOP--Az2Kl_lUwdJulCygth_VSyrcAg-41nJ40hCmLj7o7haWhual
• https://blog.johnwu.cc/article/ironman-day14-asp-net-core-filters.html
• https://edi.wang/post/2019/1/21/aspnet-core-dependency-injection-in-actionfilterattribute
• 請比較 Property Injection 與其它的注入方式的優缺點。

(fin)

前情提要

前年初次接觸變異測試，去年在看重構時偷換了概念，
將兩者結合了。

這次我想更進一步，將 CI Server 與之結合。

Stryker.Net

根據 Stryker Handbook，
Stryker 主要有三個專案，

• Stryker (Javascript & TypeScript)
• Stryker4s (Scala)
• Stryker.NET (.NET)

我會使用我的練習用專案作為目標，
所以很理所當然的我會選擇 Stryker.NET，那我們就開始吧。

開始

安裝 Stryker

1

dotnet tool install -g dotnet-stryker

執行 Stryker

1

dotnet stryker -tp "['./test/Marsen.NetCore.Dojo.Tests/Marsen.NetCore.Dojo.Tests.csproj','./test/Marsen.NetCore.Dojo.Integration.Tests/Marsen.NetCore.Dojo.Integration.Tests.csproj']" -p="Marsen.NetCore.Dojo.csproj" -dk=$STRYKER_DASHBOARD_API_KEY

注意幾個 cli 參數，
-tp 明確指定測試的專案有哪些，可以用中括號[]傳入多個測試專案名稱，使用,作為分隔符
-p 專案名稱
-dk dashboard-api-key 這組 key 是用來與 https://dashboard.stryker-mutator.io/ 互動的，
最主的功能是將報告上傳。
$STRYKER_DASHBOARD_API_KEY 是 Github 的 Secrets

你可以執行 dotnet stryker -h 查看更多原始說明

1
2
3
4

-tp|--test-projects Specify what test projects should run on the project under test.
-p|--project-file <projectFileName> Used for matching the project references when finding the project to
                                              mutate. Example: "ExampleProject.csproj"
-dk|--dashboard-api-key <api-key> Api key for dashboard reporter. You can get your key here: https://dashboard.stryker-mutator.io

專案設定

新增一個 stryker-config.json
對我來說，最重要的是要記得設定 stryker-config > reporters > dashboard 這筆資料。
詳細的說明的可以參考這篇

1
2
3
4
5
6
7

{
  "stryker-config": {
    "dashboard-project": "github.com/marsen/Marsen.NetCore.Dojo",
    "dashboard-version": "master",
    "reporters": ["json", "dashboard"]
  }
}

在 Github 上工作

首先你必須在 Dashboard中 Enable Repository

然後產生一組 Key

接下來到 Github ， 我們將這組 Key 設定到 Secrets 之中

再到 Github Actions 中，把 workflow 指令設定完成，

觸發 CI 完成後，就可以在 Dashboard 上看到報表啦。

參考

• https://blog.marsen.me/2019/03/01/2019/book/refactoring/refactoring_Ch1/
• https://blog.marsen.me/2018/03/20/2018/mutation_testing/
• https://github.com/stryker-mutator/stryker-handbook/blob/master/dashboard.md
• https://github.com/stryker-mutator/stryker-net/blob/master/docs/Reporters.md#dashboard-reporter

(fin)

前情提要

承上篇,
我已經將 SonarCloud 的代碼檢查與 Github Action 結合在一起了。
透過專案首頁的 Dashboard 與專案的 Budget 我可以知道目前專案的一些狀況，
壞味道、技術債等 …

題外話，測試分類

在我的專案中有兩種測試，單元測試與整合測試。
我的分類方法，單一類別的 public 方法就用單元測試包覆。
不同的類別之如果有組合的交互行為，就用整合測試包覆。

舉個簡單的例子，以購物流程來說，我有的類別如下 :

• Cart(購物車)
  • Add (加入商品)
  • Substract (移除商品)
  • CheckOut (結帳)
• Order (訂單)
  • Caculate (計算結帳金額)

另外有兩種類別如下，

• ECoupon
  • Caculate
• Promotion
  • Caculate

上面的所有方法我都會加上單元測試作保護，
但是 Order 在呼叫 Caculate 的時候，
會以不同的順序組合 ECoupon.Caculate 與 Promotion.Caculate，
這個時候就有可能會產生不同的結果。

執行測試

同上一篇，整體的流程我們只要在 Build 完後加上測試即可。

1. Begin
2. MSBuild
3. Test
4. End

開發環境執行測試

1

dotnet test ./test/Marsen.NetCore.Dojo.Tests/Marsen.NetCore.Dojo.Tests.csproj

產生測試報告

1

dotnet test ./test/Marsen.NetCore.Dojo.Tests/Marsen.NetCore.Dojo.Tests.csproj --logger:trx;LogFileName=result.trx

測試報告會產生一份 result.trx 檔，在測試專案目錄底下的 TestResults 資料夾裡。
如果要在 SonarCloud 上使用請設定 sonar.cs.vstest.reportsPaths (VSTest 適用)，更多資訊請參考。

1
2
3
4

dotnet sonarscanner begin /k:"Marsen.NetCore.Dojo" /o:"marsen-github" /d:"sonar.host.url=https://sonarcloud.io" /d:"sonar.login="$SONAR_LOGIN
dotnet build ".\Marsen.NetCore.Dojo.Integration.Test.sln"
dotnet test ./test/Marsen.NetCore.Dojo.Tests/Marsen.NetCore.Dojo.Tests.csproj --logger:trx;LogFileName=result.trx
dotnet sonarscanner end /d:"sonar.login="$SONAR_LOGIN

覆蓋率

1. Begin
2. MSBuild
3. Test -產生報告
4. Test -覆蓋率
5. End

這裡實作上很簡單，但是在選擇上有一些困難與試誤，稍微作個記錄。

1. dotconver (棄選)

   • 似乎要綁定 resharper 的 lincese
   • 有 30 天的限制，不知道會不會影響功能
   • 不知道怎麼用 commandline 下載執行程式至 Github Action 執行實體上。

2. vstest.console.exe (棄選)

   • 似乎只能在 windows 上執行
   • 可以透過參數開始功能 --collect:"Code Coverage"，但產生的 .cover 檔 SonarCloud 不支援需要轉換格式
   • 不知道如何將 .cover 轉換為 .coverxml ， 可能是 visual studio enter prise 才有的功能 ?

3. opencover (coverlet)

   • /p:CoverletOutputFormat=opencover /p:CoverletOutput=./coverage/ 的語法不 Work
   • --collect:"XPlat Code Coverage" 是比較新的參數用法，可以使用設定檔

因諸多原因，我最後選擇了 Opencover(Coverlet) 的作法，
記錄步驟如下，

首先要在測試專案上安裝 Nuget 套件 coverlet.collector。
然後執行以下語法產生覆蓋率報告。

1

dotnet test ./test/Marsen.NetCore.Dojo.Tests/Marsen.NetCore.Dojo.Tests.csproj --settings coverage.xml

coverage.xml 設定檔如下，這個檔案必須是 xml 檔，檔名並沒有限制 :
Configuration > Format 請記得填寫 opencover

1
2
3
4
5
6
7
8
9
10
11
12

<?xml version="1.0" encoding="utf-8" ?>
<RunSettings>
  <DataCollectionRunSettings>
    <DataCollectors>
      <DataCollector friendlyName="XPlat code coverage">
        <Configuration>
          <Format>opencover</Format>
        </Configuration>
      </DataCollector>
    </DataCollectors>
  </DataCollectionRunSettings>
</RunSettings>

最後至 SonarCloud 上設定 sonar.cs.opencover.reportsPaths 的路徑

最後的最後，就來個 Budget 大集合吧

參考

• Test Coverage & Execution
• Docker 教學 - .NET Core 測試報告 (Coverlet + ReportGenerator)
• Coverlet
• Collecting test coverage using Coverlet and SonarQube for a .net core project
• Code Coverage in .NET Core Projects

(fin)