Nextflow是啥？

Nextflow是一種基於Groovy語言寫成的workflow framework。Workflow framework對我們這些搞生物資訊的人來說是個很方便的工具，以往大家在分析各種data時，尤其是XX體(基因、蛋白或是微生物)相關的raw data時，往往得先對這些原始數據進行處理、過濾甚至檔案轉換等步驟，而這些步驟又通常是參考一些文獻或是產生那些原始資料用的設備商所提供的白皮書上面所說的方式來實做的。為了把這些步驟一個個串接起來，在過去，我們會選擇使用shell script或是perl之類的script language來把這些工作自動化。在當時，分析流程還沒這麼複雜的時候，可能還沒什麼問題，但隨著技術的進步，光是要做個簡單的分析就得用上好幾套不同的工具輪番上陣。因此，隨之而來的版本號問題、研究可重複性問題等也就成了當今生物資訊領域急需解決的一個難題。於是這些專門搭配資料處理流程的框架工具，也就在這幾年一一冒出來了。我自己目前知道的workflow framework就有以下這幾套 參考文獻：

• Nextflow
• SnakeMake
• Make/BioMake
• Galaxy
• CWL
• WDL/Cromwell
• GNU Guix

在這麼多的選擇當中，為什麼我會選擇Nextflow來用呢？主要是去年在ISMB 2017這場國際研討會上有個BOSC開的section都在介紹專門用來開發bioinformatics pipleine用的workflow framework，當時一見Nextflow簡直驚為天人啊！！！

Nextflow究竟有什麼好呢？

誠如官網上所說的：

• Fast prototyping: 很容易就寫出protype
• Reproducibility: 支援conda、docker甚至是雲端環境，還可用Environment Module來管理工具的版本
• Portable: 分開了pipeline內容的抽象層以及實際運行工作的執行層，提高了可移植性
• Unified parallelism: 支援各種常見的HPC平行機制
• Continuous checkpoints: Nextflow邊跑邊設checkpoint，一旦工作死了，可以從checkpoint再開始跑
• Stream oriented: 就像shell底下的管線操作一下，所有的資料都是透過Channel以stream方式傳輸

安裝非常簡單

$ curl -s https://get.nextflow.io | bash

裝完馬上來測試一下

$ ./nextflow run hello

來個Julia的例子

#!/usr/bin/env nextflow

people = ['Ronaldo', 'Maradona', 'Henry', 'Messi']                                     

process runJulia {                                                                        
    input:                                                                               
    val name from people                                 
    
    output:                                                                            
    stdout results                                                                      
    
    script:
    """                                                                                
    #!/usr/bin/env julia                                                                 
    greetname = "$name"                                                                 
    println("Hello, ", greetname)                                                       
    """
}

執行後可以看到：

是不是很方便呢？ 以後有機會再來跟大家分享Nextflow相關的東西。