顯示具有 haskell 標籤的文章。 顯示所有文章
顯示具有 haskell 標籤的文章。 顯示所有文章

2013年9月7日 星期六

使用 Chart 和 Chart-cairo 繪製統計圖

很多時候我們會想要用圖來呈現我們的資料,畢竟我們對數字的敏銳度不是很高。提到統計繪圖,大部分人會想到 gnuplot 或是 R。對於程式設計人員來說,這代表他們必須寫程式來產生讓 R 或是 gnuplot 繪圖的程式碼,然後再利用作業系統的程式呼叫方法(fork + exec* , CreateProcess)來執行這段程式碼。這樣做不只麻煩(呼叫並管理子程式在某些書甚至會佔去一整章),而且還會犧牲掉不少效能。

Haskell 跟許多程式語言一樣,有人替它寫了圖表繪製程式庫(chart library) Chart。在它的 wiki 裡面可以看到幾個簡單的例子,而且畫出來的圖也挺好看的,更支援 svg, png 等格式的輸出(藉著 cairo 或 diagrams),簡直意圖誘惑人使用。

那些例子裡面沒有說明的部份,包括了中文字使用,字型調整這兩項。所以,我以這兩個項目為主軸,隨便弄了簡單的資料,畫出了相當精簡的圖。主要的程式碼請參考這裡。

圖會出來會變成

(我應該放點心思在配色上的..應該是,請看在我肝臟的份上原諒我吧Orz)

使用中文字的關鍵在於設定正確的字型。如果設定的字型沒有中文字,則在應該是中文字的地方會出現方塊圖樣,暗示在該字型中找不到中文字。

Chart 程式庫最特別的地方在於它利用了 lens (不妨 google "Control.Lens" 來找相關的資料) 來讓設定圖表變得(相對的)比較容易。只是對於 lens 我還是第一次使用,所以程式碼裡面難免會有些不漂亮的寫法。如果有幸某大師瞧見了拙作,歡迎不吝指教!

2013年9月6日 星期五

使用 cabal (1.18) 安裝 cairo (改0.12.4.1 beta) 的 haskell binding

Cabal 1.18, 帶有萬眾矚目沙盒功能的 cabal 終於降臨這個世界了!從聽說這版本會導入沙盒功能開始就一直期待到現在,終於出了!或許我們可以準備 cabal-dev 的退休金,讓他回鄉下養老了。關於沙盒功能,有篇文章做了不錯的介紹,歡迎參考。

上面那個其實算是題外話。這裡要紀錄如何修改,讓 cairo-0.12.4.1 (目前,20130906,在 gtk2hs 程式碼倉庫上最新的版本)可以被 cabal 1.18 建置。

首先,要從 gtk2hs 的原始碼倉庫取得最新版的 cairo 原始檔,接著照下面修改:

diff -rN -u old-gtk2hs/cairo/cairo.cabal new-gtk2hs/cairo/cairo.cabal
--- old-gtk2hs/cairo/cairo.cabal        2013-09-06 21:17:11.559949736 +0800
+++ new-gtk2hs/cairo/cairo.cabal        2013-09-06 21:17:11.798946617 +0800
@@ -1,5 +1,5 @@
 Name:           cairo
-Version:        0.12.4.1
+Version:        0.12.4.1.1
 License:        BSD3
 License-file:   COPYRIGHT
 Copyright:      (c) 2001-2010 The Gtk2Hs Team, (c) Paolo Martini 2005, (c) Abraham Egnor 2003, 2004, (c) Aetion Technologies LLC 2004
diff -rN -u old-gtk2hs/cairo/Gtk2HsSetup.hs new-gtk2hs/cairo/Gtk2HsSetup.hs
--- old-gtk2hs/cairo/Gtk2HsSetup.hs     2013-09-06 21:17:11.557949762 +0800
+++ new-gtk2hs/cairo/Gtk2HsSetup.hs     2013-09-06 21:17:11.797946630 +0800
@@ -17,6 +17,7 @@
 
 import Distribution.Simple
 import Distribution.Simple.PreProcess
+import Distribution.Simple.Program.Find (defaultProgramSearchPath)
 import Distribution.InstalledPackageInfo ( importDirs,
                                            showInstalledPackageInfo,
                                            libraryDirs,
@@ -441,7 +442,7 @@
 checkGtk2hsBuildtools :: [Program] -> IO ()
 checkGtk2hsBuildtools programs = do
   programInfos <- mapM (\ prog -> do
-                         location <- programFindLocation prog normal
+                         location <- programFindLocation prog normal defaultProgramSearchPath
                          return (programName prog, location)
                       ) programs
   let printError name = do
diff -rN -u old-gtk2hs/cairo/SetupWrapper.hs new-gtk2hs/cairo/SetupWrapper.hs
--- old-gtk2hs/cairo/SetupWrapper.hs    2013-09-06 21:17:11.558949749 +0800
+++ new-gtk2hs/cairo/SetupWrapper.hs    2013-09-06 21:17:11.797946630 +0800
@@ -6,7 +6,7 @@
 
 import Distribution.Package
 import Distribution.Compiler
-import Distribution.Simple.Utils
+import Distribution.Simple.Utils hiding (moreRecentFile)
 import Distribution.Simple.Program
 import Distribution.Simple.Compiler
 import Distribution.Simple.BuildPaths (exeExtension)

接著

cd /path/to/your/designated/sandbox
cabal sandbox init
cabal install path/to/patched/cairo

注意事項

如果使用

cabal --with-ghc=your-ghc install
的話有機會導致失敗:在建立安裝程式碼的時候,cabal 似乎會使用系統預設的 ghc ,也就是在系統路徑下可以找到的那個 ghc。如果 your-ghc 的版本和 ghc 差太多,而且各自的預設 haskell 套件庫裡面的 Cabal 版本不一致,就會導致很嚴重且難以追蹤的錯誤。

這樣子弄完後應該就可以使用了。為了弄 Chart 以及 Chart-cairo (Chart-diagrams 好像很悲劇的不能畫出中文)結果被 cairo 卡了好幾個小時...

2013年8月4日 星期日

使用前請先看說明書喔~

使用任何東西之前,即使自以為熟悉,也要掃描過說明書。如果不恰當的使用這個東西會造成不幸,那就要詳讀說明書。

看了上面的話會不會覺得接著要說的事情很嚴肅?其實這句話是這樣來的,請聽我娓娓道來..

因為有可能會在沒有網路的情況下寫 haskell 程式,很擔心寫到一半發現漏掉了某個程式庫,就只能輕扯頭髮,責罵自己的糊塗...。但我沒有預測未來的能力,很難判斷自己會不會突然需要哪個程式庫..那,如果可以擁有整個 hackage 的話呢(也就是做一個 hackage 的私人 mirror)?

在這樣的構想下,對 hackage 進行探索,發現藉由取得 00-index.tar.gz 即可得到所有 hackage package 存放的位置等珍貴資訊。我可以依據這樣的資料下載整個 hackage 到自己的電腦裡。

對這個程式有興趣的見這裡。這個程式的流程大概是:使用 http-conduit 的 simpleHttp 下載索引檔,剖析它的目錄結構,接著規劃下載(當然也利用 http-conduit 的 simpleHttp),然後全部下載完後做解壓縮測試看有沒有下載錯誤。這樣就結束了是也~為什麼用 http-conduit 的 simpleHttp?它就寫在 http-conduit 說明文件最上端的範例裡,就用下去了。

2013年8月2日 星期五

Parsec 練習:寫個 ass 字幕剖析程式

有些事情很講求緣份,像是遇到不錯且值得去認識的人,或是看到了不錯的程式語言,或是注意到某家餐廳的文宣...。這裡也一樣。

某天在讀 Real World Haskell 的 parsec 那章,有點累想看影片的時候,發現某個 ass 字幕和影片不同步...(差了一秒鐘左右)。隨手找了個叫做 AegisSub 的軟體,正打算安裝起來時發現它需要 wxWidget 2.9 (的樣子),而 Fedora 19 附帶的只有 wx 2.8。正在思考要不要安裝 wx 2.9 的時候突然有種靈光一閃的感覺:「這不是練習使用 hasell parser combinator 的好時機嗎?」,就動工了 :p

2013年7月22日 星期一

用Haskell來食用標籤湯!

網路逛久了總會冒出一些像是「能不能收集某頁面中的所有連結」等想要把某些網頁集合起來做整理的想法。數量少的話,可以手工的做;但數量要是多起來...會很可怕的喔!

這時候就讓自己的程式設計能力上場吧!如果網站沒有提供特別的程式設計界面的話,直接抓取網頁下來分析可能是唯一的方法了。在瀏覽器裡面被排得美美的網頁實際上由 html 這種標記語言所描述,由瀏覽器所呈現。也就是,想要瀏覽器裡面看到的資料,多半可以藉著分析所得網頁的 html 來取得。(利用 javascript 即時生成內容的 Twitter 則是例外。幸好,Twitter 似乎有提供程式設計界面。)

在 Haskell 界最常被提到的 html 剖析器有 HXT 以及 tagsoup。這裡我試用tagsoup寫了一個用來處理簡單的網頁的小程式:見此

寫作這類程式最常不放心的點在於,「網頁改版了,那我的程式就只能去喝西北風了」。有些人會考慮到這點,然後在自己的程式裡面加上一些比較彈性的寫法。然而,我也聽過某些人認為這種擔心是不必要的:到時再重寫就好啦!

反正到時候一定可以解決,不用擔心,先寫再說吧!

2013年7月6日 星期六

cabal, cabal-dev 疑難雜症處理

最近為了要設置隔離的開發環境,使用了cabal-dev。相對於把 haskell 套件安裝到系統區內,cabal-dev 會把套件安裝到另外的地方。這樣做的好處是:

  • 可以確認自己的程式可以在乾淨的環境中被建置起來
  • 有比較大的機會避開套件地獄。
    所謂套件地獄,是指兩個套件依賴了名稱相同,但版本互相衝突的套件的現象。之所以叫做地獄,是因為使用者將因為不知如何是好而狂抓頭皮(或臉頰),並且眼中浮現地獄的景色,故得其名(?)
這裡紀錄了一些遇到的問題以及我使用的解法。

2013年6月28日 星期五

Haskell FFI 的使用(簡單版)

Haskell 雖然強大,Haskell platform 也帶有許多相當好用的程式庫,然而有時候你會發現它少了些我們想用,但目前只在 C 語言程式庫找得到的功能,(例如 podofo 的 PDF 讀寫功能, clutter 的動畫功能。)或者是不滿意某個 Haskell 程式庫的設計(freetype2 package 沒有 high level binding),這時就會需要利用到 Haskell 的「外語功能界面」(Foreign Function Interface)來讓 Haskell 取用 C 語言程式庫所提供的獨家功能。

為了目前規劃中的需要,我試著使用了 FFI 來讓我的 Haskell 程式呼叫我的 C 程式碼:HERE!

2013年6月22日 星期六

安裝第二個GHC在系統中

「新的 GHC 支援我想要的那個XX功能了!」但是系統裡面已經有一個 GHC了?「反正人家就是要最新版的 GHC 啦」?這時候你除了等待你的 Linux distribution 提供更新以外,也可以自力更生,把自己想要的 ghc 及所對應的 haskell-platform 打造出來!

2013年6月17日 星期一

想要離線的 haskell 文件哪裡找?

如果說你可能會有一段時間沒辦法用網路,但又想和 haskell 相親相愛...我們可以準備好編譯器、程式庫等的安裝,但說明文件呢? 沒有說明文件的話可是會讓寫程式變得痛苦不堪!(一定會卡住,一直想著想用的到底是哪個 API,函數原型長怎樣,然後到最後只能打草稿...)

和 haskell 一起的經驗應該是快樂的!所以,我們來試著自己做文件吧!

使用cabal

(出處:見 這裡)

如果你相當把握你只會使用某些 package,那就在還可以用網路的時候使用 cabal 來製作文件吧。cabal 預設不會幫你建立文件,所以你必須修改 ~/.cabal/config。打開它,找到以下這行:

-- documentation: False
然後改成
documentation: True
然後重新安裝你想要文件的 package 。須注意重新安裝很多package可能會相當危險。 (這裡 有重新安裝除了 base 以外所有 package 的方法)

想要 ghc runtime library 的相關文件的話,請見下面「下載所有 haskell package」部份的 libraries.html.tar.bz2

使用這個方法建立文件的話,會有個文件索引在~/.cabel/share/doc/index.html

離線建立文件

如果說你沒把握你只會玩弄某幾個 package,而希望可以保險一點的話,那麼就想辦法把整個 hackage 裡的所有 package 都下載下來不就好了?

下載所有的 haskell package

我們會需要下面的所有東西:

  • 在GHC 文件下載區選正確的版本,然後下載:
    • haddock.html.tar.bz2
    • libraries.html.tar.bz2
    • users_guide.html.tar.bz2
  • Hackage 下的 Getting the raw data,或是 下載整個Hackage archive(使用wget)
如果下載的是 Getting raw data 中的 00-archive.tar, 則:
mv /path/to/00-archive.tar /tmp
cd /tmp
mkdir hackage
cd hackage
tar -xf ../00-archive.tar
每個對應的 haskell package 就會存在/tmp/hackage/PACKAGE_NAME/VERSION/PACKAGE_NAME-VERSION.tar.gz

建立文件(相依套件已存在)

文件下載好後,我們利用下面的步驟來建立文件

# in /tmp
mkdir build
cd build
tar -xf ../hackage/array/0.4.0.1/array-0.4.0.1.tar.gz
runhaskell Setup configure --builddir=./array-build --user
runhaskell Setup build --builddir=./array-build
runhaskell Setup haddock --builddir=./array-build
# 完工\^o^/ ,去./array-build/doc 找做好的文件
# 想順便安裝的話...
runhaskell Setup install
# 安裝完後,也可以在 ~/.cabal/share/doc 下找到做好的文件。
另外一種方法:
mkdir build
cd build
tar -xf ../hackage/array/0.4.0.1/array-0.4.0.1.tar.gz
cabal configure
cabal haddock
# 此時文件會在 dist/doc/html 中
# 如果想要安裝起來,那就再執行:
cabal install

如果相依套件不存在,就找到相依套件,然後使用這裡的步驟把所有的相依套件安裝起來吧!

建立文件(相依套件未存在且不想安裝)

假如你不想安裝建置好的程式庫(?),那麼你可以考慮利用這裡的方式,暫時把相依套件建立在某個暫存區內。

假設我們想安裝zip-archive, 結果發現:

$ runhaskell Setup configure --builddir=../build --user
Configuring zip-archive-0.1.3.4...
Setup: At least the following dependencies are missing:
digest >=0.0.0.1, utf8-string >=0.3.1
$ 
那就試試這裡的步驟吧!
(相依性資訊記載於下載下來 package 的 tar.gz 中的 .cabal 檔中的 Build-depends 內)

# in /tmp
$ mkdir build
$ cd build
$ # 解開包裹
$ tar -xf ../hackage/utf8-string/0.3.7/utf8-string-0.3.7.tar.gz
$ tar -xf ../hackage/digest/0.0.1.2/digest-0.0.1.2.tar.gz
$ tar -xf ../hackage/zip-archive/0.1.3.4/zip-archive-0.1.3.4.tar.gz
$ # 設定暫存位置
$ mkdir packages # package 暫存區
$ mkdir tmp # build 暫存區
$ # 設定暫時 package 註冊區
$ ghc-pkg init package-db
$ # utf8-string 0.3.7
$ cd utf8-string-0.3.7/
$ runhaskell Setup configure --builddir=../tmp/utf8-string\
 --prefix=`pwd`/../packages --package-db=../package-db
Configuring utf8-string-0.3.7...
$ runhaskell Setup build --builddir=../tmp/utf8-string
Building utf8-string-0.3.7...
Preprocessing library utf8-string-0.3.7...
# 編譯過程,略
$ runhaskell Setup haddock --builddir=../tmp/utf8-string
Running Haddock for utf8-string-0.3.7...
Preprocessing library utf8-string-0.3.7...
Warning: The documentation for the following packages are not installed. No
links will be generated to these packages: rts-1.0
Haddock coverage:
 100% (  8 /  8) in 'Codec.Binary.UTF8.String'
  94% ( 16 / 17) in 'Codec.Binary.UTF8.Generic'
  89% ( 24 / 27) in 'Data.String.UTF8'
  82% ( 14 / 17) in 'System.IO.UTF8'
  14% (  1 /  7) in 'System.Environment.UTF8'
 100% ( 17 / 17) in 'Data.ByteString.UTF8'
 100% ( 17 / 17) in 'Data.ByteString.Lazy.UTF8'
Documentation created: ../tmp/utf8-string/doc/html/utf8-string/index.html
$ runhaskell Setup install --builddir=../tmp/utf8-string
Installing library in
/tmp/build/utf8-string-0.3.7/packages/lib/utf8-string-0.3.7/ghc-7.4.1
Registering utf8-string-0.3.7...
$ cd ..
$ # digest 0.0.1.2
$ cd digest-0.0.1.2
$ runhaskell Setup configure --builddir=../tmp/digest --prefix=`pwd`/../packages --package-db=../package-db
Configuring digest-0.0.1.2...
$ runhaskell Setup build --builddir=../tmp/digest
Building digest-0.0.1.2...
Preprocessing library digest-0.0.1.2...
[1 of 2] Compiling Data.Digest.Adler32 ( ../tmp/digest/build/Data/Digest/Adler32.hs, ../tmp/digest/build/Data/Digest/Adler32.o )
[2 of 2] Compiling Data.Digest.CRC32 ( ../tmp/digest/build/Data/Digest/CRC32.hs, ../tmp/digest/build/Data/Digest/CRC32.o )
In-place registering digest-0.0.1.2...
$ runhaskell Setup haddock --builddir=../tmp/digest
Running Haddock for digest-0.0.1.2...
Preprocessing library digest-0.0.1.2...
# 建立文件訊息,略
Documentation created: ../tmp/digest/doc/html/digest/index.html
$ runhaskell Setup install --builddir=../tmp/digest
Installing library in
/tmp/build/digest-0.0.1.2/../packages/lib/digest-0.0.1.2/ghc-7.4.1
Registering digest-0.0.1.2...
$ cd ..
$ # zip-archive
$ cd zip-archive-0.1.3.4/
$ runhaskell Setup configure --builddir=../tmp/zip-archive --prefix=`pwd`/../packages --package-db=../package-db
Configuring zip-archive-0.1.3.4...
$ runhaskell Setup build --builddir=../tmp/zip-archive
Building zip-archive-0.1.3.4...
Preprocessing library zip-archive-0.1.3.4...
[1 of 1] Compiling Codec.Archive.Zip ( src/Codec/Archive/Zip.hs, ../tmp/zip-archive/build/Codec/Archive/Zip.o )
In-place registering zip-archive-0.1.3.4...
$ runhaskell Setup haddock --builddir=../tmp/zip-archive
# 建立文件訊息,略
$ runhaskell Setup install --builddir=../tmp/zip-archive
Installing library in
/tmp/build/zip-archive-0.1.3.4/../packages/lib/zip-archive-0.1.3.4/ghc-7.4.1
Registering zip-archive-0.1.3.4...

這樣就完成了呢!這時候文件會存放在/tmp/build/packages/share/doc/裡面,然後你就可以開始閱讀他們了!

2013年6月16日 星期日

解壓縮zip檔案:當中文字變成亂碼之二

前情見上一篇。 弄了一天多,總之弄出了可以用的東西(在這裡,想要看程式碼的人,歡迎光臨!)。

2013年6月15日 星期六

解壓縮zip檔案:當中文字變成亂碼

最近學習haskell中,想要拿幾個文字檔來練習IO以及資料處理。首先試著找"open data taiwan",想看有沒有台灣政府提供的政府資料。找著找著,找到了經濟部能源局的資料。點了第一個下來,開始準備解壓...檔名是亂碼Orz

雖然可以猜得出檔名應該是「國際原油價格.csv」,但對於處理內有中文檔名的壓縮檔已經不是第一次了。我想要一口氣解決它!(然後haskell之夜就泡湯了Orz,詳下)

搜尋發現了一些解決方案,包括了「unzip -O」(我的unzip沒有這個選項),「LANG環境變數+7za」(出來還是亂碼)。我想要一個可以解壓縮,然後一邊更改檔案名稱編碼的解壓縮程式,不過目前看起來能夠符合我條件的解壓縮程式似乎不存在,所以只好自己來做一個簡易版的。

我首先考慮了正在練習的haskell,但是,就在我腦袋閃過了python的解決方法後,我決定先用python試一下,然後...就結束了?(程式碼見此)

那個python的解決方案使用了python 2.x,而不是python3。仔細一瞧,python3 的 zipfile 模組傳回的檔名字串似乎沒辦法轉換成原本在zip檔中的原始字串(raw string,原汁原味的那個字串),所以沒辦法像在python 2.x裡那樣子做編碼轉換。

鑑於python沒機會了,我想依賴haskell看看。在hackage中搜尋之後,我猜使用zip-archive, iconv,再配合上bytestring這三個package應該就可以完成目標了:使用Data.ByteString.Lazy.Char8 的 pack, Codec.Text.IConv 的 convert 應該就可以順利的進行轉換。現在有點晚了,明天再來試試看。

每次看到別人說 haskell 只是學術界教授們在用的程式語言,我都覺得很傷心:明明有那麼多的 package,這麼有趣的語法...。因此,我衷心的希望我可以利用這次機會來證明 haskell 不只是象牙塔裡的玩具,因此我會加油的!

2012年12月29日 星期六

Haskell: 無盡的路上有foldr真好!

在讀Learn you a haskell for great good時(附帶一提,這本書的插圖好可愛,看的時候會開心^^),和某位苦主(看這裡)一樣有個疑問:為什麼foldr可以處理無限長的串列但是foldl卻不行?

看了好幾次foldl和foldr的定義,都還沒參透的,資質駑鈍的我,只好求助於Google大神。