アールメカブ

• バックアップ一覧
• 差分 を表示
• 現在との差分 を表示
• バックアップ を表示
• R_tokenizer へ行く。
  • 1 (2007-12-06 (木) 10:59:08)

[[Programming]]

* R でテキストをトークンに区切ってベクトルオブジェクトにする． [#a4d6412c]

 pt1 <- proc.time()
 alice.raw <- readLines("alice30.txt")
 alice.vec <-  unlist(strsplit(alice.raw, 
   split = "[[:blank:]]|[[:punct:]]",  
   extended = TRUE, perl = TRUE))
 alice.vec <- alice.vec[alice.vec != ""]

 pt2 <- proc.time()
 pt2 - pt1

 length(alice.vec)