tokenizer
-
php'yi bilmem ama genel anlamda bir delimiter (ornek: space) ile ayrilmis degerlerden olusan bir string'in degerlerinin ayristirmak demektir. c++'da bir ornek soyle gosterilebilir:
void tokenize (string inputstr, vector<string> tokens ) {
string buf ;
stringstream ss(inputstr) ;
while( ss >> buf ) {
tokens.push_back(buf) ;
}
}
mystring'imiz "ali topu at" olsun:
tokenize (mystring) ifadesi "ali", "topu" ve "at" degerlerini ayri ayri 1, 2 ve 3. olarak kaydedecektir. -
-
(bkz: split)
-
sozleri de soyledir;
"tokenizer, token, tokenizer
you're a tokenizer,
oh tokenizer, oh you're a tokenizer, dude
you, you, you are
you, you, you are
tokenizer, tokenizer, tokenizer" -
(bkz: strtok)
-
ekşi sözlük kullanıcılarıyla mesajlaşmak ve yazdıkları entry'leri
takip etmek için giriş yapmalısın.
hesabın var mı? giriş yap