#ifndef __TOKENIZE_UTIL__
#define __TOKENIZE_UTIL__

#include <string>
#include <vector>

std::vector<std::string> token_split(const std::string& text);

#endif // __TOKENIZE_UTIL__