возвращает лексемы символьной строки
T = tokens(str [,delimiter])
символьная строка. Строка в которой ищутся лексемы.
(необязательный) символ или вектор символов. Разделители лексем.
вектор-столбец найденных лексем.
T = tokens(str [,delimiter])
ищет лексемы, содержащиеся
в строке str
. Значение разделителя
delimiter
по умолчанию [" ",<Tab>]
,
где <Tab>
стоит вместо ascii(9)
.