Бывшие сотруднки хотят уделать GOOGLE

Бывшими сотрудниками google создан новый поисковый инструмент, который по заявлениям создателей может существенно потеснить google.

Подробнее »

Google раскрывает свои секреты

Google открывает секреты будущего поиска. Google добавил новую функцию, которая призвана обосновать результаты поиска.

Подробнее »

Токенизация

Перейти на стартовую или букву А Б В Г Д Е Ж З И К Л М Н О П Р С Т У Ф Х Ц Ч Ш Щ Э Ю Я

Токенизация (tokenization, lexical analysis, графематический анализ, лексический анализ) – выделение в тексте слов, чисел, и иных токенов, в том числе, например, нахождение границ предложений.