Алфавитно-частотный словарь на основе односвязного списка с применением токенов

#include <iostream>
#include <fstream>
#include <locale> 
 
using namespace std;
 
void main()
{
    setlocale(LC_ALL,"rus");
 
    ifstream in("text.txt"); //Файл от куда будет браться текст
 
    const char separator[]=" \.,";
    char S[]="Строка, которая будет разбита на отдельные слова ";
    char *Ptr=NULL;
    char *temp=new char[strlen(S)+1]; //выделили память для создания резервной копии строки
 
    strcpy(temp,S);//Скопировали строку в резервную копию
 
 
    Ptr=strtok(S,separator); //Исходная строка будет изменена
    while (Ptr)
    {
       cout<<Ptr<<"\n"; //выводим слово из строки на экран
       Ptr=strtok(0,separator); //указываем на новый токен
    }
 
    strcpy(S,temp); //Восстанавливаем строку из резервной копии
    cout<<S << endl;
    delete []temp; //Так как выделяли память, не забываем ее чистить
 
    system("pause");
    
}

#include <iostream>
#include <fstream>
#include <iomanip>
#include <map>
#include <string>
#include <algorithm>    // ptr_fun
#include <cctype>       // transform, isalnum
using namespace std;
 
// для упрощения читаемости кода новый тип данных - словарь
// Словарь хранит данные в виде "слово/значение"
typedef map<string, int> freq_dic;
 
// Парсинг текста
void parse_text(istream&, freq_dic&);
 
int main()
{
    try
    {
        // Открыть файл
        ifstream  in_file("test.txt");
        if(!in_file) throw; 
        
        // Частотный словарь
        freq_dic dic;
        
        // Парсинг текста
        parse_text(in_file, dic);
        
        // Вывод содержимого словаря на экран
        cout << "WORD"  << '\t' << "FREQUENCY" << endl;
        for(freq_dic::iterator it = dic.begin(); it != dic.end();  ++it)
            cout << it->first << '\t' << it->second << endl;
    }   
    catch(...)
    {
        cout << "Error open file" << endl;
    } 
    return 0;
}
 
// Парсинг текста
void parse_text(istream &in, freq_dic &dic)
{
    string s;
    // оператор >> читает из левого операнда отрезки, не содержащие пробелов (слова)
    while(in >> s) 
    {
        // в верхний регистр
        transform(s.begin(), s.end(), s.begin(), ptr_fun<int, int>(toupper));
        // удаление не букво-цифровых символов с конца строки
        // while для случаев типа ",-"
        while (!isalnum(s[s.length() - 1])) s.erase(s.length() - 1, s.length());
        // запись в словарь слова
        // map определяет оператор [], позволяющий получить значение данного ключа
        // если ключ в словаре не существует, данный оператор его добавить со значением по умолчанию (0)
        // а оператор ++ его инкрементирует, т.е. будет записано 1
        ++dic[s];
    }
}