replace_punctuation_with_space.js

replace_punctuation_with_space.js

const punctuation = /[!"#$%&'()*+,-./:;<=>?@[\]^_`{|}~\s]/g;

preprocessingWord = (word) => 
        word
            .toLowerCase()                // Convert all uppercase to lowercase
            .replace(punctuation, ' ')    // replace punctuation with space.
            .replace(/  +/g, ' ');        // Drop excess spaces.



// Example

let text = "BUNDAN SONRA    NEFRET...  SÖYLEMİ!;., SÖYLENMEYECEKTİR.,,,-."
console.log(preprocessingWord(text));

// output: bundan sonra nefret söylemi̇ söylenmeyecekti̇r