Извините, метод наименьших квадратов используется для линейной регрессии. В указанной Вами статье используется логистическая. В данном случае я бы рекомендовала использовать готовые статистические пакеты.
1. Да, этот метод используется для оценки параметров регрессионной модели. 2. Каждая категориальная входная переменная, содержащая k категорий, должна быть преобразования в k-1 фиктивных переменных. Т.е. у переменной 3 категории - красный, желтый, зеленый. Определяем бинарные переменные "К" и "Ж". Тогда категории определяются...