61 lines
3.2 KiB
Markdown
61 lines
3.2 KiB
Markdown
## Домашнее задание №3 «Частотный анализ»
|
||
|
||
Необходимо написать Go функцию, принимающую на вход строку с текстом и
|
||
возвращающую слайс с 10-ю наиболее часто встречаемыми в тексте словами.
|
||
|
||
Если слова имеют одинаковую частоту, то должны быть отсортированы **лексикографически**.
|
||
|
||
* Словом считается набор символов, разделенных пробельными символами.
|
||
|
||
* Если есть более 10 самых частотых слов (например 15 разных слов встречаются ровно 133 раза,
|
||
остальные < 100), то следует вернуть 10 лексикографически первых слов.
|
||
|
||
* Словоформы не учитываем: "нога", "ногу", "ноги" - это разные слова.
|
||
|
||
* Слово с большой и маленькой буквы считать за разные слова. "Нога" и "нога" - это разные слова.
|
||
|
||
* Знаки препинания считать "буквами" слова или отдельными словами.
|
||
"-" (тире) - это отдельное слово. "нога," и "нога" - это разные слова.
|
||
|
||
#### Пример
|
||
```
|
||
cat and dog, one dog,two cats and one man
|
||
```
|
||
Топ 7:
|
||
- `and` (2)
|
||
- `one` (2)
|
||
- `cat` (1)
|
||
- `cats` (1)
|
||
- `dog,` (1)
|
||
- `dog,two` (1)
|
||
- `man` (1)
|
||
|
||
При необходимости можно выделять дополнительные функции / ошибки.
|
||
|
||
**(*) Дополнительное задание: не учитывать регистр букв и знаки препинания по краям слова:**
|
||
* "Нога" и "нога" - это одинаковые слова, "нога!", "нога", "нога," и " 'нога' " - это одинаковые слова;
|
||
* "какой-то" и "какойто" - это разные слова.
|
||
* "dog,cat", "dog...cat", "dogcat" - разные слова
|
||
* "-------" это слово
|
||
* "-" словом не является
|
||
|
||
### Критерии оценки
|
||
- Пайплайн зелёный - 4 балла
|
||
- Добавлены новые юнит-тесты - до 4 баллов
|
||
- Понятность и чистота кода - до 2 баллов
|
||
- Дополнительное задание на баллы не влияет
|
||
|
||
#### Зачёт от 7 баллов
|
||
|
||
### Подсказки
|
||
- `regexp.MustCompile`
|
||
- `strings.Split`
|
||
- `strings.Fields`
|
||
- `sort.Slice`
|
||
|
||
### Частые ошибки
|
||
- `regexp.MustCompile` используется в функции, а не уровне пакета - это плохо по следующим причинам:
|
||
* производительность: нет смысла компилировать регулярку каждый раз при вызове функции;
|
||
* функция не должна паниковать!
|
||
- При выполнении задания со звёздочкой забывают, что тире не должно являться словом.
|