Курс Python → Очистка данных в Python

Для дальнейшей обработки данных в Python часто приходится выполнять различные манипуляции с датафреймами. Одним из способов очистки данных является удаление ненужных столбцов, создание новых столбцов на основе существующих данных или удаление строк, не соответствующих определенным условиям.

Например, если у нас есть датафрейм с несколькими столбцами, нам может потребоваться удалить столбцы с определенными именами. Для этого можно воспользоваться методом drop, указав нужные столбцы в параметре columns. Новый датафрейм с отброшенными столбцами будет возвращен в качестве результата.


new_df = df.drop(columns=['Id', 'Name']).copy()

Также часто требуется проверить значения в столбце на определенное условие и сохранить только те строки, которые соответствуют этому условию. Например, если мы хотим сохранить только строки, в которых значение столбца Type равно ‘frozen’ или ‘green’, можно воспользоваться логическим индексированием.


filtered_df = df[df['Type'].isin(['frozen', 'green'])].copy()

Таким образом, путем комбинации различных методов работы с датафреймами в Python можно эффективно очищать данные от ненужной информации и подготавливать их для дальнейшего анализа или использования.

Твои коллеги будут рады, поделись в

Автор урока

Дмитрий Комаровский
Дмитрий Комаровский

Автоматизация процессов
в КраснодарБанки.ру

Другие уроки курса "Python"

  1. Создание множества в Python
  2. Поиск с помощью регулярных выражений
  3. Методы __repr__ и __str__ в Python
  4. Установка Git и AWS CLI
  5. Метод eq для сравнения объектов
  6. Работа с модулем glob в Python
  7. Переворот списка в Python
  8. Счетчик ссылок в Python
  9. Работа с IP-адресами в Python
  10. Контекстный менеджер в Python
  11. Парсинг статей с Newspaper3k
  12. Роль object и type в Python
  13. Избегайте двойного подчеркивания
  14. Структура данных словарь в Python
  15. Хранение данных с помощью dataclasses
  16. Оптимизация гиперпараметров в Python
  17. Функция rsplit() в Python
  18. Оператор is в Python
  19. Потоковый ввод в Python
  20. Глобальные переменные в Python
  21. Функция sleep() в Python
  22. Нахождение самого длинного слова в списке с помощью max
  23. inspect в Python: анализ кода
  24. Вызов функций по строке в Python.
  25. Модуль itertools: эффективная работа с итераторами
  26. Работа со строками
  27. Нахождение максимального значения и его индекса в списке
  28. Работа с датой и временем в Python
  29. Метод join() для объединения строк
  30. Игра «Камень, ножницы, бумага» — Python
  31. Область видимости переменных в Python
  32. Анонимные функции Lambda
  33. Создание таблиц в Python с PrettyTable
  34. Декораторы в Python
  35. Поиск элементов BeautifulSoup
  36. Работа с deque в Python
  37. Определение объема памяти объекта
  38. Вычисление логарифмов в Python
  39. Бинарный поиск
  40. Подсчет элементов в списке с Counter
  41. TypedDict для kwargs в Python 3.12
  42. Очистка вывода в Python
  43. Идентификатор объекта в Python
  44. Функция format() в Python
  45. Поиск уникальных элементов строкой в Python
  46. Разбиение строки в Python
  47. Поиск кода
  48. Переопределение метода __floordiv__

Marketello читают маркетологи из крутых компаний