Python – Как работать с большими CSV-файлами

Всем привет!

В данном видео рассмотрим возможность чтения CSV-файла, размер которого больше свободного места оперативной памяти (ОЗУ). Как это можно сделать? Один из вариантов – использовать библиотеку dask. Также рассмотрим формат работы с табличными данными .parquet. Сравним производительность в случае CSV и Parquet для одной операции на одних данных.


Статья на сайте:
https://parsemachine.com/articles/pyt...

Другие уроки также доступны на канале и в разделе «Статьи» на сайте https://parsemachine.com/


#парсер #парсинг #урокипоpython #python_уроки #parsemachine #parsemachine_уроки #обучение_python #обучение_программированию #python_программирование #parsing #parse #parser #crawling #crawl #crawler #grabbing #grab #grabber #csv #pythoncsv #numpy #pandas #dask #dask_dataframe #parquet #формат_parquet #вычисления_в_python #питон_математика #python_math