Ciência de Dados - Melhores Formatos para Salvar seus Dados csv x parquet x feather

Quer saber mais sobre o nosso Curso Completo de Ciência de Dados? Clique no link abaixo para garantir sua vaga na próxima turma: https://blp.hashtagtreinamentos.com/ciencia-dados/esperacienciadadosimpressionador?origemurl=hashtag_yt_org_listaesperacd_pTwDOKfB9QA PARA BAIXAR O MINICURSO GRATUITO DE ANÁLISE DE DADOS: https://pages.hashtagtreinamentos.com/inscricao-minicurso-analisededados-python?origemurl=hashtag_yt_org_minipython_pTwDOKfB9QA ----------------------------------------------------------------------- ► Arquivos Utilizados no Vídeo: https://pages.hashtagtreinamentos.com/arquivo-cienciadados-1jOa6Lw0e3X-J7V3_KILI9fXgRsJfAz7P?origemurl=hashtag_yt_org_planilhacd_pTwDOKfB9QA ► Otimizando Dataframes do Pandas https://youtu.be/0IoOuHeYERg ----------------------------------------------------------------------- Playlist Pandas Python: https://www.youtube.com/watch?v=4fSCEcMYyLc&list=PLpdAy0tYrnKwBTr4Ouo3LBeT6ZXgOgi7h ----------------------------------------------------------------------- PARA CONTRATAR A HASHTAG PARA SUA EMPRESA: https://www.hashtagtreinamentos.com/treinamentos-corporativos?fonte=yt ----------------------------------------------------------------------- Fala Impressionadores! Na aula de hoje eu quero falar sobre algo muito importante, os melhores formatos para salvar seus dados. Eu quero te mostrar alguns formatos diferentes do csv que você já deve conhecer e quais as vantagens que esses outros formatos possuem em relação ao csv. Em relação a programação, temos alguns formatos que são menores em termos de armazenamento e podem ser lidos e gravados de forma mais rápida. Isso vai te ajudar em diversos casos, principalmente com bases muito grandes, você vai notar como a diferença é absurda comparada com o csv. Vou te mostrar o formato pickle, formato parquet e o formato feather, além do csv, é claro! Vem comigo e veja como existe uma diferença absurda em relação ao csv e como você pode utilizar esses formatos com o pandas Python! ----------------------------------------------------------------------- Hashtag Programação ► Inscreva-se em nosso canal: http://bit.ly/3c0LJQi ► Ative as notificações (clica no sininho)! ► Curta o nosso vídeo! ----------------------------------------------------------------------- Redes Sociais ► Blog: https://bit.ly/2MRUZs0 ► YouTube: http://bit.ly/3c0LJQi ► Instagram: https://bit.ly/3o6dw42 ► Facebook: http://bit.ly/3qGtaF2 Aqui nos vídeos do canal da Hashtag Programação ensinamos diversas dicas de Ciência de Dados para que você consiga se desenvolver e até mesmo mudar de área mesmo sem nenhuma experiência! ----------------------------------------------------------------------- Conteúdo da Aula 00:00 Introdução 01:00 Objetivo da aula 01:39 Apresentação da base de dados 02:12 Método head na base em csv 03:14 Problema com formato csv + Otimizações 08:27 Verificando as informações do diretório 10:22 Tempo de exportação para csv 12:49 Verificando as informações do diretório (2 arquivos) 13:31 Leitura do novo arquivo (perda das otimizações) 16:02 Quando utilizar arquivos csv? 18:34 Formato pickle (leitura, exportação e otimizações) 24:44 Formato parquet (instalação pyarrow ou fastparquet) 29:41 Formato feather (leitura, exportação e otimizações) 31:55 Resumo da aula + Informações importantes 37:08 Qual tipo de arquivo usar? 39:10 Formatos e leitura e exportação no pandas 40:05 Conclusão #cienciadedados #cienciadados #hashtagprogramacao