or
Este exercício faz parte do curso
Neste capítulo, abordamos por que é preciso aplicar novas técnicas quando os conjuntos de dados são maiores do que a RAM disponível. Mostramos que importar e exportar dados usando as funções base do R pode ser lento e apresentamos algumas maneiras simples de contornar isso. Por fim, introduzimos o pacote bigmemory.
Agora que você já tem alguma experiência com o bigmemory, vamos passar por algumas técnicas simples de exploração e análise de dados. Em especial, veremos como criar tabelas e implementar a abordagem dividir-aplicar-combinar.
Vamos usar o pacote iotools, que pode processar dados numéricos e de texto, e apresentar o conceito de processamento em blocos (chunk-wise).
Nos capítulos anteriores, apresentamos os dados de habitação e mostramos como calcular com dados que são tão grandes quanto, ou maiores do que, a quantidade de RAM em uma única máquina. Neste capítulo, faremos uma análise preliminar dos dados, comparando várias tendências ao longo do tempo.
Exercício atual