Aula DDJ UFPR

Aula sobre visualização na disciplina de Jornalismo Investigativo e de Dados na UFPR, com a prof. Myrian Del Vecchio, 30 out 2019.

1. Exemplos

Alguns projetos interessantes envolvendo dados na redação da Gazeta do Povo (2010-2019): reportagens investigativas, infográficos para matérias, páginas com dados automatizados.

Abrir slides em outra janela
(Links quebrados: Retratos PR, 1000 homicídios, Eleições 2014)

2. Gráfico de corrida eleitoral

• Crie uma conta no Flourish (https://app.flourish.studio)
• Abra a tabela-exemplo-dataviz na aba Line Chart Race
• Crie uma nova visualização
• Escolha o modelo Line Chart Race

Exemplo com o Flourish: Abismo racial em escolas de Ribeirão Preto

3. Teoria rápida

Abrir slides em outra janela: Visualização de dados - teoria rápida

4. Raw

• Abra o Raw Graphs (https://app.rawgraphs.io/)
• Abra a tabela-exemplo-dataviz na aba Bolhas (Raw)

Abrir slides em outra janela: Gráficos básicos com Raw Graphs

Mais detalhes sobre como formatar uma tabela (slide 15 em diante)

5. Extras

Links e outras dicas para trabalhar com dados

Tabelas em excel com o resultado das Eleições 2018

Dados das votações das eleições 2018 em tabelas excel (.xlsx) ou arquivo de texto (.csv) para download, pra facilitar a vida de quem tem dificuldade de trabalhar com os arquivos grandes em .csv ou .xml do TSE.  Veja aqui exemplos de gráficos e mapas sobre a eleição 2018

para baixar

votações gerais

Resultados para todos os cargos (presidente, governador, senador, deputado federal, deputado estadual/distrital)
2018_BR_Resultados_Tudo.xlsx
eleicoes-2018-resultados-turno-1.csv

Resultados dos eleitos (e quem vai pro 2º turno) no Brasil no 1º turno / todos os cargos
2018_BR_Eleitos_1T.xlsx

Resultados para deputado federal
2018_BR_Resultados_DepFed.xlsx

Resultados dos 513 deputados federais eleitos no Brasil
2018_BR_Eleitos_DepFed.xlsx

Resultados para senador
candidatos-senadores-2018.csv

Resultados dos 54 senadores eleitos (2 terços do Senado)
senadores-eleitos-2018.csv

votações por estado

Resultados para presidente (1º turno) / por estados
2018_BR_Resultado_PRES_Estados.xlsx

Resultados para presidente (1º turno) / por capitais
2018_BR_Resultado_PRES_Capitais.xlsx

votações por município

Resultados para presidente / por municípios

eleicoes-2018-votacao-presidente-candidatos.csv  (1º turno)
eleicoes-2018-votacao-presidente-candidatos-2turno.csv  (2º turno)
2018_BR_Resultados_PRES_Municipios_1T.xlsx  (1º turno)
2018_BR_Resultados_PRES_Municipios_2T.xlsx  (2º turno)
2018_BR_Resultados_PRES_Municipios.xlsx (1º e 2º turnos) 

Resultados para presidente / quem ganhou em cada município

2018_BR_Resultados_PRES_Municipios_Ganhador.xlsx (1º e 2º turnos) 

Resultados da votação estadual (gov, sen, dep) / por municípios

eleicoes-2018-votacao-estadual-candidatos.csv

Total de votos por cargo (gov, sen, dep) / por municípios 

eleicoes-2018-votacao-estadual-municipios.csv

resultado das eleições no paraná

Resultados no Paraná (gov, sen, dep)
2018_PR_Resultados_Tudo.xlsx (geral)
2018_PR_Resultados_Tudo_Municipios.xlsx (por municípios)

Resultados para governador no Paraná / por municípios
2018_PR_Resultados_GOV_Municipios.xlsx

Resultados para senador no Paraná / por municípios
2018_PR_Resultados_SEN_Municipios.xlsx

Resultados dos eleitos no Paraná (gov, sen, dep)
2018_PR_Eleitos_1T.xlsx (geral)
2018_PR_Eleitos_Tudo_Municipios.xlsx (por municípios)

Resultados dos 30 deputados federais eleitos no Paraná
2018_PR_Eleitos_DepFed.xlsx (geral)
2018_PR_Eleitos_DepFed_Municipios.xlsx (por municípios)

Resultados dos 54 deputados estaduais eleitos no Paraná
2018_PR_Eleitos_DepEst.xlsx (geral)
2018_PR_Eleitos_DepEst_Municipios.xlsx (por municípios)

votações por zona e seção eleitoral 

O TSE liberou no dia 22/out os resultados por seção eleitoral, duas semanas após as votações:
Repositório de Dados Eleitorais > Resultados > 2018 > Votação por seção eleitoral

A apuração por zona eleitoral acontece em tempo real e agora está disponível lá no Repositório de Dados Eleitorais > Resultados > 2018 > Votação nominal por município e zona (formato ZIP) (389 Mb)

Mais detalhes da votação por seção no boletim de urna: Repositório de Dados Eleitorais > Resultados > 2018 > Boletim de Urna. O arquivo do boletim de urna de cada estado é bem pesado: depois de descompactar, o do PR tem 1.7Gb (são todos os votos por candidato em todas as urnas do estado). Não é um processamento muito simples. Aqui tem uns arquivos recortados pra facilitar (retirados do boletim de Urna, que foi liberado no dia 12/out, cinco dias após as eleições):

Resultados para presidente (1º turno) / no Paraná / por seção eleitoral

2018_PR_Resultados_PRES_secao.csv.zip

Resultados para presidente (1º turno) / em Curitiba (PR) / por seção eleitoral

2018_Ctba_Resultados_PRES_secao.xlsx

2018_Ctba_Resultados_PRES_secao.csv.zip

Resultados para presidente (1º e 2º turnos) / em Curitiba (PR) / por zona eleitoral

2018_Ctba_Resultados_PRES_Zonas.xlsx

Locais de votação em Curitiba (Tabela com os 415 locais de 2018, coordenadas e um identificador que dá pra cruzar com o Boletim de Urna, que tem um código pra cada local)
Ctba2018_LocaisVotacao.xlsx

tentando entender

votos anulados

Em resumo, o TSE liberou 3 arquivos com informações da votação por seção eleitoral (Boletim de Urna, Votação por seção e Detalhes). Mas, até onde consegui interpretar, nenhum deles tem dados de votos anulados, o que torna impossível saber o número exato de votos válidos em cada seção. Votos em candidatos que tiveram problemas com a Justiça Eleitoral estão misturados com aqueles em candidaturas regulares.

• votos válidos: votos nominais + votos legenda
  (ou a soma de votos em todos os candidatos)
• votos inválidos: votos brancos + votos nulos + votos anulados
  (ou o total de votos menos os votos válidos)
• votos anulados: candidaturas indeferidas ou com problemas na Justiça Eleitoral.
  (Em algumas tabelas constam na coluna "Votos Apurados" ao invés de na coluna "Votos Totalizados", como os votos regularizados)

explicando...

pra quem tá chegando agora:

• uf > município > zona eleitoral > local de votação > seção eleitoral
• 1 zona eleitoral, vários locais de votação
• 1 local de votação, várias seções eleitorais
• 1 seção eleitoral = 1 urna

o local de votação não consta nos dados de eleições (normalmente é atribuição dos TREs), a divisão oficial é só zona/seção, mas se os dados estiverem disponíveis, o cruzamento pode dar informações interessantes, como mapas por local de votação ou mapas de votação por bairros. se não for possível, o mapa por zonas já é legal.

Curitiba teve, em 2018:

• 10 zonas eleitorais,
• 415 locais de votação, 
• 4018 seções eleitorais.

mapas eleitorais

Pra ajudar na criação de mapas nacionais, aqui tem uma tabela de municípios com coordenadas (colunas LatLong) e um arquivo espacial com o formato georreferenciado dos municípios (shapefile):

• BR_Municipios_LatLong.xlsx (tabela excel)
• BR_Municipios_Simplificado.zip (mapa em shapefile)

Em Curitiba, o Ippuc já georreferencia os locais de votação e as zonas eleitorais em formato shapefile, com informações do TRE-PR: 

• Locais de votação 2018 - (agosto/2018) (.shp)
• Zonas eleitorais 2018 - (agosto/2018) (.shp)
• Mapa do QGis com locais de votação e zonas eleitorais em Curitiba
• Tabela com Locais de Votação em Curitiba (coordenadas Lat Long) (.xlsx)

veja mais

As eleições 2018 em mapas e gráficos • Gazeta do Povo

Veja também

• Mais dados eleitorais
• Eleições 2020: prefeitos eleitos por cidade
• Eleições 2016: Tabelas em excel, mapas e gráficos dos resultados

Visualização de dados por trás das notícias

Apresentação sobre o uso de dados nos bastidores das notícias no Cerveja com Dados Curitiba, evento da Escola de Dados em maio de 2018.

Abrir slides em outra janela

Pinos (ícones) customizados para Google Maps

O Google Maps é uma ferramenta poderosa de mapeamento, e pode ser usada basicamente de duas formas:

• Google Maps API (via código e programação)
• Google MyMaps (versão fácil, a partir de arquivos excel ou csv). Veja como usar aqui, em versão rápida, ou aqui, em versão detalhada

No entanto, o estilo visual padrão pode deixar a desejar:

Mas não é nada que não se resolva com um pouco de personalização.
Use os marcadores abaixo para customizar o seu mapa e substituir os pinos padrão do Google Maps, tanto na API como no MyMaps. Salve os ícones em PNG, ou copie a URL da imagem (ou baixe todos os pinos aqui)

Estilo uniforme

Marcadores iguais para todo o conjunto de dados.
Clique no baldinho de tinta para alterar > "Mais ícones" > "Ícone personalizado" > Faça upload de um ícone png ou cole a URL de um deles:

Pino básico

Marcador estilizado com sombra


http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/pino-basico.png
*Utilizar com cuidado: no MyMaps não pode ser usado para apontar lugares com precisão, pois o centro do pino é posicionado no local, e não a base. No Maps API é possível especificar onde é a "âncora" do pino

Círculos transparentes

Bolhas com 24px e 80% de transparência para mostrar itens sobrepostos


http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/amarelo.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/azul.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/laranja.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/roxo.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/verde.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/vermelho.png

Estilo por coluna de dados

Marcadores variáveis conforme os dados.
Troque o "Estilo Uniforme" por "Estilo por coluna de dados", escolha uma coluna numérica, e personalize um ícone para cada faixa de valor.

Círculos de cores diferentes

Bolhas com tons diferentes da mesma cor (e 80% de transparência)

(disponível em amarelo, azul, laranja, preto, roxo, verde e vermelho)


http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/azul-1.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/azul-2.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/azul-3.png

Círculos de tamanhos diferentes

Bolhas com 12px (P), 24px (M) e 36px (G) (e 80% de transparência)

(disponível em amarelo, azul, laranja, preto, roxo, verde e vermelho)


http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/p/vermelho.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/m/vermelho.png

http://www.guilhermestorck.com.br/dadosfinos/pinos-gmaps/g/vermelho.png

Combine tamanhos e cores

Você pode reforçar uma informação usando a cor e o tamanho como variável. Combine nas URLs os tamanhos P, M e G com a sequência de cor 1, 2 e 3

Como colocar em ordem alfabética no Google Planilhas

Criar uma tabela é o caminho mais fácil para reordenar (classificar) linhas, em ordem alfabética, ou por ordem de valores. Veja como mudar a sequência de linhas usando a ferramenta de planilhas do Google, o Google Sheets, ou Planilhas Google, em português.

1. O primeiro passo é travar o cabeçalho (se não tem cabeçalho, crie um) arrastando aquela linha mais grossa entre as linhas 1 e 2. 
2. Depois, clique na setinha que abre as opções da coluna desejada e "Classificar de A - Z" ou "Classificar de Z - A". Serve tanto para colunas de texto (ordem alfabética) quanto de números (ordem por valor numérico).

Use esse recurso para criar rankings, organizar listas, ou no caso do exemplo, poderia ser usado para agrupar os nomes dos senadores por partido ou por estado (Classificando a coluna "Partido", nomes do PT ficariam todos juntos, do PSDB também, assim por diante).

👉 Mais vídeos: Inscreva-se no canal Dados Finos no Youtube

O que é o Google Planilhas

O Planilhas Google é uma espécie de excel online, software totalmente gratuito da suite Google Docs. Todos os arquivos editados lá são salvos automaticamente e ficam armazenados na nuvem, na sua conta do Google Drive.

Classificar linhas no Excel

Se você precisa ordenar linhas em ordem alfabética (ou em ordem de valores) no Excel o caminho é parecido. Dê uma olhada nessa explicação:
Ordenar listas ou tabelas no Excel

Veja também: mais dicas sobre o Google Planilhas

Outro exemplo: ordenando uma tabela no google sheets