r/opendata_pt • • Aug 09 '20

API para extração de notícias de jornais portugueses

18 Upvotes

Boas malta, já tinha comentado sobre isto num post aqui há dias. No entanto achei que seria melhor um post dedicado.

Fiz uma API para a extração de notícias do Público (tanto por tópicos, como por URL(s)) para formato JSON, e queria partilhá-la visto que pode ser útil para alguém (ex: fins académicos).

Planeio ainda incluir mais jornais ao longo do tempo.

Deixo então aqui o link: https://pt-news-extractor.herokuapp.com/api/v1/

Podem ainda contribuir para o "projeto" com sugestões através do GitHub: https://github.com/spamz23/PT-NEWS_EXTRACTOR

EDIT: - Adicionada funcionalidade para pesquisar por palavra-chave no Público.


r/opendata_pt • • Aug 08 '20

Dados florestais

3 Upvotes

Estou à procura de dados relativos à composição das florestas em Portugal - percentagem de eucaliptos, pinheiros, etc. Queria algo por localização de forma a procurar alguma correlação entre a composição e os incêndios anuais. Alguém sabe de algum repositório com estas informações? centraldedados.pt tem incêndios até 2015 e nada de florestas.


r/opendata_pt • • Jun 13 '20

Awesome Portugal Data - Lista de APIs e dados públicos em Portugal

34 Upvotes

Há cerca de dois anos criei este repositório com uma listagem de dados públicos em Portugal mas só hoje é que descobri o r/opendata_pt 🙈

https://github.com/rgllm/awesome-portugal-data

Qualquer contribuição é bem-vinda 😄


r/opendata_pt • • Jun 12 '20

Backup da série I do Diário da República desde 1910 - hoje para download

11 Upvotes

Boa tarde.

No âmbito de modernizar a democracia portuguesa, estou a trabalhar numa tentativa de agrupar e "informatizar" a legislação portuguesa.

Um dos primeiros passos foi fazer download da série I toda do Diário da república e, fiz-lo por mais duas razões:

  1. Nunca se sabe o futuro, pode eventualmente aparecer um regime qualquer que ataque a nossa democracia e como tal, ter ao máximo a nossa "identidade" que temos construído partilhada e disponível às pessoas, é uma forma de garantir a nossa independência.
  2. Não gosto de ter um documento tão importante centralizado apenas num único sistema (dre.pt) e quero que o nosso legado tenha redundância

Como tal, apresento 2 coisas:

  1. A lista dos links. Cada pasta tem uma subpasta com o ano e, cada pasta do ano tem como subpasta, os diários por número, sendo que dentro de cada pasta está o DR e os suplementos. (São 4 links porque o drive só deixa até 15GB gratuítos de armazenamento por conta, sendo o total entre 40 a 50GB)

parte I - [1910 - 1939] - https://drive.google.com/drive/folders/1NA_gYNwnrr2pLGpIb9hDSBSnLlrkiPl6?usp=sharing

parte II - [1940 - 1987] - https://drive.google.com/drive/folders/1E-Y3HH3DSomf2u4kKGklzBHEWWuqp6dp?usp=sharing

parte III - [1988 - 2019] - https://drive.google.com/drive/folders/17W2atI0QoBceXU-T1-cRU8Q5k7QNOL09?usp=sharing

parte IV - [2020 - ?] - https://drive.google.com/drive/folders/1V9RmiehRZn2OZKbe1o7qYs5Q_mO4EbN6?usp=sharing

2) Como podem constantar, está tudo em PDF, o próximo passo é então organizar num formato mais informático, sendo que será ou .xml ou .json

deixo um exemplo de uma lei em .json https://pastebin.com/LxnDrcmp


r/opendata_pt • • Jun 09 '20

API de notícias em português

5 Upvotes

Boas, estou a desenvolver uma app e queria ter uma secção de notícias de Portugal. O problema é que tanto a NewsAPI como muitas outras opções que tenho visto na net não funcionam muito bem para Portugal, maioritariamente o pt-PT vem junto do pt-BR. Alguma sugestão de api’s que retorne preferencialmente o título, publish date, thumbnail e o content?

P.S: até que ponto é legal fazer scraping ao Google news?


r/opendata_pt • • May 18 '20

Operação Serenata de Amor

Thumbnail self.devpt
3 Upvotes

r/opendata_pt • • May 10 '20

APIs públicas em Portugal

Thumbnail
self.devpt
8 Upvotes

r/opendata_pt • • Apr 15 '20

jurisprudencia.pt - Pesquisa de jurisprudência Portuguesa

Thumbnail jurisprudencia.pt
5 Upvotes

r/opendata_pt • • Apr 12 '20

Informação estatística da Justiça em Portugal

Thumbnail dados.justica.gov.pt
4 Upvotes

r/opendata_pt • • Mar 15 '20

Dados DGS - Coronavirus Portugal

8 Upvotes

Olá a todos,

Tendo em conta a actual situação de alerta relacionada com o coronavirus, tentei procurar se existia alguma base de dados aberta com informações sobre os casos portugueses, para poder indo acompanhar a evolução do virus no nosso país com mais detalhe. O DGS publica diariamente um relatorio de situação aqui em formato pdf, com dados bastante pertinentes (idades, sintomas,casos suspeitos). Tenho estado a fazer scraping destes pdf, mas quase todos os dias mudam de formato e muitas vezes torna-se mesmo impossivel extrair o texto.

Alguém a fazer algo parecido que tenha arranjado um maneira mais "buletproof" para arranjar este tipo de dados (para Portugal)? Não tenho conhecimento de mais ninguém a publicar este tipo de dados...

Obrigado pela atenção e eventual ajuda


r/opendata_pt • • Mar 05 '20

Open Data Day 2020: é já este sábado!

7 Upvotes

Vivas! Este sábado comemora-se o Dia Mundial dos Dados Abertos (aka Open Data Day :) e o Date With Data tem um programa especialíssimo para assinalar a data.

Começamos às 10:30 com uma workshop de edição de OpenStreetMap.

De tarde, a partir das 15:00, três apresentações entusiasmantes:

A entrada é livre!
Para participar é só fazer o registo e aparecer, sábado, 7 de março, no UPTEC Baixa. Até sábado!


r/opendata_pt • • Feb 15 '20

Metro Lisboa

Thumbnail api.metrolisboa.pt
3 Upvotes

r/opendata_pt • • Feb 15 '20

Instituto Português do Mar e da Atmosfera (IPMA)

Thumbnail
api.ipma.pt
3 Upvotes

r/opendata_pt • • Oct 06 '19

Dados abertos carris.pt

Thumbnail self.portugal
4 Upvotes

r/opendata_pt • • Oct 06 '19

Dados abertos carris.pt

Thumbnail self.portugal
3 Upvotes

r/opendata_pt • • Aug 02 '19

Histórico de temperaturas

7 Upvotes

Olá a todos, alguêm sabe onde posso encontrar um histórico de temperaturas em Portugal, seja por distrito ou conselho? Encontrei alguma informação na Pordata (https://www.pordata.pt/Portugal/Temperatura+m%c3%a1xima+do+ar+(m%c3%a9dia+anual)-1068-10177) mas só tem algumas regiões. Já procurei no IPMA tambêm mas não consegui encontrar histórico. Obrigado


r/opendata_pt • • Apr 05 '19

[Dataset] Dados de ofertas de emprego do IEFP

Thumbnail
self.portugal
2 Upvotes

r/opendata_pt • • Mar 12 '19

Alguma novidade relativamente ao acesso aos dados do site publicacoes.mj.pt?

3 Upvotes

@hgg, obteve alguma resposta da ministra da modernização administrativa?

Acabei de fazer uma busca à empresa VORTAL (nipc: 509963404).

Parece q a restrição n se resume ao captcha porque mesmo depois de obter a lista de actos n consigo aceder ao "conteudo".

Confirmam?

​

Esquecam... os conteúdos abria num pop-up, que era bloqueado

​


r/opendata_pt • • Dec 01 '18

Dados abertos no parlamento.pt

5 Upvotes

r/opendata_pt • • Sep 09 '18

Projeto de dados acessíveis no Brasil

3 Upvotes

Caros, sou brasileiro e estou em busca de projetos relacionados a dados abertos em outros países - fiquei feliz em encontrar algo em Portugal. :)

Aqui estou desenvolvendo um trabalho que chamo de "libertação de dados", onde crio programas (livres) que baixam dados públicos, limpam, normalizam e são exibidos em uma interface fácil de leigos acessarem. O projeto tem como motivação resolver a questão de acessibilidade de dados públicos: dados que estão disponíveis, mas em formatos não estruturados, muitos arquivos dispersos, quantidade de dados muito grande e não entendimento do domínio do problema. Essa iniciativa chama-se Brasil.IO e já está online há alguns meses.

Gostaria de saber se existem iniciativas parecidas em Portugal - inclusive, me coloco à disposição caso tenham interesse em iniciar um projeto-irmão por aí. :)


r/opendata_pt • • Aug 19 '18

Profissões e Habilitações dos nossos 230 Deputados

Thumbnail self.portugal
1 Upvotes

r/opendata_pt • • Jul 23 '18

Dataset de Códigos Postais juntamente com as coordenadas geográficas

6 Upvotes

Boa tarde pessoal,

Tudo bem?
Estou a desenvolver uma web app que faz calcula a distância entre dois pontos geográficos e neste momento estou a procura de uma dataset que tenha os códigos postais de Portugal juntamente com as coordenadas geográficas de cada um.

Eu sei que a NOS fez um concurso há uns tempos atrás e forneceu algo do género mas as coordenadas geográficas deles está errada em questão de 20/40 km o que para a finalidade deste projecto não é tão preciso como desejado.

Há algum dataset por ai que satisfaça estas condições? De preferência grátis.

Um muito obrigado a todos.


r/opendata_pt • • Jun 22 '18

Base de Dados das Contas Anuais (IES)

2 Upvotes

Alguém sabe como é possível ter acesso à base de dados do Informacao Empresarial Simplificada?

Estou querendo trabalhar com estatísticas à nivel empresarial e aparentemente, desde 2006, essa base de dados recolhe informacoes das corporacoes nao financeiras em Portugal.

Só é possível ter acesso pagando?

Abracos


r/opendata_pt • • May 12 '18

Novo portal de dados abertos da administração pública.

Thumbnail
dados.gov.pt
11 Upvotes

r/opendata_pt • • Apr 08 '18

Lista de Entidades de Utilidade Pública (link no fim)

Thumbnail
sg.pcm.gov.pt
3 Upvotes