A primeira sess\u00e3o de trabalho do hackday transparencia serviu para partilhar algumas coisas que cada um de n\u00f3s j\u00e1 tinha feito e perceber de que forma nos podemos integrar nos diferentes projectos poss\u00edveis.<\/p>\n
Neste momento h\u00e1 dois caminhos a ser explorados, ambos a partir da informa\u00e7\u00e3o disponivel online no site da assembleia da republicar.<\/p>\n
O primeiro tem como objectivo disponibilizar de uma forma mais interessante os dados do Diario da Assembleia da Republica. Para quem n\u00e3o conhece este di\u00e1rio tem a transcri\u00e7\u00e3o de tudo quanto \u00e9 dito na AR.
\nA ideia \u00e9 disponibilizar esses dados num formato n\u00e3o propriet\u00e1rio e acrescentar uma camada de informa\u00e7\u00e3o que permita responder a perguntas como o que disse o deputado xxx sobre o tema yyy.
\nClaro que depois se podem construir tamb\u00e9m algumas coisas giras como o medidor de muito bens (sim essas afirma\u00e7\u00f5es tamb\u00e9m est\u00e3o nesse di\u00e1rio da assembleia da republica).<\/p>\n
O segundo tem como objectivo permitir explorar a informa\u00e7\u00e3o dos deputados e suas actividades, informa\u00e7\u00e3o essa que est\u00e1 nestas p\u00e1ginas.
\nNeste momento embora essa informa\u00e7\u00e3o esteja toda online n\u00e3o existe nenhum interface que permita responder a quest\u00f5es como:
\n– qual o deputado com mais interven\u00e7\u00f5es?
\n– como tem evoluido a representa\u00e7\u00e3o das profiss\u00f5es ao longo das legislaturas, ou seja, provavelmente achamos que a a.r. \u00e9 essencialmente constituida por pessoas ligadas \u00e0 advocacia e similares mas ser\u00e1 que \u00e9 mesmo assim, e como tem variado?
\n– qual a legislatura com a idade m\u00e9dia dos deputados mais alta? como tem variado? ser\u00e1 que neste org\u00e3o tamb\u00e9m se nota aquilo que se diz de as novas gera\u00e7\u00f5es n\u00e3o estarem interessadas na participa\u00e7\u00e3o p\u00fablica?<\/p>\n
O ricardo que est\u00e1 a trabalhar no primeiro projecto j\u00e1 desenvolveu um script que descarrega um di\u00e1rio, converte-o de pdf para txt e “anota-o” com alguma informa\u00e7\u00e3o especifica para percebermos por exemplo onde est\u00e3o os nomes dos deputados.
\nFalta-nos perceber ainda de que forma e que tipo de anota\u00e7\u00f5es vale a pena incluir nesse txt e se o convertemos para outro formato e claro saber depois como exploramos essa informa\u00e7\u00e3o.
\nUma ideia interessante seria por exemplo ter uma coisa parecida com o verbatim para explorar as cita\u00e7\u00f5es dos deputados.
\nEsta \u00e1rea da explora\u00e7\u00e3o de texto livre \u00e9 bastante desconhecida para mim que estou mais habituado a dados mais sistematizados como tabelas relacionais e afins por isso se quiserem contribuir com ideias est\u00e3o \u00e0 vontade.<\/p>\n
Eu e a claudia estivemos a trabalhar no segundo projecto principalmente na parte da extrac\u00e7\u00e3o de dados do site da a.r. Fizemos um pequeno scraper que aproveita o facto de as p\u00e1ginas da a.r. estarem construidas de tal forma que nem precisamos de nos perder em regular expressions e afins.
\n\u00c9 um script bem comportado que faz propositadamente um n\u00famero reduzido de pedidos por minuto e que extrai essa informa\u00e7\u00e3o uma base de dados MySQL.
\nO objectivo \u00e9 criar algo (feeds ou outros) que permita que outras equipas trabalhem essa informa\u00e7\u00e3o.
\nFicou a ideia de explorar o yahoo pipes para tentar fazer o mesmo processo de uma forma mais simples.<\/p>\n
O tiago e o victor estiveram a ver como se poderia utilizar plugins drupal para explorar a informa\u00e7\u00e3o dos deputados do segundo projecto. A ideia \u00e9 reinventar o menos possivel.<\/p>\n
A ana para al\u00e9m de criar o blog esteve tamb\u00e9m a fazer umas primeiras experi\u00eancias com os dados que j\u00e1 extraimos dos deputados. Para isso criou uma tagcloud com as profiss\u00f5es indicadas dos deputados. Percebemos que vamos ter que ter algum processo de limpeza ou normaliza\u00e7\u00e3o da pr\u00f3pria informa\u00e7\u00e3o para evitar por exemplo situa\u00e7\u00f5es de profiss\u00f5es que aparecem em duplicado por causa da forma como est\u00e3o escritas.<\/p>\n