{"id":151,"date":"2014-05-12T14:30:08","date_gmt":"2014-05-12T17:30:08","guid":{"rendered":"http:\/\/suspensao.blog.br\/descrenca\/?p=151"},"modified":"2015-04-06T18:22:29","modified_gmt":"2015-04-06T21:22:29","slug":"rss-com-delicious-yahoo-pipes-e-readability","status":"publish","type":"post","link":"https:\/\/suspensao.blog.br\/descrenca\/rss-com-delicious-yahoo-pipes-e-readability\/","title":{"rendered":"Criando um feed RSS com Delicious, Yahoo! Pipes e Readability"},"content":{"rendered":"

A retirada das funcionalidades sociais<\/a> (e posterior desligamento<\/a>) do Google Reader<\/em> matou uma das mais not\u00e1veis comunidades virtuais, mas trouxe vida a um mercado antes monopolizado. Por exemplo, uns<\/a> malucos<\/a> apareceram<\/a> do nada com um clone chamado The Old Reader<\/em><\/a> (e passaram por maus<\/a> bocados<\/a> por isso). Dada sua completude e qualidade (al\u00e9m do quase hero\u00edsmo e a not\u00e1vel compet\u00eancia dos criadores), escolhi\u00a0o\u00a0Old Reader<\/em> como meu novo leitor.<\/p>\n

The Old Reader<\/em> fornece praticamente tudo que havia no\u00a0Google Reader<\/em>. Uma das poucas exce\u00e7\u00f5es \u00e9 a habilidade de compartilhar links arbitr\u00e1rios: s\u00f3 posso compartilhar o que vier de meus\u00a0feeds<\/em>. Tentei usar o Delicious<\/em><\/a> como alternativa. Adicionava meu link em uma tag<\/em> espec\u00edfica, assinava o\u00a0feed<\/em> da\u00a0tag<\/em> e depois o compartilhava. O resultado, por\u00e9m, n\u00e3o foi bom: o feed<\/em> do Delicious<\/em> s\u00f3 compartilha o link e o t\u00edtulo, sem o conte\u00fado.<\/p>\n

\"Feed<\/a>

Feed RSS do Delicious, visto no Firefox<\/p><\/div>\n

A\u00ed entram os Yahoo<\/em>! Pipes<\/em><\/a>. Esta ferramenta maluca permite recuperar conte\u00fado da Internet (em especial, feeds<\/em>), process\u00e1-los e public\u00e1-los em, entre outros formatos, RSS. Cheguei a brincar com eles um pouco, h\u00e1 muito tempo; assinava um ou outro pipe<\/em>, geralmente expandindo webcomics<\/em>, mas nada s\u00e9rio e nada que eu tenha feito. Ainda assim,\u00a0Pipes<\/em> pareciam a solu\u00e7\u00e3o: \u00e9 f\u00e1cil recuperar feeds<\/em> em um pipe<\/em>, e \u00e9 f\u00e1cil recuperar o conte\u00fado de um link.<\/p>\n

Entretanto, eu n\u00e3o poderia simplesmente recuperar o conte\u00fado de um link e jog\u00e1-lo na descri\u00e7\u00e3o de um item RSS. Uma p\u00e1gina cont\u00e9m muitas coisas: menus, cabe\u00e7alhos, propaganda… Para piorar, boa parte da formata\u00e7\u00e3o se perderia quando o HTML fosse inclu\u00eddo no feed<\/em>. Experimentei copiar o conte\u00fado de interesse e col\u00e1-lo no coment\u00e1rio do Delicious<\/em>, mas o resultado foi lament\u00e1vel: n\u00e3o era poss\u00edvel adicionar par\u00e1grafos, muito menos HTML. Como, ent\u00e3o, extrair o conte\u00fado?<\/p>\n

Minha primeira abordagem foi adicionar, no campo Comment<\/em> do meu bookmark<\/em>, uma express\u00e3o XPath <\/a>que retornasse o conte\u00fado de interesse.<\/p>\n

\"Link<\/a>

Link to share through Delicious and the XPath expression to retrieve the relevant content.<\/p><\/div>\n

Da\u00ed criei um pipe<\/em> que percorria o feed<\/em> com o m\u00f3dulo Loop<\/em><\/a> e, para cada link, baixava o conte\u00fado. Para isto, usava o m\u00f3dulo XPath Fetch Page<\/em><\/a>, que tamb\u00e9m retirava o elemento apontado pela express\u00e3o XPath do\u00a0book<\/em>mark<\/em> e o colocava na descri\u00e7\u00e3o do feed<\/em>. Veja o screenshot<\/em> do pipe<\/em>:<\/p>\n

\"Expansor<\/a>

Expansor dos feeds RSS do Delicious que usa XPath para extrair o conte\u00fado relevante.<\/p><\/div>\n

O feed<\/em> resultante era bom mas o processo n\u00e3o era satisfat\u00f3rio. Eu tinha de descobrir qual era o XPath mais adequado para cada p\u00e1gina. Frequentemente, n\u00e3o tinha como testar a express\u00e3o, de modo que compartilhava links sem conte\u00fado. N\u00e3o era poss\u00edvel criar uma express\u00e3o para todas as p\u00e1ginas, naturalmente, e Pipes<\/em> n\u00e3o fornecem uma ferramenta poderosa o suficiente para isso. Como seria bom, pensei, ter algo como um Readability<\/em>…<\/p>\n

\"Feed<\/a>

Feed<\/em> RSS do Delicious<\/em>, expandido com XPath, visto no Firefox. Agora sim!<\/p><\/div>\n

E assim a resposta brilhou na minha frente.<\/p>\n

Readability<\/em><\/a> \u00e9 uma aplica\u00e7\u00e3o\u00a0 que torna leg\u00edveis artigos em p\u00e1ginas muito sobrecarregadas. Originalmente um mero bookmarklet<\/em>, hoje \u00e9 uma aplica\u00e7\u00e3o cliente-servidor multiplataforma. Parece m\u00e1gica: depois de “descobrir” o que \u00e9 relevante na p\u00e1gina,\u00a0Readability<\/em> apresenta este conte\u00fado de maneira padronizada e leg\u00edvel. Eu o uso h\u00e1 muito tempo, tanto para tornar artigos leg\u00edveis quanto para envi\u00e1-los para meu Kindle.<\/p>\n

\"Huffington<\/a>

Huffington Post<\/em>, al natural<\/em> e alterado por Readability<\/em><\/p><\/div>\n

Para nossa sorte, Readability<\/em> prov\u00ea uma API para seu parser<\/em><\/a>! Obtendo um token<\/em> de autentica\u00e7\u00e3o – que \u00e9 passado como um par\u00e2metro na URL ou via POST – \u00e9 poss\u00edvel fazer um n\u00famero consider\u00e1vel de requisi\u00e7\u00f5es e receber respostas em JSON. Assim,\u00a0 para cada item no feed, montei uma URL para invocar a API (com o URL Builder<\/em><\/a>) e a pus em um campo; num loop<\/em> seguinte, invoquei a URL com Fetch Data<\/em><\/a> e atribu\u00ed o campo content<\/code> da resposta \u00e0 descri\u00e7\u00e3o do item.<\/p>\n

\"Este<\/a>

Este pipe<\/em> usa a Parser API<\/em> de Readability<\/em> para expandir os links.<\/p><\/div>\n

\u00a1Voil\u00e0!<\/em> Todas as minhas URLs aparecem lindamente expandidas no meu feed<\/em>.<\/p>\n

Depois, vi que o pipe<\/em> poderia ser ainda mais incrementado: agora, o\u00a0Delicious sharing tag expander<\/em><\/a> \u00e9 parametriz\u00e1vel (qualquer um pode us\u00e1-lo, passando o nome de usu\u00e1rio no Delicious,<\/em> a tag<\/em> escolhida e uma chave de API) e tamb\u00e9m adiciona a descri\u00e7\u00e3o do bookmark<\/em> como um coment\u00e1rio.<\/p>\n

Como extrair o conte\u00fado de uma p\u00e1gina via Readability<\/em> \u00e9 uma necessidade comum, isolei esta parte em outro pipe<\/em> – URL Readabilitifier<\/a><\/em> – e a utilizei como um m\u00f3dulo no original. Tamb\u00e9m a reaproveitei no Feed Readabilitifier<\/a><\/em>, um pipe<\/em> parametrizado que expande os links de um feed<\/em> RSS em sua descri\u00e7\u00e3o. Uso-o especialmente para expandir feeds<\/em> truncados (por exemplo, compare este\u00a0RSS da <\/a>Folha de S\u00e3o Paulo<\/em><\/a> com a vers\u00e3o expandida<\/a>) mas tamb\u00e9m pode ser usado como subm\u00f3dulo, como no meu pipe<\/em> que expande um dos RSS mais chatos do mundo<\/a>, o do Arts & Letters Daily<\/em><\/a>.<\/p>\n","protected":false},"excerpt":{"rendered":"

A retirada das funcionalidades sociais (e posterior desligamento) do Google Reader matou uma das mais not\u00e1veis comunidades virtuais, mas trouxe vida a um mercado antes monopolizado. Por exemplo, uns malucos apareceram do nada com um clone chamado The Old Reader (e passaram por maus bocados por isso). Dada sua completude e qualidade (al\u00e9m do quase […]<\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"jetpack_post_was_ever_published":false,"_jetpack_newsletter_access":"","_jetpack_dont_email_post_to_subs":false,"_jetpack_newsletter_tier_id":0,"_jetpack_memberships_contains_paywalled_content":false,"_jetpack_memberships_contains_paid_content":false,"footnotes":"","jetpack_publicize_message":"","jetpack_publicize_feature_enabled":true,"jetpack_social_post_already_shared":true,"jetpack_social_options":{"image_generator_settings":{"template":"highway","default_image_id":0,"font":"","enabled":false},"version":2}},"categories":[9,67],"tags":[68,69,75,72,73,74,71,70],"class_list":["post-151","post","type-post","status-publish","format-standard","hentry","category-internet","category-rss","tag-delicious","tag-delicious-com","tag-google-reader","tag-readability","tag-readability-com","tag-the-old-reader","tag-y-pipes","tag-yahoo-pipes"],"jetpack_publicize_connections":[],"jetpack_featured_media_url":"","jetpack_shortlink":"https:\/\/wp.me\/p23QLV-2r","jetpack_sharing_enabled":true,"jetpack_likes_enabled":true,"jetpack-related-posts":[],"_links":{"self":[{"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/posts\/151","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/comments?post=151"}],"version-history":[{"count":31,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/posts\/151\/revisions"}],"predecessor-version":[{"id":198,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/posts\/151\/revisions\/198"}],"wp:attachment":[{"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/media?parent=151"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/categories?post=151"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/suspensao.blog.br\/descrenca\/wp-json\/wp\/v2\/tags?post=151"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}