Construindo um sistema distribuido usando rest
5 gostaram1,512 visualizações
1) O documento apresenta uma palestra sobre construção de sistemas distribuídos usando arquitetura REST. 2) REST foi escolhido por permitir escalabilidade, performance alta, disponibilidade e evolução do sistema sem paradas. HTTP, caches e outros recursos da web foram fatores importantes. 3) A arquitetura REST implementada no sistema Alexandria da Abril usa recursos, representações e hipermídia para integrar domínios, serviços e dados de forma uniforme e escalável.
![resources
{
"tipo_recurso" : "materia",
"link" : [
{
"href" : "http://editorial.api.abril.com.br/materia/4f0dea5a1e13694",
"rel" : "self",
"type" : "application/json"
},
{
"href" : "http://editorial.api.abril.com.br/materias",
"rel" : "materias",
"type" : "application/json"
}
],
"id" : "http://editorial.api.abril.com.br/materia/4f0dea5a1e13694",
"slug" : "o-quintal-da-realeza",
"marca" : "viajeaqui",
"status" : "disponivel",
"descricao_conteudo" : "O quintal da realeza",
"fonte" : "viajeaqui",
(continua)](https://image.slidesharecdn.com/construindoumsistemadistribuidousandorest-130604232919-phpapp01/85/Construindo-um-sistema-distribuido-usando-rest-55-320.jpg)
![HTTP/1.1 200 OK
Content-Type: application/json; charset=utf-8
{
"titulo": "socialcore",
"link": [
{
"href": "http://socialcore.api.abril.com.br/",
"rel": "self",
"type": "application/json"
},
{
"href": "http://socialcore.api.abril.com.br/atividade",
"rel": "atividade",
"type": "application/json"
},
{
"href": "http://socialcore.api.abril.com.br/grafo",
"rel": "grafo",
"type": "application/json"
}
]
}
hypermedia](https://image.slidesharecdn.com/construindoumsistemadistribuidousandorest-130604232919-phpapp01/85/Construindo-um-sistema-distribuido-usando-rest-64-320.jpg)
![HTTP/1.1 200 OK
Content-Type: application/json; charset=utf-8
{
"titulo": "Entry Point de Atividades",
"link": [
{
"href": "http://socialcore.api.abril.com.br/atividade/template",
"rel": "template",
"type": "application/json"
},
{
"href": "http://socialcore.api.abril.com.br/atividade/busca/descritor",
"rel": "search",
"type": "application/opensearchdescription+xml"
},
{
"href": "http://socialcore.api.abril.com.br/atividade/stat/descritor",
"rel": "stat",
"type": "application/opensearchdescription+xml"
}
]
}
hypermedia](https://image.slidesharecdn.com/construindoumsistemadistribuidousandorest-130604232919-phpapp01/85/Construindo-um-sistema-distribuido-usando-rest-66-320.jpg)
!["link": [
{
"href": "http://socialcore.api.abril.com.br/atividade",
"rel": "atividade",
"type": "application/json"
},
{
"href": "http://socialcore.api.abril.com.br/atividade/busca/descritor",
"rel": "search",
"type": "application/opensearchdescription+xml"
},
{
"href": "http://socialcore.api.abril.com.br/atividade/stat/descritor",
"rel": "stat",
"type": "application/opensearchdescription+xml"
}
]
}
hypermedia](https://image.slidesharecdn.com/construindoumsistemadistribuidousandorest-130604232919-phpapp01/85/Construindo-um-sistema-distribuido-usando-rest-69-320.jpg)
![HTTP/1.1 422 Unprocessable Entity
Content-Type: application/json; charset=utf-8
{
"tipo_recurso":"erro",
"atividade":{
"usuario":"",
},
"erros":[
{"atributo":"usuario","mensagem":["é obrigatório"]}
]
}
hypermedia](https://image.slidesharecdn.com/construindoumsistemadistribuidousandorest-130604232919-phpapp01/85/Construindo-um-sistema-distribuido-usando-rest-71-320.jpg)
Construindo um sistema distribuido usando rest
- 1. Construindo um sistema distribuido usando REST Palestra ministrada na Universidade São Judas Tadeu
- 2. David Robert davidrobert@gmail.com twitter: while42 github: davidrobert
- 3. AMBIENTE
- 6. Playboy Veja Quatro Rodas Super Interessante Placar
- 7. “organizações que projetam sistemas são restritas a produzir projetos que são cópias das estruturas de comunicação dessas organizações” Lei de Conway http://www.melconway.com/Home/Conways_Law.html
- 8. CMS’s existem desde os anos 90. Por que reiventamos a roda?
- 10. Como construir uma boa arquitetura?
- 12. Banco de Dados Solução Prática #1
- 13. Solução Prática #2 Transferência de Arquivos
- 14. Solução Prática #3 Web Services
- 15. Como são os Web Services hoje?
- 16. Como são os Web Services hoje? ● WSDL ● SOAP ● XML ● RPC (Remote Procedure Call) etc
- 18. 1) Precisamos disso tudo mesmo?
- 19. 2) Alguém já não resolveu isso?
- 20. 3) Como avaliar se é uma boa arquitetura?
- 21. boa arquitetura necessidades atendidas custo aceitável = + * ß ß quão bem o seu cliente sabe pedir o que quer MTRH MTRH mean time to recovery happiness
- 22. ALEXANDRIA
- 24. RAIO X
- 25. 16 sites em produção
- 26. +/- 60 desenvolvedores 13 arquitetos de software 6 Gerentes de Projeto 4 Gerentes de Produto 1 Advocate da Plataforma
- 27. ● MongoDB ● MySQL ● Hbase ● HDFS ● PostgreSQL ● memcached ● redis ● Ruby ● Java ● Javascript ● rails ● sinatra ● goliath ● node.js ● play ● jetty ● tokamak ● cachebag ● restfulie Linguagens Storages Frameworks outros ● Solr ● Hadoop ● RabbitMQ ● Varnish ● New Relic ● Tracelytics https://github.com/abril
- 28. Infraestrutura Alexandria + sites ● 91 VMs para ambientes dev, qa, stage ● AMC (Abril Mídia Cloud): private cloud (Xen/Open Stack) ● ou VMWare ● ~100 VMs + 20 físicas para produção ● Data center próprio, AWS, Heroku ● Total aproximado: 220 máquinas
- 29. +15 milhões de pageviews (de jan até fev de 2013)
- 30. HTTP
- 31. domínio ● acesso e manipulação de recursos ● implementa regras de negócio ● servidor HTTP + base de dados ● infra “isolada” ● ~ 8 domínios ● ex: editorial (matérias, galerias, etc), anotações (comentários), estabelecimentos, mídia, pessoas
- 32. serviço ● consumo e manipulação de recursos ● servidor HTTP + (opcional base de dados) ● infra “isolada” ● ~ 12 serviços ● ex: console, socialcore, search, Abril ID, abr.io, etc
- 33. data-entry ● entrada da Redação ● aplicação web ● ~ 1 para cada domínio ● “API explorer”
- 35. sitetools● admin do site ● manipulação das áreas e templates ● agiliza criação de produtos ● a fronteira com o usuário ● opcional
- 39. Como integrar?
- 42. REST
- 43. Por que escolher REST?
- 44. Por que escolhemos REST? ● Protocolo de transferência amplamente utilizado ● Escalabilidade ● Performance alta ● Alta disponibilidade ● Permitir evolução sem parar o sistema ● Permitir evolução sem quebrar os clientes ● Segurança
- 45. Por que escolhemos REST? ● HTTP ● Escalabilidade ● Performance alta ● Alta disponibilidade ● Permitir evolução sem parar o sistema ● Permitir evolução sem quebrar os clientes ● Segurança
- 46. Por que escolhemos REST? ● HTTP ● Web Cache ● Performance alta ● Alta disponibilidade ● Permitir evolução sem parar o sistema ● Permitir evolução sem quebrar os clientes ● Segurança
- 47. Por que escolhemos REST? ● HTTP ● Web Cache ● Web Proxy (localização geografica) ● Alta disponibilidade ● Permitir evolução sem parar o sistema ● Permitir evolução sem quebrar os clientes ● Segurança
- 48. Por que escolhemos REST? ● HTTP ● Web Cache ● Web Proxy (localização geografica) ● Load Balancers "comoditizados" ● Permitir evolução sem parar o sistema ● Permitir evolução sem quebrar os clientes ● Segurança
- 49. Por que escolhemos REST? ● HTTP ● Web Cache ● Web Proxy (localização geografica) ● Load Balancers "comoditizados" ● Load Balancers ● Permitir evolução sem quebrar os clientes ● Segurança
- 50. Por que escolhemos REST? ● HTTP ● Web Cache ● Web Proxy (localização geografica) ● Load Balancers "comoditizados" ● Load Balancers ● HTML, JSON, XML ● Segurança
- 51. Por que escolhemos REST? ● HTTP ● Web Cache ● Web Proxy (localização geografica) ● Load Balancers "comoditizados" ● Load Balancers ● HTML, JSON, XML ● HTTPS / TLS
- 54. resources
- 55. resources { "tipo_recurso" : "materia", "link" : [ { "href" : "http://editorial.api.abril.com.br/materia/4f0dea5a1e13694", "rel" : "self", "type" : "application/json" }, { "href" : "http://editorial.api.abril.com.br/materias", "rel" : "materias", "type" : "application/json" } ], "id" : "http://editorial.api.abril.com.br/materia/4f0dea5a1e13694", "slug" : "o-quintal-da-realeza", "marca" : "viajeaqui", "status" : "disponivel", "descricao_conteudo" : "O quintal da realeza", "fonte" : "viajeaqui", (continua)
- 57. e um tiquinho assim de XML ou melhor, de application/opensearchdescription+xml representations
- 58. <?xml version="1.0" encoding="UTF-8"?> <OpenSearchDescription xmlns="http://a9.com/-/spec/opensearch/1.1/" xmlns:grafo="http: //socialcore.api.abril.com.br/grafo/busca"> <ShortName>Buscar relacionamentos</ShortName> <Description>Busca de relacionamentos no grafo</Description> <Url type="application/json" template="http://socialcore.api.abril.com.br/grafo/busca?usuario={grafo:usuario?} &tipo={grafo:tipo}"/> <Query role="example" title="Exemplo de valores dos parâmetros" grafo:usuario="id do usuario" grafo:tipo="segue |seguido_por " /> </OpenSearchDescription> representations
- 59. hypermedia Exemplo: criar uma atividade de um usuário no site. Sabendo somente o entrypoint: http://socialcore.api.abril.com.br
- 62. HTTP/1.1 405 Method Not Allowed Allow: GET hypermedia
- 64. HTTP/1.1 200 OK Content-Type: application/json; charset=utf-8 { "titulo": "socialcore", "link": [ { "href": "http://socialcore.api.abril.com.br/", "rel": "self", "type": "application/json" }, { "href": "http://socialcore.api.abril.com.br/atividade", "rel": "atividade", "type": "application/json" }, { "href": "http://socialcore.api.abril.com.br/grafo", "rel": "grafo", "type": "application/json" } ] } hypermedia
- 65. GET http://socialcore.api.abril.com.br/atividade Accept: application/json hypermedia
- 66. HTTP/1.1 200 OK Content-Type: application/json; charset=utf-8 { "titulo": "Entry Point de Atividades", "link": [ { "href": "http://socialcore.api.abril.com.br/atividade/template", "rel": "template", "type": "application/json" }, { "href": "http://socialcore.api.abril.com.br/atividade/busca/descritor", "rel": "search", "type": "application/opensearchdescription+xml" }, { "href": "http://socialcore.api.abril.com.br/atividade/stat/descritor", "rel": "stat", "type": "application/opensearchdescription+xml" } ] } hypermedia
- 68. HTTP/1.1 200 OK Content-Type: application/json; charset=utf-8 { "atividade": { "app": "", "created_at": "", "usuario": "", "tipo": "", "objeto": { "tipo": "" }, "resultado": { "tipo": "" } }, (continua) hypermedia
- 69. "link": [ { "href": "http://socialcore.api.abril.com.br/atividade", "rel": "atividade", "type": "application/json" }, { "href": "http://socialcore.api.abril.com.br/atividade/busca/descritor", "rel": "search", "type": "application/opensearchdescription+xml" }, { "href": "http://socialcore.api.abril.com.br/atividade/stat/descritor", "rel": "stat", "type": "application/opensearchdescription+xml" } ] } hypermedia
- 70. POST http://socialcore.api.abril.com.br/atividade Accept: application/json Content-Type: application/json; charset=utf-8 Authentication: Basic 37rnx9w87rjdw87gri { "atividade": { "app": "http://aapg.api.abril.com.br/produtos/1", "created_at": 1325086429, "tipo": "comentar", "objeto": { "descricao": "Titulo da materia", "id": "http://veja.abril.com.br/noticia/economia/confianca-da", "tipo": "materia" }, "resultado": { "corpo": "otima materia", "id": "http://veja.abril.com.br/noticia/economia/confianca-da/comments/1", "tipo": "comentario" } } } hypermedia
- 71. HTTP/1.1 422 Unprocessable Entity Content-Type: application/json; charset=utf-8 { "tipo_recurso":"erro", "atividade":{ "usuario":"", }, "erros":[ {"atributo":"usuario","mensagem":["é obrigatório"]} ] } hypermedia
- 72. POST http://socialcore.api.abril.com.br/atividade Accept: application/json Content-Type: application/json; charset=utf-8 Authentication: Basic 37rnx9w87rjdw87gri { "atividade": { "app": "http://aapg.api.abril.com.br/produtos/1", "created_at": 1325086429, "usuario": "http://aapg.api.abril.com.br/usuarios/2", "tipo": "comentar", "objeto": { "descricao": "Titulo da materia", "id": "http://veja.abril.com.br/noticia/economia/confianca-da", "tipo": "materia" }, "resultado": { "corpo": "otima materia", "id": "http://veja.abril.com.br/noticia/economia/confianca-da/comments/1", "tipo": "comentario" } } } hypermedia
- 73. HTTP/1.1 201 Created Content-Type: application/json; charset=utf-8 Location: http://socialcore.api.abril.com. br/atividade/0922307 o/ hypermedia
- 74. application protocol HTTPstatus codes representation metadata resource metadata control data
- 76. pontos importantes em performance client origin server ● performance dos connectors ● non-blocking HTTP clients ● cache local ● middleware architecture ● libs padronizadas ● short stacks ● evented servers ● libs padronizadas ● good TTL strategy ● middleware architecture ● caches ● HTTP plumbing
- 77. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ●
- 78. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ● REST é uma arquitetura de longo prazo ●
- 79. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ● REST é uma arquitetura de longo prazo ● Defenda com todas as suas forças: ● seus metadados (recursos) ● sua interface ●
- 80. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ● REST é uma arquitetura de longo prazo ● Defenda com todas as suas forças: ● seus metadados (recursos) ● sua interface ● Documentação é essencial ●
- 81. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ● REST é uma arquitetura de longo prazo ● Defenda com todas as suas forças: ● seus metadados (recursos) ● sua interface ● Documentação é essencial ● Independência de desenvolvimento dos nós tem suas desvantagens ●
- 82. ● Lei de Postel "Seja conservador no que faz, seja liberal no que você aceita dos outros" ● REST é uma arquitetura de longo prazo ● Defenda com todas as suas forças: ● seus metadados (recursos) ● sua interface ● Documentação é essencial ● Independência de desenvolvimento dos nós tem suas desvantagens ● Medir/monitorar o desempenho é importantíssimo
- 83. Assumimos que nossa arquitetura está válida
- 85. e quando REST não for suficiente?
- 86. não use REST
- 87. Os responsáveis
- 88. PERGUNTAS ?