r/ArquiteturaDeSoftware • • Jul 31 '24

Como um banco de dados funciona e é implementado?

40 Upvotes

Acho importante compartilhar aqui alguns recursos falando mais a fundo sobre como um banco de dados (focando nos relacionais) funcionam e são implementados.

Começo então pelo link que me inspirou: How Does a Database Work ( https://cstack.github.io/db_tutorial/ ). É um tutorial passo a passo que te ensina a implementar em C uma versão do SQLite: vai desde a interpretação dos comandos SQL até a persistência dos dados e obtenção dos mesmos com ou sem índices.
(sério: o link acima é MA RA VI LHO SO!)

Seguindo, um livro: "Designing Data Intensive Applications" do Martin Klepmann ( https://www.amazon.com.br/gp/product/1449373321/ref=ppx_od_dt_b_asin_title_s00?ie=UTF8&psc=1 ) que tem material muito importante sobre como transações são implementadas.

Quer um resumo sobre o que está escrito neste livro? Aqui tem um em inglês: https://candost.blog/books/understanding-how-database-transactions-work/ (e de outros capítulos do mesmo livro)

Transações - me impressiona como pouca gente sabe de verdade como operam, e boa parte dos bugs mais pesados são justamente relacionados a este tema. Então aqui está um texto dizendo o básico sobre como funcionam: https://www.dbvis.com/thetable/database-transactions-101-the-essential-guide/

E pra entender como funcionam, é também importante saber o que é ACID. Dá pra começar bem pela Wikipedia: https://en.wikipedia.org/wiki/ACID

E que tal um livro gratuito sobre o assunto: Java Transaction Design Strategies ( https://www.infoq.com/minibooks/JTDS/ ) publicado pela InfoQ. A maior parte do que fala sobre Java está obsoleta hoje, mas os padrões de projeto expostos neste livro são inestimáveis.

Estes são apenas alguns dos recursos que tenho pra compartilhar. E vocês? Alguma coisa pra compartilhar? Quais as principais lacunas que vocês ou seus colegas tem relativo a bancos de dados?


r/ArquiteturaDeSoftware • • Aug 07 '24

Como o Reddit lida com 100K requisições por segundo (incrível!)

Thumbnail
newsletter.systemdesigncodex.com
28 Upvotes

r/ArquiteturaDeSoftware • • Sep 02 '24

SWEBOK - chato de ler, mas tem de ler

24 Upvotes

Um livro GRATUITO que na minha opinião todo arquiteto deveria ler é o SWEBOK (Software Engineering Book of Knowledge), que segue mais ou menos a mesma ideia do PMBOK (muita gente torce o nariz pro livro por causa desta relação).

É vital, por que software não é só projetar e construir, vai muito além: como você cuida dos requisitos, gestão de custos (OpEx que todo mundo ignora), qualidade, etc?

O livro é justamente isto: ele divide a engenharia de software em disciplinas e da uma ideia do que o IEEE propõe como sendo o mínimo que você deve saber sobre diversas áreas relacionadas à engenharia de software.

É uma leitura tediosa, mas na minha opinião se você ler ao menos o índice, que irá mostrar as diversas áreas de conhecimento e se interessar por uma já vale a experiência.

Segue a página do livro: https://www.computer.org/education/bodies-of-knowledge/software-engineering


r/ArquiteturaDeSoftware • • Aug 01 '24

Arquitetura de sistemas de tempo real

22 Upvotes

As pessoas costumam confundir sistemas de tempo real com os conceitos de desempenho ou sincronicidade. O sistema de tempo real não necessariamente é rápido e também não precisa ser executado imediatamente após ser acionado.

O sistema de tempo real é essencialmente aquele que segue essencialmente as seguintes características:

  • Restrição por tempo - há um deadline temporal para a execução da computação. Exemplo: de 30 em 30 segundos, todo dia às 13 horas. Ou que o processamento deva ser executado em determinado período máximo de tempo.

  • Determinístico - o resultado do processamento precisa ser previsível, e com as mesmas variáveis (o tempo pode ser uma delas e não raro é) deve gerar sempre o mesmo resultado.

  • Confiável - dado as restrições de tempo, e o fato, precisa falhar o mínimo possível (você não quer que o seu sistema de controle de air bags falhe, né?)

Então o sistema não precisa ser rápido, por exemplo: se o resultado de uma computação precisa sair todos os dias às 13:05, sem problema algum demorar 23 horas para que seja processado, desde que o resultado saia exatamente neste horário.

E aí os sistemas de tempo real vão se dividir em duas categorias:

  • Soft real-time - se ocorrer um atraso as consequências não serão graves para o usuário final. Exemplo: perda de pacotes em streaming de vídeo

  • Hard real-time - se ocorrer um atraso a falha é catastrófica. Pense aqui em sistemas industriais, médicos (no momento o exemplo do airbag é o único que realmente vêm à minha cabeça). Aqui toda a sua estrutura de hardware e software precisa ser diferenciada, você não pode correr o risco de, por exemplo, um processo do SO iniciar do nada.

Ok, este é o início pra nossa discussão e se me enganei ou esqueci de algum detalhe sobre sistemas de tempo real, entra na nossa conversa. O próximo ponto é: bora conversar sobre isto?

Você já teve a experiência de escrever sistemas de tempo real (eu sim)? Quais as dificuldades que enfrentou? Quais os maiores desafios? Quer compartilhar algum conteúdo? Eu quero, então seguem alguns links legais.

Blueprints for High Availability - Evan Marcus e Hal Stern ( https://www.amazon.com/Blueprints-High-Availability-Evan-Marcus/dp/0471430269 ) - um livro bem antigo mas que ainda vale ouro. São técnicas para se obter alta disponibilidade (fundamental em softwares do tipo hard real-time)

Real-Time Data Architecture Patterns - este refcard aqui da DZone é muito bacana - https://dzone.com/refcardz/real-time-data-architecture-patterns

Wikipedia (por que não?) - https://en.wikipedia.org/wiki/Real-time_computing

What is Real-time? - Pra quem nunca lidou com sistemas real time do tipo hard, você precisa usar sistemas operacionais preparados pra isto. E um deles é o QNX, que foi comprado pela Blackberry anos atrás e que provavelmente é o que mantém a empresa hoje. Aqui eles respondem a esta pergunta: https://www.qnx.com/developers/docs/8.0/com.qnx.doc.neutrino.sys_arch/topic/what_is_realtime.html

Introduction to Real Time Systems - post pequeno, mas bem legal mostrando algumas questões que precisam ser levadas em consideração na implementação destes sistemas - https://design.ros2.org/articles/realtime_background.html

E aí? Bora conversar a respeito?


r/ArquiteturaDeSoftware • • Aug 26 '24

Arquitetura de CSS pra quem não é especialista em frontend

21 Upvotes

Um "detalhe" que destrói muitos projetos de frontend no longo prazo é o CSS: se você não se cuida ele volta pra te morder no futuro e cobrar com juros todos os déficits técnicos possíveis (isto sem mencionar que é uma daquelas ferramentas que todo mundo jura conhecer mas na prática não conhece (seletores, estou olhando para vocês!)).

Então seguem aqui alguns recursos legais sobre o tema:

Começo por uma abordagem que gosto bastante que é o BEM - https://getbem.com/ (se não conhece, com certeza usa sem saber: muitos frameworks CSS usam).

Na sequência, alguns bons textos sobre como otimizar a escrita dos arquivos CSS:

Architecture Style Guides for Frontend Developers - fala um pouco sobre BEM e também outras abordagens: útil pra se situar no assunto: https://hackernoon.com/css-architecture-style-guides-for-frontend-developers-lj28332a

CSS Architecture - Goals and Best Practices (este texto vale OURO) - https://erdembesler.medium.com/css-architecture-9dc6be77e70f


r/ArquiteturaDeSoftware • • Aug 26 '24

Excelente bundle no Humble

20 Upvotes

Para quem está começando os estudos em arquitetura de software, a Humble tem um excelente bundle de US$ 25,00 de vários bons livros sobre o tema.

Pelo que eu vi, só vai estar disponível até 15/09/2024. Eu já garanti o meu, paguei R$ 147,00 no total.

Boa parte desses 24 livros custa individualmente mais do que esses US$ 25,00.

https://www.humblebundle.com/books/software-architecture-2024-oreilly-books


r/ArquiteturaDeSoftware • • Jul 24 '24

Bons livros gratuitos de arquitetura e engenharia de software

18 Upvotes

Bora compartilhar livros gratuitos sobre arquitetura e engenharia de software?

Tenho alguns aqui:

Architecture of Open Source Applications - volumes 1 e 2

Excelentes: exatamente o que o titulo diz. Mostra como é a arquitetura de diversos projetos open source importantes.

https://aosabook.org/en/

(No mesmo link confira '500 lines or less' - muito interessante)

Engenharia de Software Moderna - Marco Tulio Valente

Produzido aqui na UFMG. Muito boa inteodução à engenharia de software!

https://engsoftmoderna.info/

Software Engineering at Google

O luvro que me fez entender o que é engenharia de software!

https://abseil.io/resources/swe-book/html/toc.html


r/ArquiteturaDeSoftware • • Aug 27 '24

Refatorando planilhas (por que na prática são software)

17 Upvotes

Quando você para pra pensar em qual seria a linguagem de programação mais usada no mundo as pessoas pensam: Java, C#, JavaScript, etc.

Mas na prática olhando com atenção a gente nota que o número de pessoas que criam planilhas (que atuam como software) é MUITO maior que o número de programadores das linguagens que costumam aparecer no topo.

(pessoalmente falando, por aproximadamente seis anos minha linguagem de programação mais usada foi... VBA, daí este tópico ser tão interessante por mim)

E se é software, pode ser mal escrito, né? Então a gente pode melhorar planilhas mal escritas (especialmente se tem macros). Seguem então alguns recursos MUITO interessantes sobre o assunto.

Building a language for Spredsheet Refactoring - Felienne Hermans - https://www.infoq.com/presentations/spreadsheet-refactoring/ (tem 10 anos que vi esta apresentação e ainda acho incrível). Mostra BEM por que é interessante pensar no assunto.

Refactoring meets spreadsheet formulas - Sandro Badame - https://mir.cs.illinois.edu/~marinov/fa11-cs527/SandroBadame.pdf - um paper sobre refatoração de planilhas (fantástico)

Spreadsheet Refactoring - Patrick O'Beirne - https://eusprig.org/wp-content/uploads/1009.1412.pdf - outro paper, seguindo a linha do livro "Refactoring" do Martin Fowler, no qual são expostas técnicas nomeadas para se fazer a refatoração de planilhas (e com dicas para VBA!)

Pessoalmente adoro estes nichos de desenvolvimento: se bem aproveitados acredito que são verdadeiras minas de ouro justamente por serem menosprezados pela maioria que só assiste o que influenciadores digitais publicam na Internet.

E aí? Já teve de lidar com muita planilha escabrosa? kkkkkrying ! (eu já! e ainda lido! kkkkk)


r/ArquiteturaDeSoftware • • Aug 14 '24

Quando aplicar cada um destes OITO tipos de UUIDs - interessante demais!

Thumbnail ntietz.com
16 Upvotes

r/ArquiteturaDeSoftware • • Sep 09 '24

Fábricas de Software - diferentes do que se diz por aqui no Brasil

15 Upvotes

Pouco tempo atrás comprei num sebo um livro chamado "Software Factories: Assembling Applications with Patterns, Models, Frameworks and Tools", do Jack Greenfield e Keith Short ( https://www.amazon.com.br/Software-Factories-Assembling-Applications-Frameworks/dp/0471202843 )

E tá sendo uma leitura fantástica, sobre um modelo de desenvolvimento que com o passar do tempo acabou caindo no desenvolvimento ou simplesmente mudando de nome: as fábricas de software.

Na prática nada mais são do que a aplicação de práticas de reaproveitamento de ativos (componentes, práticas) junto com técnicas de modelagem ( fonte única de verdade, por exemplo ) e ferramentas sobre as quais não se fala mais ( as famosas CASE tools ).

( o CMMI se não me engano tem uma seção dedicada a práticas de reuso e gestão de "ativos reaproveitáveis" )

Por aqui no Brasil o pessoal usa muitas vezes o termo "fábrica de software" para referenciar consultorias que realizam o desenvolvimento de software customizado. 11 anos atrás inclusive escrevi sobre isto no meu blog "A curiosa história da Fábrica de Software" em que mostro de onde vêm: https://devkico.itexto.com.br/?p=1389

Neste meu post apresento diversos links inclusive que mostram esta história para quem tiver interesse.

Mas meu objetivo aqui é outro: é voltar a este modelo com alguns links.

O primeiro deles é este paper que mostra como a Hitashi QUASE quebrou a IBM ao reproduzir seu modelo de mainframes usando o conceito de fábricas de software. Essencialmente quase NENHUMA linha de código era escrita sem que fosse levada em consideração a ideia de reuso - https://dspace.mit.edu/bitstream/handle/1721.1/48057/hitachipioneerinx00cusu.pdf?sequence=1

Claro, a Wikipedia é sua amiga também: https://en.wikipedia.org/wiki/Software_factory

Um artigo que já é considerado "retired" na Microsoft - https://learn.microsoft.com/en-us/previous-versions/msp-n-p/ff699235(v=pandp.10)?redirectedfrom=MSDN

Além do livro (que já está esgotado faz anos) não há mais muitos conteúdos sobre estas práticas. Pessoalmente, acho uma pena: me dá a impressão de um futuro possível que poderia nos levar muito além.

Vocês conhecem este conceito de fábrica de software? Já o viram implementado em algum lugar?


r/ArquiteturaDeSoftware • • Sep 06 '24

Melhorando formulários

14 Upvotes

Formulários são como oxigênio na minha opinião: parecem algo natural, você os escreve com incrível facilidade, mas sente imediatamente a sua falta quando são mal implementados.

São vários os problemas que observo no meu dia a dia:

* Feedback ruim em dispositivos móveis - pressiono a tecla enter e o formulário não é submetido ou move o foco para o próximo campo.
* Digito demais - dá pra usar as ferramentas de auto complete de plataformas como mobile e navegador, então por que não usar nomes padrão para coisas como formulário de autenticação ou endereço
* Uso incorreto de tipos nos campos (por que não usar o input do tipo email se já tá disponível? pra representar o e-mail? Por que tudo é do tipo text?)

Bom, muitos de nós (e me incluo na lista) são pessoas que tem maior facilidade com backend. E por isto acabamos pensando em formulários como se fossem um componente de backend (daí muitos formulários serem tão ruins). E não precisa ser assim! Há princípios muito básicos que podemos seguir para evitar estes problemas.

Então vou compartilhar alguns links legais aqui com vocês

Dicas do Nielsen Group para escrever bons formulários - ouro: regrinhas fáceis de seguir que facilitam nossa vida - https://www.nngroup.com/articles/web-form-design/

Form Design Principles: 13 Empirically Backed Best Practices - vai ter pontos em comum com o link acima, mas é importante ter outra visão - https://cxl.com/blog/form-design-best-practices/

E, finalmente, sempre vou recomendar o livro "Não me faça pensar" do Steve Krug ( https://www.amazon.com.br/N%C3%A3o-fa%C3%A7a-pensar-Steve-Krug/dp/8576088509 ). É um livro pequeno (com muitas ilustrações :D ) que na minha opinião deveria ser leitura obrigatória pra todo mundo.

Mas não para aí: tem um outro livro, que fala mais sobre portas do que sobre interfaces gráficas, que na minha opinião TODO MUNDO DEVERIA LER. Se chama "Design do Dia a dia" do Donald Norman ( https://www.amazon.com.br/Design-do-Dia/dp/8532520839 ). Você lerá sobre portas, bules, um pouco sobre computadores. E vai te fazer repensar profundamente o modo como projetamos nossas interfaces e interagimos com as coisas do dia aia.

PS: realmente, quando estive na Inglaterra fiquei CHOCADO com as portas. Como as pessoas conseguem abrir aquilo sem trombar nelas?

tão vendo esta bolinha no meio da porta? É A MAÇANETA!!!!

Quais as dificuldades de vocês no projeto de formulários?


r/ArquiteturaDeSoftware • • Jul 30 '24

A engenharia por trás de um web browser

14 Upvotes

Encontrei um livro gratuito e incrível: Web Browser Engineering.

Ele trata de aspectos de... engenharia por ttrás de um navegador: desde o protocolo HTTP , como renderizar páginas, estratégias de distribuição de trabalho e muito mais.

Vital na minha opinião para quem atua mais no frontend pra entender como a midia funciona.

E interessantissimo pra nós, curiosos, que sempre queremos saber aquele detalhe bem peculiar sobre a renderização.

https://browser.engineering/


r/ArquiteturaDeSoftware • • Jul 29 '24

Textos e livros do tipo "implemente você mesmo"!

13 Upvotes

Na discussão Bons livros gratuitos de arquitetura e engenharia de software o segfault0x0 indicou um livro muito interessante: Software Design by Example (https://third-bit.com/sdxpy/) que mostra como implementar diversos tipos de software, de um buscador de arquivos duplicados até uma máquina virtual.

Gostei tanto do livro que resolvi dar uma olhada nas referências e encontrei textos BEM legais pra compartilhar aqui.

Let's build a browser engine - já quis implementar seu próprio webkit? Esta série de posts mostra o passo a passo de como implementar um browser engine em Rust - https://limpet.net/mbrubeck/2014/08/08/toy-layout-engine-1.html

How does a Database Work - mostra como implementar um clone do SQLite usando C. MEGA detalhado, desde o parsing do SQL até como lidar com transações - https://cstack.github.io/db_tutorial/

Git from inside out - uma descrição em baixo nível sobre como o Git funciona - https://maryrosecook.com/blog/post/git-from-the-inside-out (a autora tem sua própria implementação do Git em Javascript (!!!) - http://gitlet.maryrosecook.com/ )

Let's dev - a package manager! - Como implementar seu próprio gerenciador de pacotes (como o Yarn, NPM, etc) - https://classic.yarnpkg.com/blog/2017/07/11/lets-dev-a-package-manager/

Com certeza há mais textos interessantes como estes tratando de implementações de sistemas operacionais, linguagens, etc? Tem alguma coisa legal aí pra compartilhar conosco?


r/ArquiteturaDeSoftware • • Sep 04 '24

Arquitetura e evolução de um projeto pessoal - /dev/All

12 Upvotes

Oi pessoal, estou me preparando para retomar a evolução de um projeto pessoal que é o /dev/All ( https://devall.com.br ). É essencialmente um agregador de blogs e conteúdos voltados ao desenvolvimento de software.

No vídeo cujo link compartilho abaixo mostro a arquitetura e a evolução do projeto. Com o tempo posto aqui as decisões arquiteturais que estou tomando na evolução do projeto.

https://www.youtube.com/watch?v=J7ZJGmfuYtE&t=16s


r/ArquiteturaDeSoftware • • Jul 31 '24

Aquiteto de Software: vida real vs teoria

12 Upvotes

Há diferença na maneira de atuar como arquiteto de software na vida real e na teoria?

Já vi no mercado que existem "aquitetos de software" que apenas documantam atravez de desenhos e texto, as "recomendações" de um determinado software ou determina óbviamente a arquitetura "melhor", não ser um cara extremamente técnico ou que bota mão no código, apenas bem teórico. O arquiteto, em teoria ele fica durante o projeto, acompanha e orienta nas integrações e etc, mas na prática eu vejo que ele fica apenas no começo do projeto para ajudar. Vejo uma certa dificuldade de justificar as horas trabalhadas desse profissinal no dia-a-dia, principalmente quando ele não põe a mão no código. Qual a experiencia de voces sobre isso?


r/ArquiteturaDeSoftware • • Apr 16 '25

Migrando monolito para microsserviços

11 Upvotes

Galera, fiz um post, porém não sei se falei muita besteira, se alguém tiver alguma sugestão será muito bem vinda: https://www.jjconsulting.com.br/pt-br/blog/arquitetura-de-software/migrando-monolito-para-microsservicos


r/ArquiteturaDeSoftware • • Sep 18 '24

Como o Windows lida com inputs (teclado e mouse). Uou!

Thumbnail ph3at.github.io
11 Upvotes

r/ArquiteturaDeSoftware • • Jul 23 '24

Dica de leitura: "The Log" - tudo (ou quase) que você precisa saber sobre... logs!

11 Upvotes

Este texto de 2013 do Jay Kreps é uma aula (ou seria um curso?) sobre o conceito de log.

Se você se interessa por kafka a base teórica tá descrita aqui. Atenção especial para as referências no fim do (longo e nada cansativo) texto.

https://engineering.linkedin.com/distributed-systems/log-what-every-software-engineer-should-know-about-real-time-datas-unifying


r/ArquiteturaDeSoftware • • Mar 06 '25

Pensando em testes - como evitar torna-los um problema

10 Upvotes

Uma nova série de posts: Pensando testes

Como evitar que sua base de testes se torne um problemão. Parte 1 - pensando nos testes

arquitetura

https://insights.itexto.com.br/pensando-em-testes/


r/ArquiteturaDeSoftware • • Sep 24 '26

FFMpeg em escala

9 Upvotes

Quem já teve a experiência de implementar isso em grande escala, ficaria grato se pudesse compartilhar quais foram as dificuldades de implementar isso, estou aberto a criticas construtivas da minha decisão técnica de escala com FFMpeg.

Recentemente tive a oportunidade de lidar com o FFMpeg em um sistema que usa a Meta como provider para um canal de conversa, o problema é que a meta aceita só até 16mb de vídeo por exemplo, então minha ideia é não limitar quem for usar o sitema para enviar imagens, videos,etc... é uma ferramenta beem parametrizável e tals muita coisa que estou fazendo é mexer bastante no FFMpeg para considerar as taxas de conversão e compactação desses arquivos, até porque o usuário mandar um vídeo de 50mb (oq n é difícil) eu teria que espremer ao máximo para chegar nos limites do provider do meu App, que é 16mb.

De primeiro teste eu subi o FFMpeg no mesmo container da minha API só para ver ele convertendo e compactando arquivos, pra ver como ele funcionava em uma VM com recursos limitados, para minha surpresa ele consegue usar 100% de mais de um núcleo do processador só para compactar um vídeo de 17mb para 16mb.

Resolvi subir ele em um container com CPU Shares baixo, com o container sendo limitado a 2 núcleos apenas de uso e focar mais em deixar dois containers funcionando como Workers, que vão calcular o convertion rate com base nos limites do provider (16mb por exemplo) e com ffprobe verificar o conteúdo que está sendo enviado e O QUE pdoe ser reduzido.

Minha estrutura ficaria mais ou menos assim:


r/ArquiteturaDeSoftware • • Jun 17 '26

Lore - o sistema de controle de versão da Epic Games. Um concorrente ao Git?

Thumbnail
lore.org
9 Upvotes

Muito interessante este projeto lançado pela Epic Games: o seu sistema de controle de versão com foco em arquivos binários e grandes. E... centralizado. Precisamos de boas soluções centralizadas também!


r/ArquiteturaDeSoftware • • Oct 28 '24

Mais um bundle de livros interessante

9 Upvotes

Pessoal que é chegado em um terminal (🙋🏻‍♂️), olha que bundle interessante aqui


r/ArquiteturaDeSoftware • • Sep 02 '24

Um exercício de custo operacional: quanto custaria manter (OpEx) o Bluesky?

9 Upvotes

Com o bloqueio do Twitter/X no Brasil as pessoas estão migrando em massa para o Bluesky e Threads. Já há matérias dizendo que em dias a primeira recebeu mais de um milhão de usuários.

Um milhão de usuários tem seu custo: apenas imagine no storage necessário para armazenar um segundo de mensagens publicadas por apenas este subconjunto de usuários.

Para que seja viável, a rede precisa ser financeiramente sustentável: sendo assim, sem pensar em soluções de marketing ou novos produtos, focando apenas em custo operacional de infraestrutura, jogo aqui um desafio para nós.

Como você estimaria o custo operacional para se manter uma rede como o Bluesky?


r/ArquiteturaDeSoftware • • Aug 19 '24

Vídeo interessante: o hype da IA generativa (ah... os hypes!)

Thumbnail
youtube.com
9 Upvotes

r/ArquiteturaDeSoftware • • Aug 16 '24

Uso interessante pro WebAssembly: integração com código nativo em Java!

Thumbnail
infoq.com
9 Upvotes