Airton Lira junior

Engenheiro de software - Golang/Python Especialista em Cloud - AWS/Azure. Engenheiro de Dados e entusiasta em modelos de LLM e multi-agents. Analista e cientista de dados.

Joined on Oct 23, 2024

Cover image for Feature Engineering para Embeddings com SparkML e MLFlow no Databricks Experiments

Airton Lira junior

Apr 6

Feature Engineering para Embeddings com SparkML e MLFlow no Databricks Experiments

#machinelearning #databricks #sparkml #pyspark

5 min read

Cover image for AI - DBRX - Databricks - Documentando automaticamente suas tabelas e colunas do Unity Catalog

Airton Lira junior

Apr 5

AI - DBRX - Databricks - Documentando automaticamente suas tabelas e colunas do Unity Catalog

#ai #dbrx #databricks #aidatabricks

3 min read

Cover image for Datavault com minIO, Delta e Spark no jupyter notebook

Airton Lira junior

Mar 1

Datavault com minIO, Delta e Spark no jupyter notebook

#apachespark #datavault #minio #jupyter

8 min read

Cover image for Automatizando a Qualidade de Dados com DQX: Performance e praticidade

Airton Lira junior

Feb 27

Automatizando a Qualidade de Dados com DQX: Performance e praticidade

#dqx #spark #databricks #python

5 min read

Cover image for Criando multi-agents AI de forma simples

Airton Lira junior

Feb 15

Criando multi-agents AI de forma simples

#ai #langchain #python #powerautomate

5 min read

Cover image for Como passar na certificação AI Practitioner - AWS

Airton Lira junior

Feb 11

Como passar na certificação AI Practitioner - AWS

#aws #ai #llm #rag

26 min read

Cover image for Ganhe melhores respostas das IA - Prompt Engineer - Contemplative

Airton Lira junior

Jan 19

Ganhe melhores respostas das IA - Prompt Engineer - Contemplative

#ai #promptengineering #llm #rag

3 min read

Cover image for Auditoria massiva com Lineage Tables do UC no Databricks

Airton Lira junior

Dec 10 '24

Auditoria massiva com Lineage Tables do UC no Databricks

#databricks #unitycatalog #pyspark #spark

3 min read

Cover image for Entendendo e aplicando estratégias de tunning Apache Spark

Airton Lira junior

Nov 7 '24

Entendendo e aplicando estratégias de tunning Apache Spark

#databricks #spark #pyspark #python

10 min read

Airton Lira junior

Nov 2 '24

Redis + Redundância com Sentinel + Docker

#redis #sentinel #redissentinel #docker

5 min read

Airton Lira junior

Nov 2 '24

Métricas para algorítimos de regressão

#python #estatistica #regressao #algoritimos

5 min read

Cover image for Processando 20 milhões de registros em menos de 5 segundos com Apache Hive.

Airton Lira junior

Nov 2 '24

Processando 20 milhões de registros em menos de 5 segundos com Apache Hive.

#apachehive #hive #bigdata #hadoop

8 min read

Cover image for Utilizando o pattern Heartbeats em Golang

Airton Lira junior

Nov 2 '24

Utilizando o pattern Heartbeats em Golang

#designpatterns #go #heartbeats #goroutines

6 min read

Cover image for [API Databricks como serviço interno] dbutils — notebook.run, widgets.getArgument, widgets.text e notebook_params

Airton Lira junior

Nov 2 '24

[API Databricks como serviço interno] dbutils — notebook.run, widgets.getArgument, widgets.text e notebook_params

#databricls #jupyter #pyspark #spark

10 min read

Cover image for Implementando uma Lambda com GitLab CI/CD e Terraform para Integração SFTP, S3 e Databricks em Go

Airton Lira junior

Nov 2 '24

Implementando uma Lambda com GitLab CI/CD e Terraform para Integração SFTP, S3 e Databricks em Go

#databricks #terraform #gitlab #go

6 min read

Cover image for Duckdb — O novo banco de dados dos Big Data

Airton Lira junior

Nov 2 '24

Duckdb — O novo banco de dados dos Big Data

#duckdb #postgres #docker #database

5 min read

Cover image for Criando um LLM do zero com Transformers

Airton Lira junior

Nov 2 '24

Criando um LLM do zero com Transformers

#llm #transformers #chatgpt #nlp

3 min read

Cover image for Langchain — RAG — Retrieval Augmented Generation

Airton Lira junior

Nov 2 '24

Langchain — RAG — Retrieval Augmented Generation

#langchain #rag #llm #ia

3 min read

Cover image for Golang com Opentelemetry, prometheus, Grafana tempo OSS e Grafana padrão

Airton Lira junior

Nov 2 '24

Golang com Opentelemetry, prometheus, Grafana tempo OSS e Grafana padrão

#go #opentelemetry #prometheus #grafana

1 min read

Cover image for Desvendando o Atlas: Gerencie Seus Esquemas de Banco de Dados com Estilo🚀

Airton Lira junior

Nov 2 '24

Desvendando o Atlas: Gerencie Seus Esquemas de Banco de Dados com Estilo🚀

#atlas #database #schema #datagovernance

2 min read

Cover image for Criando um Service Principal para acesso ao SQL Warehouses Databricks via DBeaver

Airton Lira junior

Oct 26 '24

Criando um Service Principal para acesso ao SQL Warehouses Databricks via DBeaver

3 min read

Cover image for Apache Nifi & Registry com MinIO

Airton Lira junior

Oct 26 '24

Apache Nifi & Registry com MinIO

#apachenifi #docker #s3 #apacheregistry

9 min read

Forem

Airton Lira junior

Badges

Writing Debut

Feature Engineering para Embeddings com SparkML e MLFlow no Databricks Experiments

AI - DBRX - Databricks - Documentando automaticamente suas tabelas e colunas do Unity Catalog

Datavault com minIO, Delta e Spark no jupyter notebook

Automatizando a Qualidade de Dados com DQX: Performance e praticidade

Criando multi-agents AI de forma simples

Como passar na certificação AI Practitioner - AWS

Ganhe melhores respostas das IA - Prompt Engineer - Contemplative

Auditoria massiva com Lineage Tables do UC no Databricks

Entendendo e aplicando estratégias de tunning Apache Spark

Redis + Redundância com Sentinel + Docker

Métricas para algorítimos de regressão

Processando 20 milhões de registros em menos de 5 segundos com Apache Hive.

Utilizando o pattern Heartbeats em Golang

[API Databricks como serviço interno] dbutils — notebook.run, widgets.getArgument, widgets.text e notebook_params

Implementando uma Lambda com GitLab CI/CD e Terraform para Integração SFTP, S3 e Databricks em Go

Duckdb — O novo banco de dados dos Big Data

Criando um LLM do zero com Transformers

Langchain — RAG — Retrieval Augmented Generation

Golang com Opentelemetry, prometheus, Grafana tempo OSS e Grafana padrão

Desvendando o Atlas: Gerencie Seus Esquemas de Banco de Dados com Estilo🚀

Criando um Service Principal para acesso ao SQL Warehouses Databricks via DBeaver

Apache Nifi & Registry com MinIO