Como fazer um carro dirigir sozinho no simulador

2.0K views
•
February 10, 2023
by
Sandeco
YouTube video player
Como fazer um carro dirigir sozinho no simulador

TL;DR

Para comandar o carro no simulador, configure um ambiente virtual Python, instale as versões de bibliotecas indicadas em requirements.txt e carregue o modelo treinado no arquivo model.h5. O código drive.py estabelece a comunicação com o simulador, recebe dados de telemetria e prepara a imagem da câmera central com o mesmo pré-processamento usado no treinamento, além de disponibilizar o envio de comandos de direção e aceleração.

Transcript

e fala pessoal tudo bem com vocês agora vamos pra parte final Esse é o último vídeo né do trabalho final do disciplina de Inteligência Artificial que a gente tá fazendo aí nosso trabalho que é criar um carro autônomo né nem que seja de forma simulada e essa parte final O que que você vai fazer você vai fazer efetivamente né o carro andar sozinho no... Read More

Key Insights

  • O ambiente virtual isola o Python e as bibliotecas do projeto para reduzir conflitos entre dependências.
  • O arquivo requirements.txt reúne as bibliotecas e versões indicadas para executar o projeto no simulador.
  • O arquivo model.h5 contém a rede neural que o aluno precisa treinar no Colab e baixar para o projeto.
  • O código drive.py carrega o modelo treinado com o método load_model da biblioteca TensorFlow.
  • A comunicação com o simulador usa sockets e uma aplicação Flask para receber dados e enviar comandos.
  • A conexão inicial envia um comando com ângulo de direção zero e aceleração zero ao simulador.
  • A telemetria disponibiliza a velocidade atual do carro e a imagem captada pela câmera central.
  • O pré-processamento recorta a imagem, converte suas cores, aplica desfoque e altera suas dimensões.

Explore YouTube Video Summarizer or Get YouTube Transcript Extractor

Questions & Answers

Q: Como preparar o ambiente Python para executar o carro autônomo no simulador?

A preparação apresentada começa com a instalação do Python e do PyCharm Community, seguida da criação de um projeto na pasta escolhida para os arquivos do carro autônomo. O instrutor utiliza Python 3.7.0 e recomenda essa versão para acompanhar sua configuração. Ao criar o projeto no PyCharm, orienta selecionar um ambiente virtual baseado nesse interpretador. Depois, copia os arquivos fornecidos e o modelo treinado para a pasta do projeto. As bibliotecas necessárias são instaladas pelas instruções de requirements.txt, que especifica as versões usadas nessa execução.

Q: Por que usar um ambiente virtual no projeto do carro autônomo?

O ambiente virtual é recomendado para manter um Python separado para o projeto do carro autônomo, acompanhado das bibliotecas necessárias à sua execução. O instrutor explica que usar o interpretador do sistema faz os projetos compartilharem as bibliotecas instaladas nele e destaca a possibilidade de conflitos entre dependências. Na configuração demonstrada, o ambiente virtual é baseado no Python 3.7 e fica dentro da estrutura do projeto. Essa organização permite consultar no PyCharm quais bibliotecas pertencem ao ambiente e instalar nele as dependências indicadas para o simulador.

Q: Como instalar as bibliotecas necessárias para o simulador do carro autônomo?

As bibliotecas devem ser instaladas a partir do arquivo requirements.txt fornecido com os arquivos do projeto. Esse arquivo reúne as dependências e as versões indicadas pelo instrutor para executar o carro autônomo com o simulador. Ao abrir drive.py, o PyCharm identifica importações cujas bibliotecas ainda não estão disponíveis e oferece a instalação dos requisitos. O instrutor utiliza essa opção para instalar as dependências no ambiente virtual. Também mostra a área de configurações do interpretador do projeto, onde é possível acompanhar as bibliotecas disponíveis nesse ambiente.

Q: Por que respeitar as versões de bibliotecas indicadas em requirements.txt?

As versões indicadas em requirements.txt são apresentadas como parte da configuração que funciona com o simulador utilizado no projeto. O instrutor ressalta que uma biblioteca disponível em versão mais nova pode deixar de funcionar com essa execução e usa a comunicação por sockets como exemplo durante a explicação. Por isso, orienta instalar as versões fornecidas no arquivo, em vez de escolher automaticamente as mais recentes. O ambiente virtual complementa essa preparação ao manter as dependências do carro autônomo separadas das bibliotecas utilizadas por outros projetos no computador.

Q: O que é o arquivo model.h5 no projeto do carro autônomo?

O arquivo model.h5 contém a rede neural treinada para o projeto do carro autônomo. O instrutor explica que o aluno precisa criar esse modelo durante o treinamento no Colab, baixá-lo e colocá-lo na raiz da pasta do projeto local. Ao iniciar a execução de drive.py, a função principal carrega o arquivo por meio do método load_model, associado ao TensorFlow na explicação. Dessa forma, o modelo produzido na etapa de treinamento passa a estar disponível no programa que realiza a comunicação com o simulador.

Q: Como o código Python se comunica com o simulador do carro autônomo?

O código drive.py estabelece uma comunicação por sockets com o simulador, utilizando uma aplicação Flask e um componente intermediário de comunicação descrito pelo instrutor. Essa estrutura permite receber os dados enviados pelo simulador e encaminhar comandos ao carro. A explicação menciona a porta 4567 para a comunicação, embora também cite 4563 em outro momento. Quando a conexão acontece, a função de conexão envia um comando inicial com direção zero e aceleração zero. Outra função recebe os valores de direção e aceleração e os envia ao simulador.

Q: Quais dados de telemetria o programa recebe do simulador?

A função de telemetria recebe um objeto de dados enviado pelo simulador. Segundo a explicação, esse objeto disponibiliza a imagem da câmera central, a velocidade, a aceleração e o ângulo de direção atual do carro. No trecho apresentado, o programa acessa o campo speed e converte seu conteúdo para um valor numérico do tipo float. Também acessa a imagem recebida, realiza sua conversão e a abre com uma biblioteca de imagens. Em seguida, transforma essa imagem em uma representação NumPy e chama a função de pré-processamento.

Q: Como a imagem da câmera central é preparada antes de ser usada no projeto?

A imagem da câmera central passa por uma função de pré-processamento após ser recebida pela telemetria, convertida e representada com NumPy. O instrutor explica que essa preparação segue os mesmos procedimentos empregados no treinamento. Uma parte superior da imagem é descartada porque contém mais céu, e esse recorte busca diminuir a confusão durante o processamento. Depois, a função realiza uma conversão de cor, aplica um pequeno desfoque e redimensiona a imagem. A transcrição fornecida termina nessa explicação, sem detalhar os parâmetros dessas transformações.

Summary & Key Takeaways

  • O projeto usa Python e PyCharm Community para configurar um ambiente virtual. As dependências são instaladas a partir de requirements.txt, respeitando as versões indicadas para funcionar com o simulador.

  • O arquivo model.h5 contém a rede neural treinada no Colab e deve ser colocado na raiz do projeto. O código drive.py carrega esse modelo e estabelece a comunicação com o simulador usando Flask e sockets.

  • A telemetria fornece velocidade e imagem da câmera central. A imagem é convertida e pré-processada com recorte, conversão de cor, desfoque e redimensionamento, seguindo a preparação usada no treinamento.


Read in Other Languages (beta)

Share This Summary 📚

Explore More Summaries from Sandeco 📚