Disciplina Topicos em Engenharia de Dados para Ciências de Dados

Esta disciplina centra-se na "engenharia de dados" e na sua intersecção com a "ciência de dados". Neste âmbito, pretende-se que os alunos ganhem competências técnicas em diversos tópicos independentes mas relacionados. Os domínios de actuação mais relevantes desta UC são as bases de dados e a programação, que são as competências fundamentais para conseguir exercer o papel de "engenheiro de dados" em projectos académicos e/ou da indústria. Justifica-se a inclusão da UC no ciclo de estudos com a importância das capacidades de recolha, validação e tratamento de dados para que esses mesmos dados possam ser trabalhados e "explorados" com os conhecimentos adquiridos nas restantes unidades curriculares.

1. Introdução à Engenharia de Dados
2. Git & GitHub
   1. Introdução aos sistemas de controlo de versões
   2. Aprendizagem de processos de trabalho elementares usando o software Git e a plataforma online GitHub
3. Bases de Dados & SQL
   1. Bases de Dados Relacionais
   2. Linguagem SQL
   3. SQL Injection
4. Programação com PHP
   1. Do ponto de vista da extracção e tratamento de dados
5. Complexidade algoritmica e eficiência de algoritmos
   1. A sua importância considerando grandes quantidades de dados
6. Programação com Python
   1. Do ponto de vista da execução de análises exploratórias de dados
   2. Jupyter notebook
   3. Produção de pacotes para publicação e distribuição de software ("deployment")
7. Linux
   1. Introdução ao uso do sistema operativo GNU/Linux
   2. Navegação no sistema de ficheiros (comandos)
   3. Comandos para controlo de processos
8. Ferramentas avançadas de Engenharia de Dados
   1. Apresentação introdutória de ferramentas avançadas, tais como: Hadoop e Cassandra DB

Aulas teórico-práticas com exposição de teoria e apresentação de exemplos práticos.

Exercícios para realização durante a aula, com o apoio e validação do Professor.

Exercícios para realização em casa.

Avaliação: 3 mini-testes e um projecto

Não aplicável.

O atendimento será feito por agendamento caso-a-caso. O aluno deverá contactar o professor por e-mail (bcipriano@ulusofona.pt), explicando a razão da mecessidade de contacto. Em função da disponibilidade do Professor e do Aluno, o apoio poderá ser por e-mail, por video-conferência, ou até presencial caso o Professor entenda que se justifica.