Ciência dos Dados - História de revisão

Admin: Criou nova página com 'Referência : Cavique, L., (2021) '' Ciência dos Dados'', [https://rce.casadasciencias.org Rev. Ciência Elem.], V9(2):041

2021-06-22T13:24:43Z

Criou nova página com '<span style="font-size:8pt"><b>Referência : </b> Cavique, L., (2021) '' Ciência dos Dados'', [https://rce.casadasciencias.org Rev. Ciência Elem.], V9(2):041 <br> <span...'

Nova página
<span style="font-size:8pt"><b>Referência : </b> Cavique, L., (2021) '' Ciência dos Dados'', [https://rce.casadasciencias.org Rev. Ciência Elem.], V9(2):041
<br>
<span style="font-size:8pt"><b>Autor</b>: <i>Luís Cavique</i></span><br>
<span style="font-size:8pt"><span style="font-size:8pt"><b>Editor</b>: <i>[[Usuário:Jfgomes47|José Ferreira Gomes]]</i></span><br>
<span style="font-size:8pt"><b>DOI</b>: <i>[[https://doi.org/10.24927/rce2021.041 https://doi.org/10.24927/rce2021.041]]</i></span><br>
<html><a href="https://rce.casadasciencias.org/rceapp/static/docs/artigos/2021-041.pdf" target="_blank">
<img src="https://rce.casadasciencias.org/static/images/layout/pdf.png" alt="PDF Download"></a></html>
----

== Resumo ==

A Ciências dos Dados é uma disciplina emergente que tem tido nos últimos anos muita aceitação pelo público em geral. A Ciências dos Dados aparece na interceção de três grandes áreas: a informática, a estatística e as áreas de negócio. A área de informática compreende as tecnologias e sistemas de informação bem como as ciências da computação. A área de estatística inclui a análise de dados e subáreas relacionadas da matemática. Por área de negócio designa-se o sector onde o sistema é desenvolvido, por exemplo: produção, marketing, finanças, turismo, educação, etc.

<html>
<p class='mainText'>Na FIGURA 1 apresenta as interceções das grandes áreas, em pares e no conjunto das três
áreas. Da combinação das três áreas encontramos a emergente Ciência dos Dados.</p>

<p class='mainText'>A interceção da informática com a estatística encontramos a aprendizagem automática
(<em>machine learning</em>) que é uma subárea da inteligência artificial. O nome <em>machine learning</em>
aparece pela primeira vez nos anos de 1980, tendo sido substituído por termos como
<em>knowledge discovery</em> e <em>data mining</em>, e reaparecendo recentemente na última década.</p>

<p class='mainText'>Uma segunda interceção interessante é a que combina a informática com a área de negócio,
onde encontramos o <em>software</em> aplicacional suportado pelas bases de dados. Na área
das bases de dados, com o advento da <em>web 2.0</em> (a <em>web</em> das pessoas) associada aos dispositivos
móveis e à <em>internet of things</em> (IoT), as clássicas aplicações empresariais foram
largamente ultrapassadas em volume de dados, dando origem ao denominado <em>Big Data</em>.</p>

<p class='mainText'>Neste trabalho procuramos explorar as semelhanças e diferenças entre as bases de
dados e aprendizagem automática. Estas duas subáreas lidam com o mesmo conjunto de
dados, mas de formas diferentes e com resultados distintos, pelo que as convém distinguir.
Nesse sentido, depois de definir base de dados e as principais técnicas de aprendizagem
automática, exemplificamos as duas abordagens e refletimos sobre as semelhanças e diferenças
entre elas.</p>

<br>
<center>
<figure class="image-medium">
<img src="https://rce.casadasciencias.org/static/images/articles/2021-041-01.jpg">
</figure>
<figcaption>FIGURA 1. Ciência dos Dados.
</figcaption>
</center>
<br>

<p class='mainText'>A história das bases de dados</html><ref><html>SILBERSCHATZ, A.,
<em>Database System Concepts</em>, 7th edition, McGraw-Hill, ISBN 9780078022159. 2019.</html></ref><html> tem início nos anos de 1960, na sequência da utilização
dos discos rígidos, que libertou os informáticos das fitas magnéticas com leitura sequencial.
Com discos foi possível criar bases de dados hierárquicas e em rede que suportavam
estruturas de dados mais complexas como árvores ou mesmo redes.</p>

<p class='mainText'>O modelo de base de dados relacional, que é intensamente utilizado hoje em dia, foi
criado por Codd</html><ref><html>CODD, E.F.,
<em><a class="a-link" target="_blank"
href="https://dl.acm.org/doi/10.1145/362384.362685">A relational model of data for large shared data banks</a></em>, <em>Communications of the ACM</em>, vol. 13, no. 6, pp.
377–387. 1970.</html></ref><html>. O modelo relacional para além da sua grande simplicidade é suportado
por uma linguagem declarativa, o <em>SQL</em> (<em>Structured Query Language</em>). Nas linguagens declarativas
ao contrário das procedimentais, basta declarar o que se pretende, cabendo ao
Sistema Gestor de Base de Dados encontrar a melhor forma de realizar a consulta.</p>

<p class='mainText'>O modelo relacional é baseado num conjunto interligado de tabelas. Cada tabela tem um
conjunto de linhas e colunas (ou atributos). Cada linha tem um identificador único chamado
chave ou chave principal, como na TABELA 1. As tabelas relacionam-se entre si através
de chaves estrangeiras, que não são mais que atributos que são chaves principais em outras
tabelas.</p>

<p class='mainText'>A TABELA 1, é retirada de um estudo de caso de um hospital privado, com pagamentos
associados, e que indica os doentes que tiveram complicações pós-operatórias.</p>

<p class='mainText'>O <em>SQL</em> tem dois conjuntos de comandos: um conjunto para definição da estrutura de
dados e um outro para manipular os dados. Como exemplo na definição da estrutura dos
dados, podemos referir a criação, alteração ou remoção de uma tabela. Como exemplo da
manipulação dos dados para além da inserção, alteração e remoção de linhas, temos a
possibilidade de fazer consultas (ou <em>queries</em>).</p>

<p class='mainText'>Para realizar uma consulta em <em>SQL</em> basta declarar as colunas que queremos visualizar e
as respetivas tabelas, sujeitas a uma qualquer condição, com a seguinte sintaxe:</p>

<p class='mainText'><em>Select <colunas>, From <tabelas>, Where <condição></em>.</p>

<p class='mainText'>Na última década têm-se popularizado as bases de dados <em>NoSQL</em> (“não <em>SQL</em>” ou <em>not only
SQL</em>) que se caracterizam por não optarem pelo modelo relacional e estar orientadas para
grandes volumes de dados, associado ao movimento <em>Big Data</em>.</p>

<p class='mainText'>Na aprendizagem automática</html><ref><html>GAMA, J. <em>et al.</em>,
<em>Extração de Conhecimento de Dados</em>, 3ª edição, Edições Sílabo, ISBN 9789726189145. 2017.</html></ref><html>, tal como as bases de dados, é possível extrair informação
dos dados. Podemos distinguir dois conjuntos de algoritmos, os preditivos e os descritivos,
isto é, os que têm capacidade de prever algo no futuro e os que descrevem o passado.</p>

<br>
<center>
<figcaption>TABELA 1. Tabela do modelo relacional.
</figcaption>
<figure class="image-medium">
<img src="https://rce.casadasciencias.org/static/images/articles/2021-041-t1.jpg">
</figure>
</center>
<br>

<p class='mainText'>De seguida, vamos exemplificar os algoritmos preditivos com a Classificação e os algoritmos
descritos com a Segmentação (<em>clustering</em>) e Associação (<em>association rules</em>).</p>

<p class='mainText'>A Classificação, dado um conjunto de dados de treino com exemplos de diferentes classes,
o problema consiste em criar um modelo capaz prever a classe de cada exemplo inserido
num novo conjunto de dados, designado por conjunto de dados de teste. Na TABELA 1 a
classe discriminante corresponde à coluna “complicação” e o problema de classificação é
capaz de prever se um novo doente com 60 anos e que não toma medicação terá eventuais
complicações no pós-operatório. O algoritmo de classificação na fase de teste mede da
qualidade da classificação. A medida de qualidade da classificação indica também uma
boa qualidade de previsão.</p>

<p class='mainText'>Por outro lado, os algoritmos descritivos, não utilizam conjuntos de dados que possuam
atributos discriminantes. Eles são também conhecidos por não supervisionados, isto é, não
são orientados por nenhum atributo com características especiais.</p>

<p class='mainText'>A Segmentação refere o problema de encontrar partições homogéneas nos dados. O
problema de segmentação pode ser definido como dividir as observações (ou linhas) em <em>K</em>
subconjuntos, em que a distância entre as observações de cada subconjunto seja mínima
e a distância entre os diferentes subconjuntos seja máxima. Para o exemplo da TABELA 1, o
problema de segmentação irá dividir os doentes em <em>K</em> grupos pela idade, número de medicamentos
e/ou pagamento, para uma melhor caracterização. Na segmentação por pagamento
identificam-se quatro doentes que são “grandes utilizadores” do hospital tendo despendido
valores superiores a mil euros.</p>

<p class='mainText'>O problema de Associação procura conjuntos frequentes num mesmo atributo. Por
exemplo, numa farmácia, quem compra paracetamol para a febre também compra um
descongestionante nasal. O algoritmo utiliza como input uma tabela com várias transações
de produtos, tendo como output um conjunto de regras do tipo <em>E => D</em>. Para o exemplo
a regra é a seguinte: paracetamol <em>=></em> descongestionante_nasal. Na geração de produtos
frequentes existem duas métricas fundamentais: suporte e confiança. A medida de suporte,
ou frequência relativa, é obtida pela razão da frequência absoluta de <em>E&D</em> pelo número
total de transações. Podemos interpretar ainda esta medida como a probabilidade de compra
de <em>E</em> e <em>D</em> em conjunto. A medida de confiança é dada pelo suporte <em>(E&D) / SUPORTE(E)</em>
e pode ser vista também como a probabilidade condicionada de comprar <em>D</em> se comprou <em>E</em>.</p>

<br>

<p class='mainText'><strong>Bases de Dados versus Aprendizagem Automática</strong></p>

<p class='mainText'>As questões colocadas a um Bases de Dados têm semelhanças com as perguntas que se
fazem na Aprendizagem Automática. De seguida vamos ver exemplos das duas abordagens,
para um exemplo de um Hospital Privado:</p>

<p class='mainText'>Numa Base de Dados pretende-se saber por exemplo:</p>

<p class='mainText'><em>B1</em> - quais os doentes com complicações pós-operatórias?</p>

<p class='mainText'><em>B2</em> - quais os doentes que pagaram mais de 1.000 euros?</p>

<p class='mainText'><em>B3</em> - quais os dois medicamentos mais utilizados?</p>

<br>

<p class='mainText'>Enquanto que, em Aprendizagem Automática procuram-se:</p>

<p class='mainText'><em>A1</em> - os atributos que levam os doentes a ter complicações pós-operatórias (classificação);</p>

<p class='mainText'><em>A2</em> - os grupos de doentes com base nos pagamentos (segmentação);</p>

<p class='mainText'><em>A3</em> - o medicamento <em>X</em> que é utilizado com o medicamento <em>Y</em> (associação).</p>

<br>

<p class='mainText'>As perguntas <em>B1</em> e <em>A1</em> são semelhantes, consideram os doentes com complicações no
pós-operatório, mas a primeira tem uma resposta fácil em <em>SQL</em> enquanto que a segunda
carece da utilização de um algoritmo de classificação.</p>

<p class='mainText'>Da mesma forma as questões <em>B2</em> e <em>A2</em>, referem os valores pagos pelos doentes no hospital
privado, em que a primeira questão é respondida em <em>SQL</em>, a segunda para determinar
os grupos de doentes é de utilizar um algoritmo de segmentação.</p>

<p class='mainText'>Por fim, as perguntas <em>B3</em> e <em>A3</em> também referem assuntos semelhantes, os medicamentos.
Contudo, para a primeira questão basta ordenar a tabelas dos medicamentos e a segunda
carece de um algoritmo de associação.</p>

<p class='mainText'>As duas abordagens tratam os mesmos dados dos sistemas de informação de formas diferentes.
Embora as questões sejam semelhantes, nas Bases de Dados é apresentado um
padrão (p.ex.: consulta <em>SQL</em>) e são devolvidos dados, por outro lado, e em Aprendizagem Automática
são fornecidos os dados e pretende-se extrair padrões (p.ex.: regras associativas)</html><ref><html>DHAR, V.,
<em><a class="a-link" target="_blank"
href="https://dl.acm.org/doi/10.1145/2500499">Data Science and Prediction</a></em>, <em>Communications of the ACM</em>, vol. 56, no.12, pp. 64-73. 2013.</html></ref><html>.</p>

<p class='mainText'>Retomando <em>B1</em> e <em>A1</em>, em <em>B1</em> pretendemos encontrar os doentes que tiveram complicações,
sendo devolvido os doentes 1, 2, 3, 6 e 10. A consulta <em>SQL</em> é a seguinte:</p>

<p class='mainText'><em>Select doente, idade, #medicamentos</em></p>

<p class='mainText'><em>From Tabela1</em></p>

<p class='mainText'><em>Where complicação = ‘sim’</em></p>

<br>

<p class='mainText'>Por outro lado, na questão <em>A1</em> são fornecidos os dados e pretende-se extrair padrões.
Assim, para a mesma tabela pretendemos saber os atributos que causam as complicações
pós-operatórias. Com um algoritmo de classificação encontraremos a seguinte regra:</p>

<p class='mainText'><em>(Idade >= 35 e #Medicamentos >= 4) Complicações = ‘Sim’</em></p>

<br>

<p class='mainText'>Isto é, quem tem 35 ou mais anos e toma 4 ou mais medicamentos tem complicações
médicas.</p>

<p class='mainText'>Em resumo, com base no mesmos conjunto de dados do sistema de informação, julgamos
ter identificado as semelhanças e diferenças entre Bases de Dados e Aprendizagem
Automática:</p>

<p class='mainText'>
<ul>
<li>exemplo: <em>Select doente, idade, #medicamentos From Tabela1 Where complicação = ‘sim’</em>, devolve os dados dos doentes com complicações pós-operatórias;</li>
<li>enquanto que, na Aprendizagem Automática são fornecidos os dados e são devolvidos
os padrões (regras), por exemplo: <em>(Idade >= 35 e #Medicamentos >= 4)
Complicações = ‘Sim’</em>, correspondendo à regra dos doentes que se prevê que tenham
complicações pós-operatórias.</li>
</ul>
</p>

<p class='mainText'>Desafio: em vez de um hospital ou uma farmácia, escolha uma outra área de negócio que
conheça, como por exemplo uma escola; de seguida, crie perguntas que sejam suportadas
por um sistema de base de dados e por um sistema de aprendizagem automática.</p>
</html>

=Referências=
<references/>
---- <br>Criada em 29 de Abril de 2020<br> Revista em 5 de Julho de 2020<br> Aceite pelo editor em 15 de Junho de 2021<br>
[[Category:Informática]]