segunda-feira, 28 de junho de 2021

Aula 5/7


Link permanente: zwz-pbzr-qkx

Link de hoje:

https://meet.google.com/ypt-kidk-ohm

Site com Vídeos:

https://sites.google.com/view/lce137-usp-gabriel

 

  •           Vídeo de Semana Passada (já esta no Site):
    •   Assunto: como elaborar arquivo Weka, BlogàWord àNote Pad àWeka. Rodar ML Supervisionado para Previsão
    •   Data do Blog: 28/6/2021
    • Link: https://youtu.be/XpNp9FAwIxU

 

 

 Pauta:

- Linkar arquivo de qualquer tipo no blog, ppt Curso de Inglês Básico 3 línguas em diretório de 137:

               Apostila de Inglês Basico para IA - CD - Robôtica

- Comparar resultados Weka IA com Excel e SAS

- Exercícios Práticos – Resolver, podem resolver os de sala de aulas (modificando um número) ou novos exemplos (quem quiser apresenta novos exemplos)

- Curso de Inglês Básico (ano que vem intermediário e 2023 avançado) para CD e IA, podem convidar amigos:

      - Link do Blog de Inglês:

             https://basic-english-artificial-intelligence.blogspot.com/

       - Videoaula como amostra:

                           https://youtu.be/PXyOlFs70TI

       - Damos aulas de CD - IA - Robótica

      - Utilizamos dois cursos de inglês:

               - BBC

               - Duo Lingo

      - Traduzimos e cantamos 2 músicas por semana

 

        - Disciplina China, setembro 2021, juntamente com o Prof. Antônio Almeida do LES (com ele demos 2 minicursos gratuitos mês passado no PPGI). Convidei vocês, não sei quem fez.

      - Disciplina ano que vem Viena OIEA

      - Disciplina de PG IA e CD iniciando em 2022 no PPGI (com Prof. Antônio Almeida)

      - Progr. de Educ. Continuada Mahalanobis (CD-IA-Robótica-Hiperinonavação) 2021 Outubro --> Certificações para Mercado

     - Progr. de Educ. Continuada Gestalt (Gestão 4.0 e 5.0, CIQ, Hipercompetitividade, Desenvolvimento de Produtos, Sistemas de Informação) 2022 Abril --> Certificações para Mercado

- Orientações:

      - LCE:

               - Todos os tipos de estagio (para os 7 cursos da ESALQ, tb. de outras universidades)

               - Mestrado e Doutorado

               - Prática Profissionalizante (já 3 projetos e mais de 25 orientados), gratuita, focada na área de atuação que vocês escolherem (no meu casso dentro de CD – IA – Robótica (Bots), Gestão 4.0 e 5.0, Hiperinovação e CIQ (ISO, FSC, GlobalGAP, AS, OHSAS). Todos os prof. Da USP podem orientar, não gostam muito. Último projeto, 2 anos Sistema Toyota de Gestão e ISO 9001, uma aluna desenvolveu um robô de gestão. Comentar projetos anteriores (empregabilidade).

      - PPGI

      - FEA

- Ofereceremos 9 cursos (Básico I e II, Intermediario I, II, III, Avançado I, II, III, IV) de CD-IA e Robótica para Gestão e Pesquisa, gratuitos, juntamente com ICMC/USP, 3 Ex. Alunos Irlanda e FEA (grupo da China). Tramitando em CCEx. Linguagens SAS, R, Python, Java e SQL Server, ferramentas para analise e projeto de aplicativos e robôs. Informação em Site Geral de Projetos:

https://sites.google.com/view/intel--sol-50-usp

Nesse Site manteremos comunicação após o fim da Disciplina LCE 137

 

- Prova Optativa:

          - 19/7

          - 1,5 Pontos de nota extra

          - Assuntos dos exercícios práticos

- Se der tempo exemplo de aula em inglês

 


segunda-feira, 21 de junho de 2021

Aula 28/6/2021 - Rodar Weka MLS para Regressão - Comparar com o Excel



Link: https://meet.google.com/umh-mroe-vbn

Site com Videoaulas e Exercícios, todo atualizado:

https://sites.google.com/view/lce137-usp-gabriel 


 

Pauta 28/6

 


- Vídeos semana passada em Site
- Exemplo de ML S Previsão
    - Arquivo no final de aula passada, fizemos en Word:


@RELATION biodiv_Animal


@ATTRIBUTE dbo REAL

@ATTRIBUTE ICob_V REAL

@ATTRIBUTE ICArb REAL

@ATTRIBUTE BCont REAL

@ATTRIBUTE Dist_Pla REAL

@ATTRIBUTE Ibd_A REAL


@DATA

1.604,89,60,11,9,90

0.385,90,61,10,8.9,91

0.216,91,62,9,9.1,92

0.303,90,59,10,8.8,89

1.961,20,12,81,0.2,20

0.782,21,14,79,0.3,22

0.57,22,15,78,0.25,23

2.187,22,12,77,0.2,24

0.764,59,35,41,6,60

0.273,60,32,40,6.5,61

1.883,64,33,38,5.8,63

0.581,62,32,37,5.6,62

0.18,79,50,21,8.2,80

0.007,80,49,20,7.8,79

2.028,80,48,18,8.2,81

2.431,79,47,21,7.7,78

Rodamos no Weka e obgivemos este modelo de IA:

 

Modelo de MLS para Previsão – IA Indutiva

 

Ibd_A =

 

      0.2508 * ICob_V +  èPossíveis erros do Excel (Iremos verificar por Estatistica Robusta no SAS). Semana que vem.

      0.1578 * ICArb +

     -0.4855 * BCont + è Possíveis erros do Excel

      1.147  * Dist_Pla +

     52.8115

Por que o Excel calcula errado, não, simplesmente utiliza uma metodologia defasada, ultrapassada, antiga, superada etc.

      
      - Continuar com dinâmica, começar de blog novamente
      - Rodar em Weka
      - Rodar em SAS - Semana que vem.
      - Comparar resultados

- Linkar arquivos de qualquer tipo no blog ou site


Reflexão- Possibilidade  de W em equipe:
      - Henrique Raymundo Gioia colega > 30.000 R$ sem acabar graduação. Falar inglês. Doutorando Economia e 2 PG em CD

      - Equipe para participar de concorrência mundial. Competitividade.
         - Já convite para Shangai e USA, > 15.000 USS por mês. Preferi ficar em USP por ficar com família, aposent. integral, autonomia didática e de pesquisa.
     - Posso aposentar a partir de ano que vem, proposta de PECEGE para coordenar Ciência de Dados ( 100 milhões/ ANO ). Enquanto lucidez e saúde vou para mercado, 62 anos, sem necessidade financeira pela aposent. integral. Curto como Hermano triátlon, analogia de mercado.
     - Filha 4 promoções em 3,5 anos, 3 durante a pandemia
     - Mercado ótimo

 - Temos contato com AL, China, Europa e Oriente Médio. China 2021 setembro, > 50% dos robôs, meta serem líderes em IA e CD - BD, Europa AIEA/ONU sempre avançados em tecnologia, meu coach em gestão Peter Bode (Delft) auditou Fukushima e Complexo Nuclear de Iran. Interessante China e Europa para ter interlocutores de ponta. Abu  Dhavi (Emirados Ar.), só para ganhar dinheiro após aposentadoria, mas não tenho necessidade, veremos.

     - Começar a apresentar seminários e treinamentos em inglês, já todos os sábados das 16 às 18 ou agora pensando até 19 horas, inicio de Mahalanobis e Gestalt, 2021 nível básico, colegial, 2022 intermediário e 2023 avançado. Mostrar exemplo vídeo de box plot em inglês:

            - Blog de Estudo de Inglês para CD e IA:

https://basic-english-artificial-intelligence.blogspot.com/

         - Exemplo de Videoaula, elaboração de box-plot e detecção de outliers:

https://youtu.be/PXyOlFs70TI

 

 Podem convidar amigos.

    - Mais 1 mais de aulas ver blog e site 5736 para ver se algum interesse em particular, temos flexibilidade 38 anos de W (trabalho)
    - Queremos montar uma equipe muito grande para competitividade global:
            - Def. Qualidade e Competitividade
            - Inovações frequentes e profundas
   - Habilidades de mercado de alta empregabilidade e competitividade. Lembrar Henrique, Laís, eu, Gabriel Ferreira, Robson etc.
- Iniciando Mahalanobis e Gestalt. Podem treinar apresentar seminários e técnicas em inglês, todo sábado das 16 às 18, estamos ampliando para 19h.
- Falar de W em equipe:
       - BR
       - AL
       - Europa: parceria AIEA/ ONU
       - China: Disciplina
       - USA: convite para W > 15.000 US$ (60.000 Reais)
em Sist. TOYOTA 4.0 (Porsche - Biblioteca), LS (Hiperinovação - Amazon, Uber, Facebook), OKR (Google, Intel, Microsoft) e CIQ (ISO 9000 14000 22000 27000)

- Mostrar blog Pôs Graduação (dobro de carga didática), explorar para novos assuntos após acabarmos exercícios (flexibilidade, mais um mês de aulas, trabalho há 38 anos nas áreas da disciplina), tambem disciplinas futuras, graduação e pôs, orientação: LCE, PPGI e FEA - Stricto Sensu e PG Profissionalizante Gratuita na área de seu interesse, já orientei 3 PGs, ultima S. Toyota de Gestão e ISO 9001 (63 começaram e 21 concluíram 2 anos).

           - Blog LCE5736: 

https://estat-teses-gest-esalq.blogspot.com/

           - Inverso de outras disciplinas, relaxar no final, todos aprovados, prova optativa, resolveremos todos os exercícios. Quero que aprendam a trabalhar se divertindo (Domenico de Masi), Trilogia da Era da IA: Trabalhar, Estudar e se Divertir.

 

       - Mostrar cases - consultoria / Coaching

 

 


Machine Learning para Predição - Regressão - Biodiversidade Animal

 Machine Learning para Predição - Regressão - Biodiversidade Animal



Arquivo do Weka



Resultado do Excel


Selecionou 3 Variaveis Preditoras
(Para MLS Previsão foram 4)








Videoaula:

 

https://youtu.be/Thsnpu1cxr8



Machine Learning para Predição - Regressão

Exemplo de Biodiversidade Animal




Área de Cultivo de Grãos 

Soja - Milho - Algodão - Trigo - Aveia



 













Resultado do Weka

Linear Regression Model

Ibd_A =

      0.2508 * ICob_V +
      0.1578 * ICArb +
     -0.4855 * BCont +
      1.147  * Dist_Pla +
     52.8115























Exemplo de Biomonitor




Área de Cultivo de Grãos 

Soja - Milho - Algodão - Trigo - Aveia







Dados para Rodar no Weka
Arquivo

Autor: Gabriel Sarriés

DBO – Demanda Bioquímica de Oxigênio

ICobV – Índice de Cobertura Vegetal

ICArb – Índice de Cobertura Arbórea

IBCont – Bioindicador de Contaminação (agrotóxicos)

Dis_Pl – Distancia do plantio de grãos.

Primeiro em Excel

Depois em Weka e por Ultimo

Em SAS

Dinámica de Manipulação de Arquivos


DBO

ICobV

ICArb

Bcont

Dis_Pl

IBD_A

1,604

89

60

11

9

90

0,385

90

61

10

8,9

91

0,216

91

62

9

9,1

92

0,303

90

59

10

8,8

89

1,961

20

12

81

0,2

20

0,782

21

14

79

0,3

22

0,57

22

15

78

0,25

23

2,187

22

12

77

0,2

24

0,764

59

35

41

6

60

0,273

60

32

40

6,5

61

1,883

64

33

38

5,8

63

0,581

62

32

37

5,6

62

0,18

79

50

21

8,2

80

0,007

80

49

20

7,8

79

2,028

80

48

18

8,2

81

2,431

79

47

21

7,7

78


Arquivo excel para Download:



Script do SAS Regressao Multipla

data bda;
input DBO ICobV ICArb Bcont Dis_Pl IBD_A;
cards;
1.604 89 60 11 9 90
0.385 90 61 10 8.9 91
0.216 91 62 9 9.1 92
0.303 90 59 10 8.8 89
1.961 20 12 81 0.2 20
0.782 21 14 79 0.3 22
0.57 22 15 78 0.25 23
2.187 22 12 77 0.2 24
0.764 59 35 41 6 60
0.273 60 32 40 6.5 61
1.883 64 33 38 5.8 63
0.581 62 32 37 5.6 62
0.18 79 50 21 8.2 80
0.007 80 49 20 7.8 79
2.028 80 48 18 8.2 81
2.431 79 47 21 7.7 78
;
/*
input DBO ICobV ICArb Bcont Dis_Pl IBD_A;
*/
proc reg;
model IBD_A = DBO ICobV ICArb Bcont Dis_Pl;
run;


Saida do SAS


Regressao Robusta Multipla
Comando do SAS: 







Arquivo para Weka (.arff)

@RELATION biodiv_Animal

@ATTRIBUTE dbo REAL

@ATTRIBUTE  ICob_V REAL

@ATTRIBUTE ICArb REAL

@ATTRIBUTE BCont REAL

@ATTRIBUTE Dist_Pla REAL

@ATTRIBUTE Ibd_A REAL

@DATA

6.416555198,60,99,99,5,90
1.538176272,61,98,99,6,91
...