Latest / Entre Chaves / Gemini x Claude: quem ganha como melhor gerador de código?

Transcript

Gemini x Claude: quem ganha como melhor gerador de código? · Entre Chaves

• 0:02
  Eu também fiz, né? Algumas comparações aqui, fiz
• 0:05
  poucas também, não cheguei a aprofundar tanto, né?
• 0:07
  Como a gente falou, tanta coisa acontecendo que a gente às vezes
• 0:10
  não consegue com tanta profundidade quanto a gente
• 0:12
  queria, né? Mas eu testei algumas coisas e
• 0:14
  basicamente eu estava, eu estava estudando para esse episódio
• 0:17
  aqui e testando algumas coisas ao mesmo tempo.
• 0:19
  E eu usei, como eu falei no início, né, usei o notebook LM,
• 0:22
  gerei alguns resumos que eu estava falando, né?
• 0:24
  E depois joguei tanto no cloud quanto no chá GPT no 44 ou
• 0:28
  quanto no. Aí 2.5.
• 0:31
  E aí pedi Pra Ele gerar uma linha do tempo interativa pra
• 0:33
  mim. Primeiro que os 3 geraram pra
• 0:36
  mim a linha do tempo 11, ordem que não era cronológica.
• 0:39
  Eu falei, que isso? Que erro básico.
• 0:41
  O. Que que é uma linha do tempo em
• 0:43
  ordem não cronológica. Eu faço o menor sentido.
• 0:46
  Aí eu falei, nossa, que erro básico.
• 0:48
  As 3, os 3, porque é como o texto não estava em ordem
• 0:52
  cronológica, não estava totalmente.
• 0:54
  E também tinha umas coisas assim, porque tinha algumas
• 0:56
  Datas que eram Datas mesmo e tinha coisas que era assim.
• 1:00
  Final de 2024? Aí ele não conseguiu nossos
• 1:03
  eternos problemas, né? Problemas de data.
• 1:05
  Entra ano, sai ano, entra tecnologia, sai tecnologia e a
• 1:09
  gente ainda tem problema de lidar com a.
• 1:11
  Data e o eterno problema de qualidade de dados também, né?
• 1:14
  Exato. Aí eu falei com os 3, falei, pô,
• 1:16
  vocês não colocaram na ordem cronológica?
• 1:18
  A open AI continuou errando o geminai 2.5 continuou errando,
• 1:23
  porque tinha esse negócio do final de 2024 e o Cláudio
• 1:26
  consertou. Ele conseguiu, mas agora, em
• 1:28
  relação à interface, que era um. Um diferencial gigantesco do
• 1:31
  Cláudio, por exemplo, comparando com o 4 ou do GPTA interface que
• 1:35
  ele me gerou, foi bem legal no gemina e 2.5 também.
• 1:38
  Ele lançou, me me gerou, né? Uma linha do tempo na vertical,
• 1:41
  com alguns bloquinhos que eu conseguia ver bem bonitinhos e
• 1:45
  tal. Depois ainda gerou uma sessão
• 1:47
  sobre principais personagens da história, né?
• 1:50
  Tipo assim, falando, por exemplo, do CEO da Google,
• 1:53
  falando mais de algumas pessoas que participaram daquela linha
• 1:55
  do tempo, achei bem interessante, mas eu ainda achei
• 1:58
  OA interface que o que o Cláudio?
• 2:00
  Melhor, com mais interatividade. Os bloquinhos eram expansíveis
• 2:03
  Oo do Cláudio estava bem parecido com o do geminai 2.5,
• 2:06
  mas os bloquinhos eram expansíveis, tinham uns filtros
• 2:09
  mais interativos que o que ele ele gerou tipo um pagueamento em
• 2:12
  cada evento, e você conseguia ver só os eventos de lançamento
• 2:16
  de tecnologia, só os eventos de, sabe?
• 2:19
  Assim, ele gerou alguns pagueamentos.
• 2:21
  Então eu conseguia filtrar a minha linha do tempo de acordo
• 2:24
  com o que eu queria. Achei mais interessante que o do
• 2:26
  geminai, mas o geminai ainda foi melhor do que o do GPT, por
• 2:29
  exemplo, do GPT. Ele foi bem ruim, mas assim eu
• 2:31
  ainda acho, e pegando até opiniões aqui com algumas
• 2:34
  pessoas assim, eu acho que o geminai ele melhorou, né?
• 2:39
  Assim, em relação ao 2.0, por exemplo, flash ou ou alguma
• 2:42
  versão antiga dele, eu acho que ele começou a realmente ser
• 2:46
  competitivo para código. Mas eu ainda acho que o Cláudio
• 2:49
  ainda é melhor. Você está comentando aí também
• 2:52
  que você usou o chá de PT, né? Da da OP?
• 2:54
  NIEO chá de PT recentemente também valorizou muito com a
• 2:58
  geração de imagens, né? E aí eu já.
• 3:00
  Tem as minhas LLMS preferidinhas para cada uma das tarefas.
• 3:02
  Assim eu comentei que para gerar código eu estou em dúvida aqui
• 3:05
  eu acho que o cloud e o deminai parece que eles estão realmente
• 3:08
  pau, pau para gerar imagem. Cara, eu estou todo dia eu gera
• 3:11
  imagem, minha esposa está viciado nisso também gera imagem
• 3:14
  todo dia com chá de GPT acho que ele falando assim de alguns
• 3:17
  nichos de mercado nisso eles ganharam muito e a de psique, eu
• 3:20
  acho que eu já até comentei isso em algum outro episódio também.
• 3:22
  Eu acho que a de psique está muito à frente em tarefas que
• 3:25
  precisam estimular mais a criatividade.
• 3:27
  Sabe o exemplo clássico da minha vida que é?
• 3:30
  Gerar legenda para foto toda vez que eu quero postar uma foto e
• 3:32
  eu peço uma legenda para as LLMSA da de de psique, para mim
• 3:35
  é, é a melhor. Então, esse tipo de tarefa que
• 3:38
  precisa de mais criatividade, eu tenho gostado mais da de psique.
• 3:41
  Eu acho que isso vai um pouco de encontro com os benchmarks, né?
• 3:44
  Que a gente tem visto por aí também.
• 3:46
  Eu. Acho que vai bem mesmo.
• 3:47
  Uma outra coisa que eu acho que é legal da gente comentar é o
• 3:49
  custo do geminai em comparação com os outros, e eu vi que ele é
• 3:53
  mais barato do que o Cláudio 3.7, né?
• 3:57
  Sone o que pode dar aí a competitividade?
• 4:00
  E realmente que ele gostaria, né, de ter?
• 4:02
  É considerando o que eu acabei de falar, que eu achei que eles
• 4:05
  estão pau a pau no resultado, né?
• 4:07
  Se eu tiver um resultado parecido, mas com um custo bem
• 4:10
  mais baixo, né? O cloud 3.7 está com um custo de
• 4:13
  3 USD por milhão de toques de entrada.
• 4:15
  Os gemini 2.5 pro está com um custo de um e 25 USD, 1 USD e 25
• 4:19
  cents por 1000000 de toques de entrada.
• 4:21
  Cara, é 40% mais ou menos aqui do do valor é 11.
• 4:24
  Diferença significativa, né? Você lembra do custo do GBT 4.5?
• 4:30
  Nem lembro, mas eu lembro que era absurdo. 75, é?
• 4:33
  Dólares, né? Realmente mais barato, né?
• 4:35
  O que dá aí uma cobertividade? Uma outra coisa também
• 4:37
  interessante do geminai em comparação com os outros, é o
• 4:40
  tamanho da janela de contexto dele que ele, assim como alguns
• 4:44
  outros modelos do Google anterior, né?
• 4:46
  De geminai mesmo anteriores, o 2.5, ele tem 1000000 de tokens
• 4:50
  de janela de contexto, né? O que significa que ele consegue
• 4:53
  lembrar do contexto de 1000000 de tokens, o que faz com que ele
• 4:57
  consiga um melhor entendimento de contextos grande.
• 5:00
  Né? De dados muito grandes, às vezes
• 5:01
  até de código muito grande, muitas linhas de código e tal,
• 5:05
  ele consegue lembrar de mais coisa, o que faz com que a
• 5:07
  resposta possa ser melhor, né? Então isso é é bem interessante
• 5:11
  porque comparando com o cloud 3.7, por exemplo, ele tem 200000
• 5:15
  só tool quentes de janela de contexto, o que pode fazer com
• 5:18
  que Oo geminai tenha um desempenho superior para
• 5:21
  projetos muito grandes. Mesmo que eu tenho muitos
• 5:23
  arquivos, arquivos com muitas linhas, pode ser, eu não testei,
• 5:26
  mas é o que faz sentido mesmo, né?
• 5:28
  Assim, pode ser que isso seja.