•
2023년 5월 10일 개최한 Google IO 내 AI 관련 내용을 발췌하여 정리한 문서입니다.
◦
아직 우세한 LLM이 없는 “한국어” & “일본어”를 먼저 공략
◦
Multimodality & 강력한 Integration을 도입하여 ChatGPT 대비 차별화한 Bard
◦
“Next 검색 엔진 Converse의 모습”과 “PaLM2를 활용한 Personalized AI Notes Tailwind 예시”, 그리고 “다음 Foundation 모델인 Gemini”
1.
새로운 Foundation Model PaLM2
2.
Bard 업데이트 내용
•
영어를 비롯한 40개 언어 지원 계획 + 두번째 업데이트 언어로 한국어 & 일본어 공개
•
Multimodality
•
Integrations
3.
Next 검색엔진 “Converse”
4.
PaLM2을 활용한 Personalized AI Notes : Project Tailwind
5.
Next Foundation Model인 Gemini의 목표 소개
[References]
1. PaLM2 공개
25 products & features by PaLM2 공개 (waitlist)
202303, 텍스트 / 이미지 / 동영상등을 생성할 수 있는 API 공개 (VertexAI) & PaLM Fine-tuning API 제공 at GCP summit (update ‘VertexAI’)
•
202305, PaLM2 공개 (Bard는 기존 LaMDA에서 PaLM2로 교체 예정)
◦
inference speed : 75+ tokens per second
◦
context : 8k
◦
Training Data & Capabilities
▪
Reasoning : Scientific & Mathematical Topics 추가 (수학 및 논리 능력)
▪
Multilinguality : 100개 이상의 multilingual data
▪
Coding : 20개가 넘는 프로그래밍 언어로 코딩. C++, Go, Java, JavaScript, Python, TypeScript, Google Sheets
2. Bard Updates
2.1. 영어를 비롯한 40개 언어 지원 계획
•
Second languages로 한국어 & 일본어 지원 시작
2.2. Multimodality (몇 주 내에 공개 예정)
"in the next few weeks, bard will become more visual in its response and your prompts”
이미지 검색 & 답변
Adobe와 협업하여 이미지 입력 & 편집 기능 제공 예정
구글 렌즈 결합 (예시 : 이미지를 분석하여 캡션 달기)
2.3. Integrations
구글 맵 연동
Google sheets 연동
그 외 연동
•
[Code] Export Colab / Replit
•
[Content] Export Docs / Gmail
3. 검색엔진 “Converse”
‘생성형 검색 경험(SGE: Search Generative Experience)’
•
구글 랩스에서 선공개 예정
•
대화형 인공지능 interface
•
15초 내외 short-form 동영상을 전면에 배치
4. PaLM Model API (waitlist & only-US support)
Gecko 도마뱀 : on-device & offline
•
Otter 해달
Bison 들소
•
Unicorn 유니콘
•
의학 전문 모델인 Med-PaLM2 제공 : Medical Licensing Exam-Style Performance SOTA
◦
Demo : Example only, early exploration of Med-PaLM2’s future capabilities (Radiologists가 이미지를 해석하는 것을 도와줌)
•
CyberSecurity를 위한 Sec-PaLM2 제공 : Malicious 코드 script 찾아내기 (안전성 강화)
5. Project “Tailwind” (Personalized AI Notes) using PaLM2 as a prototype
•
작업 내용
◦
5명의 구글 developers들이 몇주에 걸쳐 작업한 프로젝트
◦
Arizona State & Oklahoma와 같은 몇개의 대학교와 같이 test 진행
AI First notebook “Tailwind”
1.
구글 드라이브에서 몇개의 파일들을 선택
2.
해당 파일들에 대해, 개인화 된 AI model을 만들어 주고 이를 활용하여 여러 문서에 대한 Chat을 진행
Features
•
Key topics 추출
•
Suggested Questions 생성
•
문서 관련 chat (응답 내 citation 제공)
6. “Gemini” : Next Model 소개 (Still in training)
Multimodal 기능 강화
Integration 강화
•
Highly efficient tool and API integrations
Memory & Planning 기능 추가
Responsible AI : AI에 의해 생성된 content를 찾아내는 기능
•
Watermarking
•
Meta-data : original file과 관련된 여러 context를 함께 제공
