본문 바로가기

단축키

Prev이전 문서

Next다음 문서

단축키

Prev이전 문서

Next다음 문서

MS Build 2023 2nd AI CO-Pilot.jpg

2023년 5월 24일 새벽 1시(2023년 5월 25일 새벽 1시 30분)에, '마이크로소프트 빌드 2023' 컨퍼런스가 진행되었는데요.

 

당시 게시자 본인도 댓글 생중계를 진행하였고, 이에 댓글 내용을 전체 취합 및 정리하여 '마이크로소프트 빌드 2023 컨퍼런스 2차 전체 정리본(AI CO-Pilot의 시대)'을 올려드립니다. 많은 도움이 되셨으면 좋겠습니다. 감사합니다

 

※ 본래 5월 24일 새벽 1시, 5월 25일 새벽 1시 30분에 진행했었으나, 이번 2023년에는 '마이크로소프트' 부문이 첫 중계이고 해서 키노트 

 

중심으로 진행할려고 했으나, 어느 쪽을 중계해야 할지 감이 오지 않아서 부득이하게 25일까지 미루었다가 26일에 바로 최종 확정되서 

 

주말에 진행하기로 결정되었습니다. 이 부분은 너그러운 양해를 부탁드리겠습니다.

 

[키워드]
▶ AI(인공지능) : 빠르게 확산되며, 미국 뿐만 아니라 전 세계에서 혁신을 일으키고, 긍정적인 영향을 미침.

 

▶ 오픈 생태계(CO-Pilot)
- 마이크로소프트 : 애저, 윈도우, 오픈 소스 커뮤니티

 

▶ AI 모델의 컴퓨팅(페타플롭스/s-Day, 선형적 그래프)
- 그래프(연도 : 2012년 ~ 2022년, 10년 기간)
- 2012년 : ImageNET
- 2018년 : 알파제로
- 2020년 : 오픈AI(GPT-3)
※ 마이크로소프트의 컴퓨팅의 양과 인프라 규모 : 천문학적으로 엄청남

 

▶ AI로 소프트웨어 개발의 재구상
- 사용자 경험
- 애플리케이션 아키텍처
- 보안성과 안전함

 

▶ 개발자 : '훌륭한 제품'을 만들어야 합니다.
- 사용자 요구 : 충족되지 않은 부분, 더 나은 제품을 만들기 위해서 노력하는 부분, 다른 사람이 가지고 있지 않은 것을 반영하기 위해서는 '고유한 이해'가 있는 곳을 이해해야 함.
- 기술 : 불가능하거나 실현 불가능 혹은 고비용성이 존재하는 많은 것들을 쉽고 저렴하게 제작함.
※ 누구에게도 좋은 제품을 만드는 것이 어떤 것에 대한 사고의 책임을 면제하지 않음.

 

▶ '모델' : 사용자의 제품이 아님
- 모델 자체 : 제품을 가능하게 하는 인프라 회사가 아닌 한 모델은 제품이 아니라는 것.
- 기술 종사자 : 사람들이 '제품에 집착'보다 '인프라에 집착'하는 것이 실수 중 하나임

 

▶ '훌륭한 경험'을 만드는 것은 개발자에게 달려 있음.

 

▶ AI 인프라스트럭쳐
※ 애플리케이션 ↔ 인공지능 오케스트라 ↔ 투자 모델(3가지 항목 : AI 안전성)

 

▶ 오픈소스 언어 모델의 종류
- 로컬 : 위스퍼 모델(증명서)
- 로컬 : Dolly 2.0 모델(게스트 이름 추출)
- 클라우드 : Bing 검색 접지 API(게스트의 약력 검색)
- 클라우드 : GPT-4 기반 '애저 오픈AI'(소셜 미디어 문구 생성)
- 클라우드 : DALL-E 2 기반 '애저 오픈AI'(이미지 생성)
- 클라우드 : CO-Pilot 기반 링크드인 플러그인(포스팅)
※ 전체 코드는 'GitHub repo'를 확인(github.com/microsoft/PodcastCopilot)

 

▶ Do Legendary Shit : 개발자의 도전은 언젠가 전설적인 'XX' 표현이 나올 해내는 것!

 


[마이크로소프트]
▶ 마이크로소프트, 기술 스택 ☞ 플랫폼[초대 창업자 겸 CEO(회장) 빌 게이츠(윌리엄 헨리 게이츠 3세)]
① 플랫폼을 사용하는 모든 사람의 경제적 가치가 만드는 회사의 가치를 초과할 때임
② 플랫폼의 진정한 가치가 구체화되는 때는 그 플랫폼에서 창출된 가치가 플랫폼 빌더 자체가 아니라, 플랫폼 위에 구축하는 사람들에게
순항할 때임
③ 그렇지 않는 플랫폼이 있다면 그것은 실제 플랫폼이 아니며, 플랫폼을 잠재적으로 생산할 수 있는 모든 가치보다 훨씬 더 크게 만드는
것은 사람들이 그렇게 할 필요가 없도록 하는 것
 

 

[마이크로소프트 & 오픈AI]
▶ 마이크로소프트 & 오픈AI
- AI 기초 모델
- 파트너쉽으로 주도하는 빠른 속도의 혁신과 급속한 발전(속도를 조절)
- ChatGPT : 해당 모델 기반으로 구축하는 애플리케이션(많은 시대정신이 포착됨)

 

▶ 마이크로소프트와 오픈AI
- 개발자 : 기술이 점점 더 좋아지고 있으나, 모든 개발자가 할 수 있다고 생각하는 것
- 마이크로소프트 규모 : 특정 영역에 들어가서, 이 기술을 작동시키는 방법을 알아내는 것은 어렵다.

 

▶ 마이크로소프트 & 오픈AI의 파트너쉽 성공의 주요 요인(End To End 플랫폼 구축 기반)
- 슈퍼 컴퓨터 : 세계에서 가장 강력한 슈퍼 컴퓨터
- 오픈 소스 : 호스팅 ~ 오픈 소스에 이르는 유능한 기반 모델(애저 클라우드 기반 실행되고 있는 API 포함)
- 개발 환경 : 세계 최고의 AI 개발 환경 인프라스트럭쳐
- 개발자와의 협력 : 현재 할 수 있는 것보다 먼 미래를 볼 수 있다는 점.

 

▶ 오픈AI 창업자 겸 사장, 그렉 브록만 출연
- GPT-3 : 회사로서 상당한 결과였고, 해당 모델의 성능을 능가하려는 시도가 여러 번 실패함.
(제도판으로 돌아가 전체 인프라를 재구축하는 것을 목표로 변경함)
- GPT 시리즈(GPT-4) : 전통적 GPT-3 기본 모델을 보유하고 있었고, 사전 훈련도 받았음.[ChatGPT의 일부를 지원함]
- 사전 방향 조정 X : GPT-3.5용 API에 있었고, 지시 받은 계약자가 있는 곳에서 지시를 내리는 지점에 도달함
- 완료해야 하는 방법 : GPT-4의 교육
- 작은 실험 : 2번째 지시를 내릴 때의 경우(무언가 생성한 후 모델은 이전의 모든 것들을 통합한 완벽한 응답으로 결과 도출)
- 세부 사항의 파악 : 버그는 있었으나, 모든 엔지니어링 허용 오차가 엄청나게 작기를 원하는 로켓을 만드는 것과 같다는 것.
- 머신 러닝 : 대부분 상관하지 않고 복원함(작은 세부 사항, 체크포인트의 버그 → 잘못된 순간에 작업 종료시 다시 작업을 해야 할 때의 

가중치와 이전 가중치가 혼합됨)

 

▶ 강력한 CO-Pilot를 위해서 ChatGPT를 구축한 경험
- ChatGPT : 몇 년 동안 인프라 및 ML 관점에서 흥미로움
- 아이디어 : 몇 년 동안 '채팅 시스템'을 갖기 위한 관점(초기 버전인 WebGPT 빌드 데모를 선보였음)
- 데모 시연(계약자) : 당시 해당 시스템을 이용 및 비용 지불을 위한 100명 계약자가 있었음.

 

▶ 오픈AI와 인텔
- 인텔의 틱톡 전략 : 혁신을 생각해 낸 다음, 실제로 밀어붙임과 해당 전략 주기가 있다는 것.
- GPT4 : 실제로 추진하는 초기 단계(현재 비용은 비쌈)
※ 2년 전에 70% 가격 인하를 좋아했던 역사를 되돌린 시점 기준(90% 비용 절감, 세금 비용을 인하함)

 

 

 


[마이크로소프트 빌드 2023 컨퍼런스]
▶ 마이크로소프트 빌드 2023 컨퍼런스의 주제('AI CO-Pilot의 시대')
- AI, 지난 한 해 동안 세계에서 일어난 일과 미친 영향
- AI, 개발자 모두에게 의미하는 바 무엇인가?
 

 

 

[마이크로소프트 - 애저 클라우드]
▶ 마이크로소프트 애저 클라우드[(AI(인공지능)을 위한 클라우드]
- 오픈AI : 모든 인프라 위에서 수행한 놀랍고 기술적으로 복잡하고 뛰어난 태스킹을 보유함.
- 마이크로소프트 : CO-Pilot 애플리케이션 및 자체 고급 AI 모델을 보유 및 구축을 수행함.

 

 


[마이크로소프트 - 윈도우 OS]
▶ 마이크로소프트 윈도우 OS[AI 개발을 위한 최고의 클라이언트(Feat. 윈도우 CO-Pilot)]
- 강력한 AI 모델 실행
- 클라우드 플랫폼까지 확장
※ 진정한 하이브리드 OS AI 애플리케이션을 개발할 수 있는 기능 → 윈도우 OS
 

 

 

[마이크로소프트 → CO-Pilot]
▶ 마이크로소프트 CO-Pilot
- 신규 개발 패턴
- 특이한 아키텍처
- 어디에나 있음.

 

▶마이크로소프트 CO-Pilot
- 최신 AI를 사용하여 복잡한 인지 작업을 지원하는 애플리케이션.
- 인지 작업을 지원하는 대화형 인터페이스도 존재함.
- ChatGPT에서도 적합함
- 다른 제품 : Bing 채팅, GitHub CO-Pilot, 보안 CO-Pilot, 365 CO-Pilot, 디자이너
※ 주목 포인트 : 사용자 환경을 훌륭하게 구성하는 방법 및 작업들을 대규모로 안전하고 책임감 있으면서 비용 효율적으로 제공할 수 있는 

기술 스택이 무엇인지 이해하도록 공통적으로 살펴봐야 한다는 부문임.

 

▶ 마이크로소프트, 윈도우 CO-Pilot의 플러그인 접근 방식
- 권한 부여 : 모든 개발자가 사용할 수 있도록 부여할 것(사티아 나델라 회장)
- ChatGPT : 같은 기능을 확장할 수 있는 소프트웨어이자, MS가 구축하는 모든 CO-Pilot과 동일함
- 오픈AI : 모든 개발자가 플러그인을 활용하여, 모든 사람들에게 나은 시스템을 제공할 수 있는 놀라운 기회임.(이것이 바로 개방형 표준을 설계한 이유이며, 한번 빌드시 모든 AI를 사용이 가능함)
- 월드 와이드 웹 : 누구나 웹사이트를 구축 및 액세스를 할 수 있고, API를 구축하여 누구나 활용할 수 있다는 부분.
- 플러그인 : 개념적으로 간단하고, 핵심 개념을 이해하면 매우 강력하게 빠르게 세울 수 있음. 
- 플러그인의 설계 원칙 : 플러그를 꽂아서, 시스템의 성능 향상 및 모든 도메인의 ChatGPT로 가져올 수 있기를 원하는 개발자를 가질 수 있다는 것.

 

▶ 마이크로소프트 "CO-Pilot" ←  플러그인 → '디지털 세상'
- 기초 모델 : 강력한 모델이 있고, 점점 더 강력해지는 모델도 있음
- 기다림 : 모델을 훈련시킬 때까지 기다릴 필요가 없음
- 수용성 : 응용 프로그램을 수용할 수 있는 방법
- 애플리케이션 빌드 : 모델 자체가 불완전하거나 불완벽한 경우에도  해당 기술 기반으로 빌드함.
※ MS 플러그인의 생각 방식 : 세계의 디지털 작동기와 같음.

 

☞ 마이크로소프트 'CO-Pilot' 스택 구조
▶ CO-Pilot 프론트엔드
① 플러그인 확장성
② UX(사용자 경험 - 에이다 러브에이스가 1st 프로그램을 작성한 이래 180년 이상 동일한 방식을 사용함)

▶ 오케스트라 프레임워크(오케스트라) - 문제 해결이 아닌 새로운 아이디어를 보게 될 것임.


① 프롬프트 & 응답 필터링 : 내부에서 조작하는 기본적 수단
- 프롬프트 → 토큰 버킷이며, 응용 프로그램의 사용자 환경 계층에서 생성됨) : 자연어와 오케스트레이션의 시작 단계임!
- 응답 필터링 : 프롬프트를 허용하지 않는 이유(프로그램 요구 사항의 미충족, 비안전성 작업을 수행하는 방식으로 응답하게 될 가능성이 

있을 수 있음.

 

② 메타프롬프트 : 'CO-Pilot'에게 제공하는 상설 지침 세트(대화의 모든 턴에서 모델로 전달 및 구축하려는 파일럿에세 자신을 수용하는 

방법을 전달함)

 

③ 그라운딩(Feat. 벡터 데이터베이스 + 웹-API, 플러그인)
- 검색 증강 생성(Retrieval Augmented Generation, RAG)
- 모델이 아래로 흐르는 프롬프트의 응답에 도움이 될 수 있는 프롬프트에 추가 컨텍스트를 추가

 

④ 플러그인 실행('플러그인 확장성' 연동)
- 플러그인을 사용 및 모델로 내려가기 전에 프롬프트에 몇 가지 추가 컨텍스트를 추가.
- 시스템에서 작업 수행이 가능하도록 모델에서 백업하는 도중에 실행을 수행이 가능함.
※ LangChain : 인기 있는 오픈 소스 오케스트레이션 메카니즘 솔루션

 

▶ 기초 모델 및 미세 조정
- 투자 모델 : 호스팅 기반 모델(미세 조정 기반 모델 포함), BYO 모델
- 투자 모델 및 인프라 : MS 애저 클라우드, 윈도우 OS, CO-Pilot
- 애저 OpenAI API 서비스의 사용 가능 모델 : ChatGPT, GPT 3.5, GPT4(미세 조정중)

 


[마이크로소프트 - 플러그인]
▶ 마이크로소프트 플러그인
- AI 시스템을 강화하여 API에 액세스
- 유용한 정보 검색
- 새로운 계산 수행
- 사용자를 대신하여 안전하게 행동
 

 


[마이크로소프트 - 출시 및 신규 기능 발표]
▶ 미디어 출처도구(출시 예정)
- 생성형 AI 기반 콘텐츠에 출처에 대한 메타데이터를 표시하고 서명하는 데 사용되는 암호화 방법,
- 소비자가 이미지나 비디오가 AI에 의해 생성되었는지 여부를 확인이 가능함.

 

 

https://blogs.microsoft.com/blog/2023/05/23/microsoft-build-brings-ai-tools-to-the-forefront-for-developers/


List of Articles
번호 분류 제목 조회 수 날짜
공지 🚨(뉴비필독) 전체공지 & 포인트안내 9 file 26054 2024.11.04
공지 URL만 붙여넣으면 끝! 임베드 기능 20517 2025.01.21
1302 잡담 `보안` 차별성 강조하는 애플…이번엔 M1 맥에 보안 최강 - 매일경제 - 매일경제 80 2023.03.27
1301 잡담 ‘굿바이 인텔’, 애플 자체 칩셋 탑재 맥북 첫 선 - 국민일보 115 2023.03.27
1300 잡담 ‘아이폰 위탁생산’ 대만 폭스콘, 전기차 생산 추진 - 동아일보 102 2023.03.27
1299 잡담 ‘아이폰12’ 8천만대 공급한다는 애플... 中 만리장성 무사히 넘을까 - 조선비즈 100 2023.03.27
1298 잡담 ‘아이폰12’ 분해하니 한국 부품 27%…미국·일본 제치고 1위 - 조선비즈 100 2023.03.27
1297 잡담 ‘아이폰13’, ‘노치 디자인·충전 케이블’ 모두 없어질까? 주사율은? - 아주경제 121 2023.03.27
1296 잡담 ‘음성SNS’ 인기에 ‘아이폰’ 수요 늘어 - 경향신문 93 2023.03.27
1295 잡담 ‘카트라이더 러쉬플러스’, 포르쉐코리아와 e스포츠 제휴 이벤트 진행 273 2023.03.27
1294 잡담 ‘클럽하우스’에 ‘번개장터’ 효과?…중고 아이폰8 값 오히려 올랐다 - 중앙일보 - 중앙일보 96 2023.03.27
1293 잡담 ‘하입비스트’가 확인해본 애플 '맥세이프 듀오 충전기' & '신형 맥북 에어'의 성능은? - HYPEBEAST 97 2023.03.27
1292 잡담 “ARM 기반 13인치 맥북 프로·아이맥, 올해 말 나온다” - ZD넷 코리아 96 2023.03.27
1291 잡담 “금만 가도 제품교체?” 아이폰12 부분수리 23일부터 가능해 진다! [IT선빵!] - 헤럴드경제 뉴스 - 헤럴드경제 81 2023.03.27
1290 잡담 “기본 앱의 부족함을 채워줄” 아이폰용 날씨 앱 BEST 5 - ITWorld Korea 104 2023.03.27
1289 잡담 “낮은 비트레이트로 선명한 4K 영상을” 마침내 현실이 된 AV1 스트리밍 file 1953 2023.04.03
1288 잡담 “맥북, 어도비…” 오직 대학생만 받을 수 있는 할인 혜택 BEST 6 - 위키트리 WIKITREE 119 2023.03.27
1287 잡담 “맥북(Mac Book), 카메라 덮개 스티커로 가리고 닫으면 고장 납니다” (+이유) - 위키트리 WIKITREE 98 2023.03.27
1286 📔정보 “사상 처음” 신형 아이폰 한국서 첫 등장 112 2024.08.05
1285 잡담 “아이폰 12용 맥세이프 배터리 팩, 출시 불투명” 블룸버그 - ITWorld Korea 95 2023.03.27
1284 잡담 “아이폰 13, 충전단자 아예 없어졌다” - 인사이트 110 2023.03.27
1283 잡담 “여친한테 ‘아이폰12 프로 맥스’ 선물한 뒤 차였는데 돌려달라고 하면 찌질한가요?” - 인사이트 92 2023.03.27
1282 잡담 “왜 팔아먹지”...400만원짜리 맥북을 30만원에 사가려는 사람의 기막힌 수법 - 위키트리 WIKITREE 89 2023.03.27
1281 잡담 “이럴 수가…아이폰13은 영원히 '못 볼' 수도 있습니다” - 위키트리 WIKITREE 95 2023.03.27
1280 잡담 “충전은 어디에?” 아이폰 구멍이 하나도 없다! - 헤럴드경제 뉴스 - 헤럴드경제 90 2023.03.27
1279 잡담 [10줄 테크리뷰] ① M1칩 품은 입문자를 위한 신형 맥북 에어 - IT조선 84 2023.03.27
1278 잡담 [IT 이슈 리마인드] ① 벌써 아이폰13 출시설 솔솔...화면 더 넓어지고 빨라진다 外 - 아주경제_모바일 79 2023.03.27
1277 잡담 [IT애정남] 아이폰 '고효율 포맷' 사진·영상, 윈도에서 안 열린다면? - IT동아 111 2023.03.27
1276 잡담 [IT여담] 애플카, 그리고 아이폰 쇼크 < IT/스타트업 < IT/게임 < 기사본문 - 이코노믹리뷰 97 2023.03.27
1275 잡담 [공감신문] 오군컴퓨터 홍대아이폰수리점, 합리적인 가격에 당일 처리 서비스 제공 - 공감신문 113 2023.03.27
1274 잡담 [공감신문] 중고폰·아이폰수리 노란마켓 무료 등급 UP 이벤트 연장 진행 - 공감신문 103 2023.03.27
1273 잡담 [글로벌 비즈] ‘애플 공급업체’ 대만 폭스콘, 아이폰 이어 전기차도 합작? - SBS Biz 94 2023.03.27
Board Pagination Prev 1 2 3 4 5 6 7 8 9 10 ... 44 Next
/ 44