Llama 3 모델은 8b와 70b 두 가지라는 설명

메타, Llama(라마) 3 정식 공개

: 모델 파라미터 8b 및 70b. 400b 모델 학습 진행중(GPT 4 레벨)
: 아키텍처의 큰 변화는 없으나 기존 대형 모델에만 활용했던 GQA 확대 적용
: 토큰 12.8만(vs 라마 2 3.2만)
: 컨텍스트 윈도우 8192(vs 라마 2 4096)
: 학습 데이터 셋 15조 토큰(vs 라마 2 2조). Scaling laws 강조
: 2개의 24K GPU 클러스터 활용. 전작 보다 3배 효율적으로 학습

https://ai.meta.com/blog/meta-llama-3/

[삼성 이영진] 글로벌 SW 헤드라인 (24/4/19)

■ 메타, Llama(라마) 3 정식 공개. 라마 3 활용 인앱 검색AI 어시스턴트(Meta AI) 추가

■ 구글, 이스라엘 클라우드 계약 관련 오피스 점거 시위 관련자 28명 해고

■ 구글, 기존 리서치 조직에 있던 Responsible AI 팀을 딥마인드와 통합

■ 마이크로소프트, 단일 이미지와 음성 오디오 클립 기반으로 실시간으로 말하는 영상을 생성하는 모델 VASA-1 관련 논문 공개

■ 마이크로소프트의 오픈AI 투자에 대해 EU 인수법 관련 조사는 피했으나, 반독점 조사 대상이 될 수 있다는 보도

■ 오라클, 10년간 일본에 80억 달러 이상 투자 계획 발표

■ 어도비, Firefly 생성 AI 기능을 도입한 Adobe Express 모바일 앱 정식 출시(GA)

■ 세일즈포스, 슬랙의 생성 AI 기능 업그레이드. 슬랙 AI의 지원 언어를 늘리고 더 많은 데이터 소스와 연동할 계획

■ 시스코, AI 기반 데이터 센터에 적용될 수 있는 신규 보안 아키텍쳐 기반 Cisco Hypershield 공개

■ Stability AI, CEO 사임 후 약 10% 인력 조정을 비롯한 구조 조정 계획 보도

■ 허깅페이스, 오픈소스 대화형 AI HuggingChat의 iOS 앱 출시

■ 생성 AI 스타트업 Reka와 오라클 파트너십 발표. Reka는 OCI 인프라 활용. 또한 멀티모달 모델을 오라클 클라우드 마켓플레이스에서 제공

감사합니다.

아직 학습이 진행 중인 메타 라마-3 400B+ 모델은 Claude 3 Opus 및 GPT 4 터보와 유사한 벤치마크 기록

(자료: Jim Fan X 포스팅)

[삼성 이영진] 글로벌 SW 기업 주요 일정(현지시간)

변동/확정 부분

■ 4월 4주 차
SAP(SAP DE) - 4/22
메타 플랫폼스(META) - 4/24
IBM(IBM) - 4/24
서비스나우(NOW) - 4/24
마이크로소프트(MSFT) - 4/25
알파벳(GOOGL) - 4/25
아틀라시안(TEAM) - 4/25

■ 5월 1주 차
아마존(AMZN) - 4/30
허브스팟(HUBS) - 5/1(E)
애플(AAPL) - 5/2
포티넷(FTNT) - 5/2
클라우드플레어(NET) - 5/2

■ 5월 2주 차
서비스나우 Knowledge - 5/7~
팔란티어 테크놀로지스(PLTR) - 5/6
데이터도그(DDOG) - 5/7 (개장 전)
트레이드 데스크(TTD) - 5/8
유니티 소프트웨어(U) - 5/9

■ 5월 3주 차
구글 I/O - 5/14~
다이나트레이스(DT) - 5/15(E) (개장 전)

■ 5월 4주 차
마이크로소프트 Build - 5/21~
인튜이트(INTU) - 5/21(E)
팔로알토 네트웍스(PANW) - 5/22(E)
스노우플레이크(SNOW) - 5/22(E)
워크데이(WDAY) - 5/23(E)

■ 5월 5주 차
세일즈포스(CRM) - 5/29(E)
크라우드 스트라이크(CRWD) - 5/30(E)
지스케일러(ZS) - 5/30(E)
몽고DB(MDB) - 5/30(E)
옥타(OKTA) - 5/30(E)
엘라스틱(ESTC) - 5/30(E)

■ 6월 1주 차
스노우플레이크 Data Cloud Summit - 6/3~

■ 6월 2주 차
애플 WWDC - 6/10~
데이터브릭스 Data+AI 서밋 - 6/10~
오라클(ORCL) - 6/10(E)
어도비(ADBE) - 6/13

실적(E)은 잠정 일정으로 향후 변동 가능

[삼성 이영진] 글로벌 SW 헤드라인 (24/4/22)

■ 미 하원, 틱톡 강제 매각 수정 법안 통과. 내주 상원 표결 예정. 270일 내 틱톡의 미국 사업권을 매각하지 않는 경우 서비스 금지

■ 애플, 중국 정부 요청으로 중국 애플 앱스토어에서 메타의 왓츠앱과 쓰레드 삭제

■ 메타, 인도 선거 관련해 Meta AI 챗 봇의 일부 기능 제한

■ 메타, USC와 협력해 Transformer 아키텍쳐에 대항하는 신규 모델 Megalodon(메갈로돈) 관련 논문 공개. 언어 모델이 대량의 메모리 소요 없이 컨텍스트 윈도우 확장을 가능케 함

■ 허깅페이스, LLM의 의료지식을 평가하는 벤치마크 Open Medical-LLM 공개

■ 오픈AI,이미지 생성 AI 구버전인 DALL-E 2 서비스 종료

감사합니다.

세일즈포스-인포매티카 인수 논의, 계약 조건 이슈로 무산 보도 (자료: WSJ)

https://www.wsj.com/business/deals/salesforces-talks-to-buy-informatica-fizzle-4f6f111a

서비스나우(NOW US), AI 테마의 불쏘시개가 될 수 있을까?

안녕하세요 삼성증권 글로벌 SW 담당 이영진입니다.

AI 하드웨어 섹터 조정 이후 빅테크 클라우드 플레이어 실적(알파벳, 마이크로소프트)에 이목이 집중되고 있습니다. 생성 AI 수요 및 전략, Capex 지출 계획의 확인이 필요한데요, 긍정적 코멘트는 AI 테마가 다시 불붙는 데 중요한 연료가 될 것입니다.

AI 산업 밸류체인은 "인프라 - 클라우드 - 서비스"의 구성입니다. 앞단의 어마어마한 반도체 수요는 체감하고 있지만, 소프트웨어 기업이 제공하는 엔드 단 어플리케이션 및 서비스 분야의 수익화 확인은 지연되고 있는데요

수익화에 대한 기업 전략의 차이도 존재하겠지만, 지난 분기 실적까지 고려했을때 AI로 돈 버는 소프트웨어 기업은 찾아보기 힘들었습니다.

어도비 케이스를 살펴본다면, 지난해 3월 이미지 생성 AI Firefly 공개 이후 시장은 23년 말~24년 초 수익화 확인을 기대했으나, 현재는 24년 하반기로 기대감이 상당 부분 후퇴했습니다.

빅테크 클라우드 플레이어보다 하루 앞서 실적(한국 시간 25일 새벽)을 발표하는 서비스나우는 엔드단의 생성 AI 수요 및 수익화와 관련된 프록시 역할을 할 수 있습니다.

지난 분기에서 생성 AI 기능이 추가된 Now Assist(in Pro+)는 역대 제품 릴리즈 중 ACV 순증가에 가장 큰 영향을 미친 사례라고 코멘트했는데요, 2018년 출시한 Pro SKU보다도 빠른 속도입니다.

생성 AI의 확실한 생산성 향상 효과에 따라 고객의 가격 민감도는 감소하고, 빠른 채택(세일즈 사이클 축소)이 지속되고 있습니다.

물론 전체 매출에 미치는 영향은 제한적일 것입니다. 하지만 기업 고객의 생성 AI 수요를 확실하게 확인할 수 있다면, 시장에 약간의 안도감을 부여할 수 있습니다.

현재 12M FWD PER은 51배(Factset)로 23년 5월 엔비디아 실적 발표에 따른 리레이팅 이후 평균 수준입니다.

실적 발표 후 업데이트해 드리겠습니다.

(참고) 1Q24 컨센서스(Factset)
: 매출 25.88억 달러(+23.5% YoY)
: cRPO 84억 달러(+21% YoY)

(2024/4/22 공표자료)

[삼성 이영진] 글로벌 SW 헤드라인 (24/4/23)

■ 메타, 퀘스트의 호라이즌 OS를 서드파티 기업에게 개방. Asus, Lenovo, Xbox가 OS 활용 하드웨어 개발 예정

■ 세일즈포스-인포메티카 인수 논의 계약 조건 이슈로 무산 보도. 이후 인포메티카는 기업 매각 부정

■ 마이크로소프트, 메타의 인스라스트럭쳐 사업부 임원 영입. AI 슈퍼컴퓨팅 팀으로 합류

■ 마이크로소프트, Cognizant와 기업 고객 생성 AI 도입 가속화를 위한 파트너십

■ 일본 반독점 당국, 구글이 타겟팅 검색 광고 산업에서 야후 재팬의 경쟁을 저해했다고 판단

■ 구글, 이스라엘 계약 관련 시위 이후 추가로 20여명 해고 보도

■ 애플, 컴퓨터 비저닝 관련 프랑스 AI 스타트업 Datakalab 인수

■ 아마존, 캘리포니아에서 드론 배송 사업 종료

■ 상업용 부동산 플랫폼 기업 CoStar, 가상 3D 이미지 구축 기업 Matterport를 주 당 $5.5(현금+주식)에 인수. 딜 규모 16억 달러

■ 오라클의 국방부 클라우드 리전 3곳이 DISA 레벨 6(IL6) 인가를 획득해 기밀 등급 워크로드 호스팅 가능

■ 틱톡, 영국에서 중고 명품 커머스로 사업 확장

■ 어도비, 8배 영상 업스케일링이 가능한 VideoGiganGAN 공개

■ HR 소프트웨어 Rippling, Coatue 주도 펀딩에서 135억 달러 밸류로 2억 달러 조달

■ Sakana AI, 일본어 프롬프트에 특화된 Text to Image 모델 EvoSDXL-JP 공개

감사합니다.

SAP 1Q24 실적 리뷰 - 무난 그 자체

안녕하세요 삼성증권 글로벌 SW 담당 이영진입니다.

SAP이 글로벌 SW 기업 중 먼저 분기 실적을 발표했습니다. 대부분 컨센서스에 부합하는 긍정적 실적이었는데요

클라우드 매출은 4Q23과 동일하게 +25% 성장했는데, 주력 사업인 Cloud ERP Suite가 32% 성장하며 9개 분기 연속 30%대 성장을 달성했습니다.

특히 클라우드 백로그(CCB) 성장률 +28%로 지난 분기보다 1%p 가속화된 역대 최고 수준을 기록했다는 점도 주목할 부분입니다.

AI 챗봇 Joule를 비롯한 AI 기능에 대한 고객의 높은 관심과 함께 수익화(소비량 기반 or 프리미엄 오퍼링)도 진행 중입니다.

기존 온 프레미스 고객 타겟의 RISE with SAP과 신규 고객 타겟의 GROW with SAP 프로그램 호조도 크로스셀링 기회 확대로 이어지고 있습니다.

개별 기업 관점에서 지난 분기 발표한 구조조정이 아직 진행 중입니다. 25년 초 마무리 예정인데요, 24년 헤드카운트가 23년과 유사하다고 전망한 만큼 향후 관련 효과를 확인할 필요가 있습니다.

AI 관련 추가 업데이트는 제한적이었습니다. 6/3일 진행될 Sapphire 이벤트로 이연된 측면이 존재합니다.

SAP의 12M FWD PER은 31.2배(Factset)로 최근 3년 평균 21.5배를 상회하고 있습니다. 대형 SW 기업인 오라클(18.8배)와 세일즈포스(27.2배)보다도 프리미엄인데요. 턴어라운드 기대감은 유효하나, 적정 프리미엄 수준에 대해서는 다시 생각해볼 필요가 있습니다.

전체 SW 산업 관점에서 엔터프라이스 SW 수요 및 AI 도입 측면의 기대감을 재확인할 수 있었으나, 기존 기대 대비 추가 업사이드를 부여할 정도의 실적은 아니였다는 점은 다소 아쉬운 부분입니다.

■ 1Q24 실적 요약(컨센서스: Factset, 성장률 CC 기준)

- 매출 80.4억 유로(+9%, 컨센 80.2억 유로)
- 클라우드 매출 39.3억 유로(+25%, 컨센 39.3억 유로), Cloud ERP +32%
- 클라우드 백로그(CCB) 141.8억 유로(+28%)
- Non IFRS 영업이익 15.3억 유로(컨센 17억 유로)
- 조정 EPS 0.81 유로(컨센 0.98 유로), 구조조정 관련 22억 유로 충당금 인식
- 24년 가이던스는 기존 수준 유지

(2024/4/23 공표자료)

마이크로소프트, 소형 언어모델 phi-3-mini 논문 공개

: 파라미터 3.8B. Mixtral 8x7B 및 GPT-3.5와 유사한 성능

https://arxiv.org/pdf/2404.14219.pdf

틱톡 강제 매각법이 오라클에 미치는 영향

안녕하세요 삼성증권 글로벌 SW 담당 이영진입니다.

틱톡 강제 매각법 수정안이 미 하원 통과 후 상원 표결 및 바이든 대통령 서명을 앞두고 있습니다.

정치적 배경을 제외하고 메타, 알파벳, 스냅 등 SNS 기업이 수혜 기업으로 꼽히고 있습니다. 1.7억 틱톡 유저가 대안을 찾아 나설 수 있다는 기대감입니다. 

매각 시 인수 기업은 누가 있을까요? 일종의 딜레마인 것이 틱톡의 규모를 고려하면 빅테크가 아니면 인수하기 쉽지 않아보이는데, 반대로 빅테크는 반독점법 대상이 될 가능성이 높습니다. 앞서 언급된 수혜 기업이 인수할 가능성은 극히 낮다고 볼 수 있습니다. 

우선 2020년 트럼프 전 대통령이 유사 법안을 추진했을 당시 인수 기업으로 거론되었던 마이크로소프트와 오라클이 유력 인수 후보로 떠올랐습니다. 그 외에 므누신 전 장관, 바비 코틱 전 액티비전 CEO 등이 투자자를 모아 인수하는 방법을 구상하고 있다는 보도도 있었습니다.

여기서 오라클 입장은 다소 복잡합니다. 틱톡은 미국 정부 문제 제기에 따라 미국 유저 데이터를 오라클 서버로 이전하는 방안(프로젝트 텍사스)을 실행했고, 틱톡은 OCI 주요 고객 중 하나가 되었습니다.

두 가지 시나리오 중 매각 시나리오에서는 기존 클라우드 계약이 유지될 가능성이 존재하나, 금지 시나리오에서는 오라클 클라우드 인프라 사업에 부정적 영향을 미칠 수 있습니다.

정확한 틱톡향 매출이 공개되지는 않았으나 추정되는 규모(연 6억 달러)는 오라클 전체 매출의 약 1% 수준입니다. 작아 보이지만 틱톡의 성장성을 고려하면 기분이 좋지는 않은 이슈입니다. 2022년 이후 OCI 고성장에 틱톡의 영향도 존재한다고 분석되고 있습니다. 

오라클은 그동안 틱톡 금지법 관련 로비 활동에서 한발 물러선 모습을 보여줬으나, 최근 상원 보좌관 미팅을 진행했다는 보도가 나오고 있습니다. 대책을 생각하지 않을 수 없는 것이지요

차라리 내가 품는다는 마인드로 틱톡을 인수하면 기대할 수 있는 효과가 있을까요? 사실 마이크로소프트 인수 케이스보다 시너지는 제한적이라고 판단합니다. B2C 침투 의지를 지속 보여왔고, 게이밍이나 광고 사업을 영위하는 마이크로소프트와 달리 오라클은 B2B에 치중된 포트폴리오를 가지고 있기 때문입니다.

다만 패밀리 비즈니스로 확장해보면 의외의 연결 고리가 있을 수 있습니다. 최근 파라마운트와 합병을 시도하고 있는 스카이댄스 미디어의 창립자이자 CEO 데이비드 앨리슨은 오라클 창립자/CEO 래리 앨리슨의 아들입니다. 

틱톡 측이 법안 통과 시 표현의 자유를 규정한 수정헌법 1조 침해를 이유로 항소할 의지를 표명한 만큼 향후 이벤트 흐름을 지켜볼 필요가 있습니다.

(2024/4/23 공표자료)

어도비 Max London에서 생성 AI 업데이트

: 신규 이미지 생성 AI 모델 Firefly 3 발표. 이미지 70억 장 생성
: 포토샵에 Generate Image 및 Generative Fill 포함 기능 개선
: Adobe Express 모바일 앱에 Firefly 접목

https://blog.adobe.com/en/publish/2024/04/23/adobe-charts-future-of-creativity-ai-max-london

[삼성 이영진] 글로벌 SW 헤드라인 (24/4/24)

■ 마이크로소프트, 소형 언어모델 phi-3 관련 논문 공개

■ 마이크로소프트, 코카콜라와 클라우드 및 AI 관련 5년간 11억 달러 규모 파트너십 체결

■ 오픈AI, API 고객 지원을 위한 엔터프라이즈 단계 기능 확장. 보안, 관리, 비용 관련 신규 툴 도입

■ AWS Bedrock, 생성 AI 관련 기능 업데이트
1) 개발자 커스텀 모델 도입 지원(Custom Model Import)
2) 모델 평가 기능을 통한 최적 모델 선택 지원
3) Titan 이미지 생성 AI 모델 공식 출시 및 RAG 활용을 위한 Titan Text Embedding V2 출시 예정
4) 모델 안정성을 위한 Guardrails 기능

■ 아마존, 미국 내 프라임 멤버쉽 대상 무제한 식료품 배달 구독 신규 런칭

■ 어도비 Max London에서 신규 생성 AI 업데이트
: 신규 이미지 생성 AI 모델 Firefly 3 발표. 이미지 70억 장 생성
: 포토샵에 Generate Image 및 Generative Fill 포함 기능 개선
: Adobe Express 모바일 앱에 Firefly 접목

■ 구글, 네덜란드 데이터 센터 구축에 6.4억 달러 투자

■ IBM, 클라우드 인프라 및 보안 관리 솔루션 기업 HashiCorp 인수 논의 보도

■ Perplexity AI, 신규 펀딩 라운드에서 10억 달러 밸류로 0.63억 달러 조달. 1월 5.2억 달러에서 급등

감사합니다.

어도비 Firefly Image 3 공개 - MAX London 주요 업데이트

안녕하세요 삼성증권 글로벌 SW 담당 이영진입니다.

어도비가 MAX London 행사에서 크리에이티브 클라우드 내 생성 AI 관련 업데이트를 진행했습니다. 주요 내용을 꼽아보면 다음과 같습니다.

1) 신규 이미지 생성 AI 모델 Firefly Image 3 발표

2) 포토샵 생성 AI 기능 강화. 레퍼런스 활용 Generative Fill, 배경 생성, 유사 이미지 생성 등

3) Adobe Express 모바일 앱 내 Firefly 통합 강화

가장 이목을 끄는 것은 Firefly Image 3 모델입니다. 23년 3월 Firefly Image 1, 10월 Image 2 모델 공개 이후 지속적으로 버전업을 진행하고 있는데요.

어도비는 Firefly Image 3 모델의 이미지 퀄리티와 유저 컨트롤 측면 개선을 강조하며, 현존하는 가장 강력한 이미지 생성 AI 모델이라 주장했습니다.

미드저니 등 경쟁 모델에 비해 부족하다는 평가를 받았던 실사 이미지 생성 개선 등을 달성했는데요, 실제 생성된 결과물과 포토샵 적용 기능을 통해 AI의 빠른 발전을 체감할 수 있습니다.

신규 모델을 포함해 전략의 실행은 긍정적 소식이지만, Firefly 이미지 생성량 증가 둔화는 아쉬운 포인트입니다. 월간 이미지 생성량은 23년 9월~10월 10억 개 순증 달성 이후 감소세를 보이고 있습니다. 이번에 공개된 숫자로 역산한 24년 3월 대비 5억 개 증가는 초기 Firefly 공개 당시 수준에 불과합니다.

이미지 생성량이 수익화로 직결되는 것은 아니지만, 생태계 확장을 우선하는 전략의 가늠자라는 측면에서는 추이를 지켜볼 필요가 있습니다.

긍정적 이벤트와 SW 전반의 반등에도 상대적으로 아쉬운 흐름을 보인 이유라고 볼수 있네요 

최근 프리미어 프로 내 영상 생성 AI 기능(서드파티 모델 포함) 추가와 포토샵 생성 AI 기능 강화 전략의 방향성은 모두 보유 편집툴과 생태계를 레버리지 삼는 전략입니다.

새로운 것은 아닙니다. 초기 생성 AI 산업 대두에서 어도비의 주가 상승을 지지한 강점이기도 합니다. 이러한 강점이 다시 빛을 발하기 위해서는 수익 화실현과 함께 더 강력한 제품이 필요하다고 판단합니다.

(참고) 어도비 Firefly 생성 이미지 갯수 추이

23년 6월(F2Q23 실적): 5억 개
23년 7월: 10억 개
23년 9월(F3Q23 실적): 20억 개
23년 10월: 30억 개
23년 12월(F4Q23 실적): 45억 개
24년 3월(F1Q24 실적): 65억 개
24년 4월: 70억 개

(2024/4/24 공표자료)

스노우플레이크, 엔터프라이즈 워크로드에 최적화된 오픈소스 LLM Arctic 공개

: MoE 형태. 파라미터 4,800억 개. 활성 파라미터 170억 개
: 낮은 학습 비용과 학습 및 추론 효율성 강조. 학습 토큰 3.5조 개

https://www.snowflake.com/blog/arctic-open-efficient-foundation-language-models-snowflake/

[삼성 이영진] 메타 플랫폼스(META) 1Q24 실적 요약

■ 1Q24 실적
: 매출 364.6억 달러(+27%)
vs 컨센 361.4억 달러, 가이던스 345~370억 달러
: EPS (GAAP) $4.71
vs 컨센 $4.32
: CAPEX 67.2억 달러
vs 컨센 82.1억 달러

■ 2Q24 및 FY24 가이던스
: 2Q24 매출 365~390억 달러
vs 컨센 382.5억 달러
: FY24 비용 960~990억 달러 (기존 940~990억 달러)
: FY24 CAPEX 350~400억 달러 (기존 300~370억 달러)

https://s21.q4cdn.com/399680738/files/doc_news/Meta-Reports-First-Quarter-2024-Results-2024.pdf

감사합니다.

[삼성 이영진] 서비스나우(NOW) 1Q24 실적 요약

■ 1Q24 실적
: 매출 26.03억 달러(+24%)
vs 컨센 25.88억 달러
: 구독 매출 25.23억 달러(+25%)
vs 컨센 25.14억 달러, 가이던스 25.1~25.15억 달러
: cRPO 84.5억 달러(+21%)
vs 컨센 84.1억 달러, 가이던스 +20%
EPS $3.41
vs 컨센 $3.14

■ 2Q24 가이던스
: 구독 매출 25.25~25.3억 달러(+22%)
vs 컨센 25.33억 달러
: cRPO 성장률 +20.5%
vs 컨센 +20%

https://www.servicenow.com/company/media/press-room/first-quarter-2024-financial-results.html

감사합니다.

[삼성 이영진] 글로벌 SW 헤드라인 (24/4/25)

■ 스노우플레이크, 엔터프라이즈 워크로드에 최적화된 신규 오픈소스 LLM Arctic 공개

■ 영국 CMA, 아마존 및 마이크로소프트의 생성 AI 스타트업 투자에 대한 조사 예정

■ 구글, 올해 말로 예정된 크롬 서드파티 쿠키 지원 중단 타임라인 연기. 산업, 규제기관, 개발자 등 외부 요인 언급

■ 메타, 레이밴 선글라스에 멀티모달 AI 기능 추가

■ 오라클, 본사를 내쉬빌로 이전 계획. 헬스케어 기업과의 협력 강화 일환

■ 틱톡 강제 매각법 미 상원 통과 및 바이든 대통령 서명

■ 오픈AI, 모더나와 mRNA 의약품 개발에 AI 활용을 위한 파트너십

■ IBM의 HashiCorp 인수 규모는 64억 달러

감사합니다.