AI의 시대네요.
매년 열리는 HPE Discovery 행사에서도 AI 서비스 소개에 시간을 많이 할당하였네요
LLM ( Large Language Models) List
LLM Name | Release Date | 개발 | 파라미터 수[b] |
BERT | 2018년 | 구글 | 340 million[2] |
GPT-2 | 2019년 | OpenAI | 1.5 billion[5] |
XLNet | 2019년 | ~340 million[4] | |
GPT-3 | 2020년 | OpenAI | 175 billion[9] |
GPT-Neo | 2021년 3월 | EleutherAI | 2.7 billion[10] |
GPT-J | 2021년 6월 | EleutherAI | 6 billion[13] |
Megatron-Turing NLG | 2021년 10월 | Microsoft and Nvidia | 530 billion[15] |
Claude[17] | 2021년 12월 | Anthropic | 52 billion[18] |
Ernie 3.0 Titan | 2021년 12월 | Baidu | 260 billion[16] |
GLaM (Generalist Language Model) | 2021년 12월 | 1.2 trillion[19] | |
Gopher | 2021년 12월 | DeepMind | 280 billion[20] |
LaMDA | 2022년 1월 | 137 billion[22] | |
GPT-NeoX | 2022년 2월 | EleutherAI | 20 billion[23] |
Chinchilla | 2022년 3월 | DeepMind | 70 billion[24] |
PaLM (Pathways Language Model) | 2022년 4월 | 540 billion[25] | |
OPT (Open Pretrained Transformer) | 2022년 5월 | Meta | 175 billion[26] |
Minerva | 2022년 6월 | 540 billion[29] | |
YaLM 100B | 2022년 6월 | Yandex | 100 billion[28] |
BLOOM | 2022년 7월 | Large collaboration | 175 billion[30] |
AlexaTM (Teacher Models) | 2022년 11월 | Amazon | 20 billion[33] |
Galactica | 2022년 11월 | Meta | 120 billion |
LLaMA (Large Language Model Meta AI) | 2023년 2월 | Meta | 65 billion[36] |
BloombergGPT | 2023년 3월 | Bloomberg L.P. | 50 billion |
Cerebras-GPT | 2023년 3월 | Cerebras | 13 billion[38] |
Falcon | 2023년 3월 | Technology Innovation Institute | 40 billion[39] |
GPT-4 | 2023년 3월 | OpenAI | 대략 1 trillion |
OpenAssistant[42] | 2023년 3월 | LAION | 17 billion |
PanGu-Σ | 2023년 3월 | Huawei | 1.085 trillion |
PaLM 2 (Pathways Language Model 2) | 2023년 5월 | 340 billion[43] |
첨들어본 LLM 이 대부분이네요. 여러곳에서 AI 개발을 하고 있습니다.
LLM(대형 언어 모델)용 HPE GreenLake 내용과 장점
-HPE는 기존 슈퍼컴퓨터의 성능과 클라우드의 민첩성 및 사용 편의성을 결합하여 새로운 차원의 슈퍼컴퓨팅 클라우드를 시장에 출시가능
-필요에 따라 최첨단 슈퍼컴퓨팅 기능에 액세스(인적, 재정적, 기술적으로 제한된 자원과 같은 장벽 극복)
-클라우드 모델을 사용하여 시간 및 비즈니스에 중요한 R&D 및 AI 이니셔티브를 슈퍼컴퓨팅 속도로 가속화(시간과 같은 제한 요소를 극복하고 Cray 프로그래밍 환경과 같은 IP를 통해 최적화 추진)
- 민감한 데이터가 포함된 주요 R&D 설계 및 AI 모델과 같은 보안이 중요(네트워크에서 트래픽이 겹치지 않는 멀티 테넌시, 노드 수준의 보안 등).
- HPE의 이 새로운 서비스는 업계 최고의 슈퍼컴퓨팅 기술 및 서비스와 HPE GreenLake 플랫폼의 장점을 결합하여 고객이 지속 가능성 이니셔티브를 더욱 강화할 수 있도록 지원가능함.
- HPE의 세계 최고 슈퍼컴퓨터와 AI 소프트웨어에 즉시 액세스할 수 있는 멀티 테넌트 클라우드 서비스를 제공하여 AI 모델을 빠르게 훈련, 확장, 배포할 수 있습니다.
LLM용 HPE GreenLake에 대한 자세한 내용은 https://www.hpe.com/us/en/hpe-greenlake-for-large-언어-models.html을 참조