BTC $64,040.78 -1.34%
ETH $1,793.68 -1.48%
BNB $588.55 -0.77%
XRP $0.9797 +0.98%
SOL $74.11 +0.57%
TRX $0.3095 +1.33%
DOGE $0.0591 -0.35%
ADA $0.1527 -1.19%
BCH $207.53 -1.86%
LINK $9.11 -1.91%
HYPE $68.59 -1.68%
AAVE $110.73 -2.88%
SUI $0.7221 -2.02%
XLM $0.1402 -0.14%
ZEC $932.15 -1.45%
AAPL $350.71 -0.42%
AMZN $259.07 +0.05%
GOOGL $282.76 -0.25%
MSFT $505.66 -2.09%
META $618.53 -0.65%
NVDA $160.12 +1.44%
TSLA $382.91 +0.45%
SNDK $816.20 -0.83%
INTC $55.38 +0.47%
SPCX $142.24 +2.49%
MU $725.69 -0.94%
AMD $511.69 -0.63%
BTC $64,040.78 -1.34%
ETH $1,793.68 -1.48%
BNB $588.55 -0.77%
XRP $0.9797 +0.98%
SOL $74.11 +0.57%
TRX $0.3095 +1.33%
DOGE $0.0591 -0.35%
ADA $0.1527 -1.19%
BCH $207.53 -1.86%
LINK $9.11 -1.91%
HYPE $68.59 -1.68%
AAVE $110.73 -2.88%
SUI $0.7221 -2.02%
XLM $0.1402 -0.14%
ZEC $932.15 -1.45%
AAPL $350.71 -0.42%
AMZN $259.07 +0.05%
GOOGL $282.76 -0.25%
MSFT $505.66 -2.09%
META $618.53 -0.65%
NVDA $160.12 +1.44%
TSLA $382.91 +0.45%
SNDK $816.20 -0.83%
INTC $55.38 +0.47%
SPCX $142.24 +2.49%
MU $725.69 -0.94%
AMD $511.69 -0.63%

머스크의 AI 회사 xAI가 Grok-1 소스 코드를 공식 공개했습니다

2024-03-18 08:51:03

ChainCatcher 메시지, 머스크의 인공지능 회사 xAI가 3140억 매개변수 혼합 전문가 모델 Grok-1의 가중치와 아키텍처를 공개한다고 발표했습니다. Grok-1은 xAI가 처음부터 훈련한 대형 언어 모델로, 혼합 전문가 모델 아키텍처를 채택하고 있으며, 주어진 토큰에서 25%의 가중치가 활성 상태입니다. 이 모델의 기본 모델 가중치와 네트워크 아키텍처는 현재 Apache 2.0 라이센스에 따라 공개되었습니다.

전해진 바에 따르면, Grok-1의 사전 훈련 단계는 2023년 10월에 종료되었으며, 현재 발표된 것은 원래 기본 모델 체크포인트로, 특정 애플리케이션에 대해 미세 조정되지 않았습니다.

체인캐처(ChainCatcher)는 독자들에게 블록체인을 이성적으로 바라보고, 리스크 인식을 실제로 향상시키며, 다양한 가상 토큰 발행 및 조작에 경계해야 함을 상기시킵니다. 사이트 내 모든 콘텐츠는 시장 정보나 관련 당사자의 의견일 뿐이며 어떠한 형태의 투자 조언도 제공하지 않습니다. 만약 사이트 내에서 민감한 정보를 발견하면 를 클릭하여 신속하게 처리할 것입니다.

app_icon
ChainCatcher Building the Web3 world with innovations.