마이어드밴텍 가입

마이어드밴텍은 어드밴텍 고객을 위한 맞춤 포털 사이트입니다. 어드밴텍의 멤버가 되시면, 최근 제품정보, 웨비나 초대, 최신 할인/사은품 정보를 구독하실 수 있습니다.

바로 회원가입하시고 365일 언제라도 접속 가능한 맞춤 최신 정보를 확인하세요.

GenAI와 LLM을 활용한 제조업 의사결정 지원 향상

2024-08-26
NVIDIA AI Enterprise
Leveraging GenAI and LLMs for Enhanced Decision Support in Manufacturing

배경

전자 제조업은 복잡한 자재 관리와 생산 과정을 포함하며, 여러 정보 시스템과 많은 인력 자원을 필요로 합니다. LLM AI를 의사결정 지원 시스템에 통합하면 효율성 향상, 제품 품질 개선, 고객 만족도 향상, 그리고 더 전략적인 의사결정이 가능합니다. 데이터 분석 및 인사이트 제공, 공정 최적화, 고객 지원 및 직원 교육 등 여러 면에서 도움이 되며, 궁극적으로 전자 제조업체의 전반적인 성공과 경쟁력에 기여합니다.

도전과제

LLM AI 기술을 의사결정 지원 시스템에 도입하는 데에는 몇 가지 장애물이 있습니다:

기술적 복잡성: AI 시스템을 배포하려면 LLM, IT 인프라 및 관련 소프트웨어 기술에 대한 깊은 지식이 필요하므로 상당한 기술 전문성이 요구됩니다.

엣지 프라이버시: 안정성과 보안을 이유로 고객들은 로컬 전용 네트워크 사용을 선호합니다. 이는 클라우드 기반 AI 애플리케이션을 적용할 때 우려를 일으킬 수 있습니다.

도전적인 환경: 제조 현장에서는 적절한 공기 조절, 서버 랙 공간, 전용 전원 공급원이 부족한 경우가 많아 상업용 AI 서버에 적합하지 않은 경우가 많습니다.

솔루션

이러한 도전 과제를 극복하기 위해 고객은 AIR-520 70B LLM 미세 조정 솔루션을 선택했습니다. 이 솔루션은 다음과 같은 구성 요소를 포함합니다:

AIR-520 엣지 AI 서버 시스템과 NVIDIA RTX 6000 Ada GPU 카드: AMD EPYC 7003 시리즈 프로세서와 두 개의 NVIDIA RTX 6000 Ada GPU 카드를 장착한 이 서버급 시스템은 고성능 계산 능력을 제공합니다. IEC-61000 인증을 받았으며, 산업용 냉각 설계를 갖추고 있어 도전적인 환경에서도 요구 사항을 충족합니다.

aiDAPTIV+ ai100 AI SSD: AIR-520은 ai100 SSD를 장착하고 있으며, 4TB의 저장 용량과 특허 받은 미들웨어를 제공하여, 두 개의 GPU와 표준 DRAM만으로도 대형 모델을 효율적으로 훈련시킬 수 있습니다. 이를 통해 플랫폼은 로컬 전용 네트워크 내에서 대용량 데이터를 안전하고 효과적으로 처리할 수 있습니다.

NVIDIA AI Enterprise: 추론 애플리케이션 개발을 위한 포괄적인 AI 개발 툴 모음으로, 고객이 NVIDIA AI 전문가의 직접적인 기술 지원을 받으며 빠르게 추론 애플리케이션을 개발할 수 있도록 돕습니다. 4o mini

Leveraging GenAI and LLMs for Enhanced Decision Support in Manufacturing

혜택

  • 실시간 상태 및 분석: LLM AI는 대규모 데이터를 빠르게 처리하고 분석하여 실시간 통찰력을 제공하며, 이는 시기적절한 의사결정과 미래 트렌드 예측에 도움이 됩니다.
  • 민감한 데이터는 엣지에서 처리: 모델 훈련과 추론은 AIR-520 시스템에서 실행되며, 모든 데이터 소스는 동일한 인트라넷에 위치하여 보안 문제를 방지합니다.
  • 신뢰할 수 있는 24/7 실행: AIR-520 시스템은 타워 워크스테이션으로, 현장의 제한된 공간에 적합합니다. 산업용 냉각 설계는 최적의 공조 장치가 없는 환경에서도 안정적인 운영을 보장합니다.