nvidia๊ฐ€ ๊ณ ์„ฑ๋Šฅ AI API๋ฅผ ๋ฌด๋ฃŒ

Try NVIDIA NIM APIs

NVIDIA๊ฐ€ ์ œ๊ณตํ•˜๋Š” ๊ณต์‹ ํ˜ธ์ŠคํŒ… API(https://integrate.api.nvidia.com/v1)๋ฅผ ๋ฐ”๋กœ ์‚ฌ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

  1. https://build.nvidia.com/nvidia/nemotron-3-ultra-550b-a55b ํŽ˜์ด์ง€๋กœ ์ด๋™ํ•ฉ๋‹ˆ๋‹ค.
  2. NVIDIA ๊ณ„์ •์œผ๋กœ ๋กœ๊ทธ์ธํ•˜์„ธ์š” (์—†์œผ๋ฉด ํšŒ์›๊ฐ€์ž…).
  3. ํŽ˜์ด์ง€์—์„œ “Generate API Key” ๋ฒ„ํŠผ์„ ํด๋ฆญํ•ฉ๋‹ˆ๋‹ค.
  4. API ํ‚ค๊ฐ€ ์ƒ์„ฑ๋˜๋ฉด ๋ณต์‚ฌํ•˜์„ธ์š”. (ํ™˜๊ฒฝ ๋ณ€์ˆ˜๋กœ $NVIDIA_API_KEY์ฒ˜๋Ÿผ ์‚ฌ์šฉ)
  5. Open WebUI์— NVIDIA API ์ถ”๊ฐ€ ๋ฐฉ๋ฒ•

    1. Open WebUI์— ๊ด€๋ฆฌ์ž(Admin) ๊ถŒํ•œ์œผ๋กœ ๋กœ๊ทธ์ธํ•˜์„ธ์š”.
    2. Settings (์„ค์ •) โ†’ Connections (๋˜๋Š” API Connections) ๋กœ ์ด๋™.
    3. OpenAI API ์„น์…˜์—์„œ + (์ถ”๊ฐ€) ๋ฒ„ํŠผ ํด๋ฆญ.
    4. ์•„๋ž˜์ฒ˜๋Ÿผ ์ž…๋ ฅ:
      • Base URL: https://integrate.api.nvidia.com/v1
      • API Key: NVIDIA์—์„œ ๋ฐœ๊ธ‰๋ฐ›์€ $NVIDIA_API_KEY (build.nvidia.com์—์„œ ์ƒ์„ฑํ•œ ํ‚ค)
      • Name (์„ ํƒ): NVIDIA Nemotron ๊ฐ™์€ ์ด๋ฆ„์œผ๋กœ ๊ตฌ๋ถ„
    5. ์ €์žฅ ํ›„, ์ฑ„ํŒ… ํ™”๋ฉด์—์„œ ๋ชจ๋ธ ๋ชฉ๋ก์„ ์ƒˆ๋กœ๊ณ ์นจํ•˜๋ฉด nvidia/nemotron-3-ultra-550b-a55b ๋ชจ๋ธ์ด ๋‚˜ํƒ€๋‚ฉ๋‹ˆ๋‹ค.

    ์ฃผ์˜์‚ฌํ•ญ

    • NVIDIA์˜ hosted API๋Š” ์‚ฌ์šฉ๋Ÿ‰ ์ œํ•œ์ด ์žˆ์„ ์ˆ˜ ์žˆ์–ด์š” (๋ฌด๋ฃŒ ํ‹ฐ์–ด ๊ธฐ์ค€).
    • Reasoning ๊ธฐ๋Šฅ(์ƒ๊ฐ ๊ณผ์ • ํ‘œ์‹œ)์„ ์“ฐ๋ ค๋ฉด ์š”์ฒญ ์‹œ extra_body์— ์˜ต์…˜์„ ์ถ”๊ฐ€ํ•ด์•ผ ํ•  ์ˆ˜ ์žˆ์ง€๋งŒ, Open WebUI ๊ธฐ๋ณธ ์ฑ„ํŒ…์—์„œ๋Š” ๋Œ€๋ถ€๋ถ„ ์ž˜ ๋™์ž‘ํ•ฉ๋‹ˆ๋‹ค.
    • ๋ชจ๋ธ ์ด๋ฆ„์€ ์ •ํ™•ํžˆ nvidia/nemotron-3-ultra-550b-a55b๋กœ ์„ ํƒํ•˜์„ธ์š”.

    ์ด ๋ฐฉ๋ฒ•์œผ๋กœ ๋Œ€๋ถ€๋ถ„์˜ ์‚ฌ์šฉ์ž๋“ค์ด NVIDIA ๋ชจ๋ธ๋“ค์„ Open WebUI์—์„œ ํŽธํ•˜๊ฒŒ ์“ฐ๊ณ  ์žˆ์–ด์š”.