범용 언어 모델 이해

범용 언어 모델을 사용하는 어시스턴트는 여러 언어의 공유 언어 특성 및 규칙 세트를 시작점으로 적용합니다. 그런 다음 사용자가 추가하는 훈련 데이터를 통해 학습합니다.

범용 언어 분류기는 어시스턴트당 하나의 언어에 맞게 조정될 수 있습니다. 단일 어시스턴트 내에서 여러 언어를 지원하는 데 사용할 수 없습니다. 그러나 하나의 어시스턴트에서 범용 언어 모델을 사용하여 러시아어와 같은 하나의 언어를 지원하고 다른 어시스턴트에서 다른 언어(예: 힌디어)를 지원할 수 있습니다. 해당 키는 언어의 고유한 구문 및 문법적 규칙에 대한 모델을 학습하기 위해 대상 언어에 충분한 교육 예제 또는 의사 사용자 예제를 추가하는 것입니다.

사용 가능한 모델이 없고 기존 모델로는 충분하지 않을 만큼 고유한 언어로 대화를 만들고자 할 때는 범용 언어 모델을 사용하세요.

대화형 플로우를 디자인하기 위해 일반 단계를 수행하는 동안에는 스킬 지원을 원하는 언어에 대해 범용 언어 모델을 학습합니다. 범용 모델이 구성되는 대상 언어로 작성된 교육 데이터를 추가하는 것입니다.

범용 언어 모델의 기능 지원에 대한 자세한 정보는 지원되는 언어의 내용을 참조하십시오.

통합 고려사항

통합을 위해 다음 팁을 기억해 두십시오.

• 웹 대화: 웹 대화에는 대상 언어를 반영하도록 사용자 정의할 수 있는 일부 하드코딩된 문자열이 있습니다. 자세한 정보는 웹 대화에서 글로벌 대상 지원 을 참조하십시오.
• 전화 통합: 유니버설 언어 모델을 사용하는 어시스턴트를 배포하려면 사용 중인 언어를 이해할 수 있는 사용자 지정 Speech 서비스 언어 모델에 연결해야 합니다. 지원되는 언어 모델에 대한 자세한 정보는 Speech to Text 및 Text to Speech 문서를 참조하십시오.
• 검색 통합: 단일 언어를 전문으로 하는 어시스턴트를 빌드하는 경우 해당 언어로 작성된 데이터 콜렉션에 연결해야 합니다. Discovery에서 지원하는 언어에 대한 자세한 정보는 언어 지원을 참조하십시오.

지원되는 언어

IBM® watsonx™ Assistant 는 언어별로 다양한 수준의 개별 기능을 지원합니다. 다음 언어의 대화를 지원하도록 특별히 설계된 분류기 모델이 있습니다:

*러시아어와 같이 watsonx Assistant 에 전용 모델이 없는 언어로 대화를 지원하려면 유니버설을 사용하세요.

어시스턴트 언어 변경

어시스턴트가 작성된 후에는 해당 언어를 수정할 수 없습니다.

악센트 문자에 대한 작업

대화 환경에서는 사용자가 watsonx Assistant 서비스에서 악센트를 사용할 수도 있고 사용하지 않을 수도 있습니다. 이와 같이 악센트 버전의 단어 및 비악센트 버전의 단어는 인텐트 발견 및 엔티티 인식에 대해 동일하게 처리될 수 있습니다.

그러나 스페인어와 같은 일부 언어의 경우 일부 액센트는 엔티티의 의미를 변경할 수 있습니다. 따라서 엔티티 발견에 대해 원래 엔티티에 내재적으로 악센트가 있을 수 있지만 어시스턴트는 비악센트 버전의 동일한 엔티티를 일치시킬 수 있습니다. 단, 신뢰도 점수가 약간 낮아집니다.

예를 들어, 악센트가 있고 "barrer"(쓸다)라는 동사의 과거 시제에 해당하는 단어 "barrió"에 대해 어시스턴트는 단어 "barrio"(이웃)를 일치시킬 수도 있습니다. 단, 신뢰도가 약간 낮아집니다.

이 시스템은 정확히 일치하는 엔티티에 대해 가장 높은 신뢰도 점수를 제공합니다. 예를 들어 barrió 이 학습 세트에 있으면 barrio 이 감지되지 않고, barrió 이 학습 세트에 있으면 barrio 이 감지되지 않습니다.

적절한 문자와 악센트를 사용하여 시스템을 훈련시킬 수 있습니다. 예를 들어 barrió 응답이 예상되는 경우 barrió 을 트레이닝 세트에 넣습니다.

악센트 표시는 아니지만 스페인어 문자 ñ 와 문자 n 를 사용하는 단어(예: '우냐' 대 '우나')에도 동일하게 적용됩니다. 이 경우 ñ 문자는 악센트가 있는 n 문자가 아니라 스페인 고유의 고유한 문자입니다.

번역에 다국어 다운로드 사용

언어 데이터 파일을 CSV 형식으로 다운로드할 수 있으므로 교육 예제 및 어시스턴트 응답을 다른 언어로 변환하고 다른 어시스턴트에서 사용할 수 있습니다.

각 CSV 파일에는 시스템 또는 사용자 변환 서비스와 함께 사용할 수 있는 translatable_string 데이터가 포함되어 있습니다.

각 CSV 파일에는 watsonx Assistant 가 다른 어시스턴트에서 소스 어시스턴트를 다시 작성하는 데 사용할 수 있는 id, resource_type 및 locator 데이터도 포함되어 있습니다. 이 정보를 편집할 필요가 없습니다.

다국어 패키지를 다운로드하기 전에 확장자 일치 이해하기를 참조하세요.

다국어 패키지를 성공적으로 다운로드하려면 어시스턴트의 액션과 대화 스킬에 대한 번역 항목의 총 수가 400,000개 이하여야 합니다. 데이터 격리 플랜이 있는 엔터프라이즈와 온-프레미스( IBM® watsonx™ Assistant )를 사용하면 제한을 더 높게 설정할 수 있습니다. 높은 가치의 경우, 대규모 어시스턴트를 지원하기 위해 추가적인 자원 할당이 필요합니다.

번역 항목 제한을 더 높게 설정하려면 IBM 지원 센터에 문의하십시오

다국어 프로세스의 개요는 다음과 같습니다.

• 다국어 다운로드 사용: 소스 지원에서 다국어 다운로드를 사용으로 설정하십시오.
• 컨텐츠 변환: 변환 서비스에서 CSV 파일 사용
• 언어별 지원에 업로드: 다른 언어의 대상 지원에서 CSV 파일을 사용하여 번역된 교육 및 응답을 업로드하십시오.

컨텐츠 언어 지원

이러한 언어는 조치, 대화 상자 및 검색 통합의 컨텐츠에 대해 지원됩니다.

컨텐츠 지원 세부사항

언어	조치	대화 상자	검색 통합
영어(en)
아랍어(ar)
중국어(간체)(zh-cn)
중국어(번체) (zh-tw)
체코어(cs)
네덜란드어(nl)
프랑스어(fr)
독일어(de)
이탈리아어(it)
일본어(ja)
한국어(ko)
포르투갈어(브라질) (pt-br)
스페인어(es)
유니버설 (xx)

watsonx Assistant 서비스는 앞서 설명한 대로 여러 언어를 지원하지만 사용자 인터페이스 자체(예: 설명 및 레이블)는 영어로 되어 있습니다. 지원되는 모든 언어는 입력될 수 있으며 영어 인터페이스를 통해 훈련될 수 있습니다.

GB18030 준수: GB18030은 중국 시장에서 사용할 확장 코드 페이지를 지정하는 중국 표준입니다. 이 코드 페이지 표준이 소프트웨어 업계에서 중요한 이유는 중국 국가정보기술표준화기술위원회가 2001년 9월 1일 이후 중국 시장을 대상으로 출시되는 모든 소프트웨어 애플리케이션에 대해 GB18030 을 사용하도록 의무화하고 있기 때문입니다. watsonx Assistant 서비스는 이 인코딩을 지원하고 GB18030-준수 인증을 받았습니다.

대화 상자 언어 지원

이러한 대화 상자 기능의 경우 언어 지원은 언어에 따라 다릅니다.

• 인텐트 기능 지원
• 사용자 입력 처리 지원
• 엔티티 기능 지원

인텐트 기능 지원

인텐트 기능 지원 세부사항

언어	컨텐츠 카탈로그	알고리즘 버전
영어(en)
아랍어(ar)	( Covid-19제외)
중국어(간체)(zh-cn)
중국어(번체) (zh-tw)
체코어(cs)
네덜란드어(nl)
프랑스어(fr)
독일어(de)	( Covid-19제외)
이탈리아어(it)	( Covid-19제외)
일본어(ja)	( Covid-19제외)
한국어(ko)
포르투갈어(브라질) (pt-br)
스페인어(es)
유니버설 (xx)

사용자 입력 처리 지원

사용자 입력 처리 지원 세부사항

언어	사전 기반 엔티티 지원	퍼지 일치(오타)	퍼지 일치(스테밍)	퍼지 일치(부분 일치)	자동 정정
영어(en)
아랍어(ar)
중국어(간체)(zh-cn)
중국어(번체) (zh-tw)
체코어(cs)
네덜란드어(nl)
프랑스어(fr)					베타
독일어(de)
이탈리아어(it)
일본어(ja)
한국어(ko)
포르투갈어(브라질) (pt-br)
스페인어(es)
유니버설 (xx)

엔티티 기능 지원

엔티티 기능 지원 세부사항

언어	컨텍스트 엔티티	시스템 엔티티
영어(en)
아랍어(ar)
중국어(간체)(zh-cn)
중국어(번체) (zh-tw)
체코어(cs)
네덜란드어(nl)
프랑스어(fr)	베타
독일어(de)
이탈리아어(it)
일본어(ja)
한국어(ko)
포르투갈어(브라질) (pt-br)
스페인어(es)
유니버설 (xx)