AI 뉴스 검색

ULME 프레임워크는 텍스트 임베딩과 언어 모델링을 진정으로 통합한다: arXiv의 새로운 논문이 예측 결합 메커니즘을 제안했다

2026년 10월 24일, arXiv는 논문 arXiv:2610.30705v1을 발표하여, 인과적 디코더형 대규모 언어 모델을 위한 후처리 훈련 프레임워크인 ULME를 제안했습니다. 이 프레임워크는 예측 결합(predictive coupling) 메커니즘을 통해 텍스트 임베딩과 언어 생성 능력 간의 상호 강화적 통합을 최초로 구현했습니다. 해당 방법은 Qwen2.5/Qwen3 시리즈(0.5B–8B 파라미터)에서 검증되었으며, MTEB 지표에서 3.3–4.1점의 성능 향상을 달성하는 동시에, MMLU 등 생성 과제에서의 성능 저하를 방지했습니다.

추천 이유：이 논문은 현재 다중모달 LLM의 능력이 분절되어 있는 핵심 문제를 정면으로 지적한다: 임베딩과 생성은 오랫동안 독립된 모델 또는 파라미터만 공유하는 ‘가짜 통합’ 모델에 의해 담당되어 왔다. ULME는 학습 가능한 슬롯과 세 가지 목표를 결합한 공동 학습(스톱그레이디언트 예측 손실 포함)을 통해 생성 과정이 임베딩 표현을 주도적으로 형성하도록 하였으며, 이는 아키텍처 차원에서의 실질적인 획기적 발전이다. 실험 범위가 광범위하고 기준선이 강력하며 지표가 포괄적이며, 권위 있는 사전출판 플랫폼에 발표되어 시의성과 기술적 엄밀성이 모두 갖추어져 있다.

아마존 세이지메이커 AI가 다중 라운드 강화학습(MTRL) 프레임워크를 출시하여, 엔드투엔드 방식으로 에이전트가 다단계 작업을 완수하도록 지원합니다.

AWS는 Multi-Turn Reinforcement Learning(MTRL) 기능을 출시하여, 사용자가 SageMaker AI에서 전체 작업 궤적과 최종 결과 피드백을 바탕으로 대규모 모델 에이전트를 단계별 주석 없이 학습할 수 있도록 지원합니다. Wordle을 예시로 삼아 AgentCore 배포, 데이터 준비, GRPO 학습, 보상 설계 및 비용 분석에 이르는 전 과정을 시연합니다.

메타가 DNS를 통해 대화 링크가 노출되면서 중단되었던 뮤즈 공유 기능을 복구했습니다.

메타는 보안 연구원들이 Muse 공유 링크가 명명 규칙과 DNS의 공개로 인해 민감한 콘텐츠를 쉽게 발견할 수 있다는 점을 밝힌 뒤 해당 기능을 일시적으로 중단했으며, 현재는 조정을 거쳐 다시 활성화했습니다.

IskayPet는 Amazon Bedrock 기반의 호스팅 지식 저장소를 활용해 다국어 기업용 지식 어시스턴트를 구축합니다.

스페인의 반려동물 관리 기업 IskayPet은 Amazon Bedrock의 관리형 지식 베이스(Managed Knowledge Bases)를 활용해, 자체 RAG 인프라를 구축할 필요 없이 스페인, 포르투갈, 프랑스 3개국과 스페인어, 포르투갈어, 프랑스어, 영어 4개 언어를 지원하는 기업급 지식 어시스턴트를 구축했으며, 소매, 수의학, 온보딩 및 구매 등 다양한 비즈니스 시나리오를 지원합니다.

Flint-interactive: AI 에이전트를 위한 대화형 데이터 시각화 프로그래밍 언어

마이크로소프트 연구소는 고 표현력의 의미 기반 대화형 데이터 시각화를 구축하기 위한 전용 언어인 Flint-interactive를 발표했습니다. 이 언어는 컴파일러를 통해 사용자의 동작(예: 클릭, 필터링)을 자동으로 의미적 이벤트로 매핑하고, 고수준 연산자를 활용해 차트, 테이블, 텍스트 등 다양한 요소 간의 연동 업데이트를 구동함으로써, AI 에이전트가 신뢰할 수 있는 대화형 시각화를 생성하는 데 필요한 비용과 개발 복잡성을 크게 절감합니다.

AI 지원 ‘블라인드 스캔’ 초음파 기술이 기층 모자보건을 지원: 다기관 전향적 연구를 통해 지역 간 일반화 능력 검증

구글 연구팀은 임상 기관과 협력하여 전향적 다기관 연구를 수행한 결과, 저비용 휴대형 프로브를 사용하고 비초음파 전문의가 운영하는 AI 기반 ‘블라인드 스캔’ 초음파 방식이 시카고와 나이로비 두 지역에서 모두 전문가 수준의 초음파 생체측정과 동등한 임신 주수 평가 정확도(평균 절대 오차 4.18일 대 4.48일)를 달성했으며, 현지 데이터 미세조정이 필요하지 않아 자원이 부족한 지역에서 산전 초음파 검사의 보급을 확대할 수 있는 실현 가능한 경로를 제시했다.

구글 클라우드와 엔비디아는 NVIDIA Vera Rubin 인프라의 정식 상용화를 발표했습니다: A5X 인스턴스가 출시되었으며, 대규모 강화학습과 에이전트 추론에 중점을 두고 있습니다.

구글 클라우드와 엔비디아는 베라 루빈 아키텍처 기반의 A5X 인스턴스를 내달부터 정식으로 상용화한다고 발표했으며, 초기 단계에서는 미국을 대상으로 서비스를 제공하고 이후 유럽으로 확대할 예정입니다. 이 플랫폼은 NVL72 GPU, ConnectX-9 SuperNICs, Virgo 네트워크 및 4세대 액체 냉각 기술을 통합하여, 대규모 강화 학습과 생성형 에이전트 추론 등 고밀도 컴퓨팅 환경에 특화되어 설계되었습니다.

GPT-OSS-20B 다중언어 추론 미세조정 실험: SFT는 초보자 수준의 행동 습득을 가능하게 하며, GRPO는 확률 헤드 공간이 존재할 때에만 효과적으로 성능을 향상시킨다.

AWS 팀은 Amazon SageMaker HyperPod에서 GPT-OSS-20B를 대상으로 다국어 추론 미세조정 실험을 수행했으며, LoRA 기반의 효율적 파라미터 미세조정을 적용했습니다. SFT는 영어·프랑스어·독일어·스페인어·이탈리아어 등 5개 언어에 대한 추론 정확도를 22%에서 100%로 끌어올렸지만, 답변 언어의 정확도는 62%에 그쳤습니다. GRPO는 이를 바탕으로 답변 언어 정확도를 70%까지 추가로 개선했으며, 추론 언어 성능에는 별다른 손상을 주지 않았습니다. 다만 이익의 정도는 언어마다 상이하여, 예를 들어 스페인어는 30%p 향상된 반면 이탈리아어는 20%p 하락했습니다. 실험 결과는 GRPO가 새로운 능력을 제로 상태에서 창출할 수 없으며, 기존에 간헐적으로 나타나던 행동만을 최적화할 수 있음을 분명히 보여줍니다.

구글, 제로 트러스트 기반의 통합형 프라이빗 분석 기술 출시—암호학과 신뢰할 수 있는 실행 환경을 결합

구글 연구팀은 혁신적인 단일 라운드 격자 암호 집합 프로토콜과 신뢰할 수 있는 실행 환경(TEE)의 협업 검증을 통해, 단일 주체를 신뢰하지 않고도 데이터 집합을 수행할 수 있는 새로운 사적 분석 솔루션을 발표했습니다. 이를 통해 사용자의 데이터가 항상 기기 내에 머무르는 것을 보장하면서도, 집단 수준의 익명화된 인사이트를 확보할 수 있습니다.