feature-top

숫자 헷갈리는 생성형 AI, '토큰화'가 원인…해결책은?

생성형 AI 모델을 구축하는 과정에서 빼놓을 수 없는 분야는 '토큰화'다. 토큰화는 주어진 텍스트에서 토큰이라 불리는 작은 데이터 단위로 나누는 작업을 뜻하는데, 이는 AI 모델이 텍스트를 이해하고 처리하는 데 필수적인 요소다. 하지만 이 과정에서 편향, 오류 등 갖가지 문제점들이 꾸준하게 발생하고 있다고 지난 6일 IT매체 테크크런치가 보도했다.토큰화 과정에서는 단어나 음절, 문자 등을 토큰으로 취급한다. 이때 발생할 수 있는 문제점 중 하나는 편향을 불러올...
애플 비전 프로용 비공식 유튜브 앱 '주노'가 앱 스토어에서 삭제됐다. 1일 IT매체 나인투파이브맥에 따르면 이는 구글이 애플에 주노를 앱 스토어에서 삭제해 달라고 요청했기 때문인 것으로 알려졌다. 주노는 크리천 셀리그가 만든 대체 앱으로, 아직 애플 비전OS에는 공식 유튜브 앱이 없다. 구글은 몇 달 전부터 주노가 유튜브의 가이드라인을 준수하지 않는다며 개발자에 연락했다고 한다. 구글은 제3자가 유튜브 웹사이트를 수정하거나 상표 및 아이콘을 사용할 수
■ 비트·이더 ETF 다음 주자는 리플?…비트와이즈, 신탁 법인 등록가상자산 자산운용사 비트와이즈가 암호화폐 기업 리플의 토큰인 XRP 관련 상장지수펀드를 개발하고 있다는 소식이다. 1일 블록체인 매체 코인데스크에 따르면 비트와이즈는 최근 미국 델라웨어주에 신탁 법인을 등록했다. 신탁 법인을 등록하는 것은 ETF를 상장하고 거래하기 위한 신청의 첫 번째 단계다. 비트와이즈, 블랙록, 피델리티와 같은 회사는 모두 비트코인과 이더리움의 신탁 법인을 신청한 후 해당 토큰에 대한 ETF를 신청한 바 있다. 비트와이즈 대
한종희 삼성전자 DX부문장 부회장이 "삼성전자는 향후 '누가 말하는지', '어느 공간에 있는지'까지 인지해 고도화된 개인화 경험이 가능하도록 준비할 것"이라며 "이같은 서비스는 삼성전자의 AI 기반 SW·플랫폼 혁신과 보안 기술로 더 편리하고 안전하게 구현될 것"이라고 말했다.삼성전자가 3일 미국 새너제이 맥에너리 컨벤션 센터에서 '삼성 개발자 콘퍼런스 2024'를 개최했다. 이날 한 부회장은 기조연설을 통해 "지난 10년 동
이더리움 사용자들은 앞으로 이더리움를 레이어1 블록체인 수이와 연결할 수 있게 됐다. 거꾸로 수이 사용자들도 이더리움으로 확장할 수 있게 됐다.디파이언트 보도에 따르면 지난달 30일 출시된 수이 브릿지는 수이와 이더리움 간 네이티브 연결을 제공해 두 블록체인 간 끊김 없는 자산 전송을 지원한다.수이 측은 블로그에 올린 글을 통해 "수이 브릿지 출시는 수이 상호 운용성 여정에서 중요한 순간"이라며 "수이와 이더리움 간 신뢰가 최소화된 자산 전송을 가능케 한다"고 강조했다.수이 브릿지가 나
카카오뱅크는 '해외계좌송금 받기' 서비스를 이용하는 고객이 부담하던 수취수수료를 전액 면제한다고 2일 밝혔다. 카카오뱅크의 해외계좌송금은 모바일 애플리케이션을 통해 365일 24시간 간편하게 외화를 송금할 수 있도록 구현한 서비스로, 해외 계좌에 외화를 송금하거나 해외 계좌로부터 외화를 수취할 수 있도록 양방향 송금 기능을 제공한다. 이번 정책을 통해 '해외계좌송금 받기'를 이용하는 고객들은 최대 5000원의 수취수수료를 면제받게 된다. 기존 정책에 따르면 수취금액 100달러 이상
우리은행은 지난 29일 마포 문화비축기지에서 제27회 우리은행 미술대회 ‘우리 아트콘’ 본선 대회를 개최했다.이번 대회 슬로건은 이웃과 친구처럼 서로 돕고 살아가는 세상을 만들자는 의미를 담아 ‘우리.모두. 우리, We Be Friends!’로 정해졌다. 본선 진출자 500명은 슬로건에 담긴 사회공헌의 메시지를 재미있고 기발한 상상력으로 도화지 위에 그려냈다.문화체육관광부 장관상을 포함한 최종 수상작은 주요 미술대학 교수진으로 구성된 심사위원단의 심사를 거쳐 선정
김해시는 4일 김해중소기업비즈니스센터에서 김해시 탄소중립지원센터 개소식과 함께 ‘기후안심도시 김해를 위한 탄소중립의 ...
◇부이사관 승진△기획재정담당관 부이사관 이준산 △목재산업과장 부이사관 조영희 /나무신문
경기도는 오는 12월까지 31개 시군에서 노인과 중장년에게 맞춤형 일자리를 연결하는 채용박람회를 열기로 하고 첫 번째 행사로 7일과 8일 이틀간 고양 킨텍스에서 '경기도 5070 일자리 박람회'를 개최한다.고양시를 시작으로 12월 수원시에서 막을 내릴 예정인 이번 일자리 박람회는 노인이나 중장년자들이 개인별로 능력이나 경력에 맞는 다양한 직종에 취업할 수 있도록 마련했다.박람회를 통해 도내 우수 중견·중소기업의 노인․중장년 종사자 비율을 높이고, 단순직종에 집중됐던 노인일자리를 다양한 양질의 일자리까지
실시간 랜섬웨어 탐지·차단 솔루션인 화이트디펜더 제품 개발기업 에브리존은 네트워크·보안 전문기업 파이오링크와 안티랜섬웨어 화이트디펜더 총판 계약을 체결했다고 밝혔다.에브리존은 엔드포인트 보안 안티바이러스, 안티랜섬웨어 소프트웨어 연구개발 전문 보안기업으로, 안티랜섬웨어 화이트디펜더 제품은 100% 시그니처리스 기반의 실시간 랜섬웨어 위협 탐지·차단 및 자동복구 기능을 제공한다. 또한 독자 기술로 개발한 행위탐지 최고의 알고리즘 엔진을 보유하고 있으며, 탐지와 차단, 복원 3단계 프로세스를 기
17세 이하 월드컵에 출전할 여자 청소년 대표팀 최종 명단이 확정됐다.대한축구협회는 오는 17일부터 도미니카공화국에서 열리는 2024 FIFA 여자 U-17 월드컵에 출전할 선수 명단을 3일 발표했다.21명 참가 엔트리에는 미국 프로리그 소속으로 여자 A대표팀에서도 활약하는 케이시 유진 페어가 지난 U-17 아시안컵에 이어 명단에 포함됐다. 그러나 팀의 주장이자 핵심 공격수였던 원주은은 최종훈련을 앞두고 부상으로 제외됐다.21명 선수 중 11명이 2007년생, 8명이 2008년생이며, 한국희(울산현대청운
오늘은 전국이 대체로 흐리겠고, 내일은 전국이 대체로 맑겠다.   자료제공 : 기상청 날씨누리  © 뉴스다임 오늘 오전부터 남부지방과 제주
최근 5년간 여객열차 및 광역열차를 부정승차하다 적발된 건수가 최근 5년간 291만 6000건, 총 부과금액으로는 284억 2500만원에 달하는 것으로 나타났다.국회 국토교통위원회 국민의힘 정점식 의원이 한국철도공사로 부터 제출받은 부정승차 현황 자료에 따르면 2019년에 51만 4000건이었던 여객·광역열차 부정승차는 코로나 영향으로 탑승객이 줄며 자연스럽게 감소했다가 2022년 48만 9000건, 2023년 57만 건으로 다시 증가했다.주로 승차권 미소지가 다수를 차지(95
국회 농림축산식품해양수산위원회 소속 국민의힘 정희용 국회의원은 지난 2일 국회의원회관 제2소회의실에서 국산재 및 산림바이오매스 이용 활성화를 위한 제도 및 법령 개선 국회토론회를 개최했다고 밝혔다.이번 토론회는 산림과 임업 분야에서 탄소중립의 대응책 중 하나인 국산재와 산림바이오매스 이용 활성화 방안을 모색하기 위해 마련됐으며, 산림청과 국립산림과학원, 학계 및 산림·임업 종사자 등 전문가와 관계자들이 참석한 가운데 관련 제도 및 법령의 개선방안을 논의했다.주제발표에는 원광
지역별 맞춤 사업으로 냄새 저감 효과 기대 경상남도는 지난 9월 13일 농림축산식품부에서 시행하는 2025년도 축산악취개선사업에 도내 5개 시군이 선정되어 국비 53억 원을 포함해 총 75억원의 사업비를 확보했다고 밝혔다. ‘축산악취개선사업’은 가축분뇨 적정 처리 및 축산악취 저감
인기기사
Generic placeholder image
농심, 일본에서 신라면 팝업스토어 운영
농심이 일본 도쿄 하라주쿠에서 신라면 팝업스토어를 운영한다. 하라주쿠는 일본 MZ세대의 성지로 알려진 곳으로, 농심은 방문객들이 신라면의 매력을 직접 체험하고 즐길 수 있도록 해 현지 젊은 소비자층을 확대해 나간다는 계획이다. 농심은 일본 신라면 팝업스토어를 시작으로 체험형 이벤트와 협업 마케팅을 강화, 2023년 100억엔을 돌파
Generic placeholder image
"육아휴직 8만여 명 중 5.5만 명이 여성"
현재 육아휴직 중인 노동자 8만1000여 명 가운데 약 5만5000명은 여성, 2만6000명은 남성인 것으로 나타났다. 국회 환경노동위원회 소속 더불어민주당 박해철 의원이 국...
Generic placeholder image
대구시, 어린이 기호식품 제조·판매업소 93곳 대상 위생 점검
대구시가 오는 8일까지 햄버거 등 어린이 기호식품 제조·판매업소 93곳을 대상으로 위생 점검을 벌인다. 1일 대구시에 따르면 점검 대상은 과일 건조·냉동식품, 햄버거, 피자 등 어린이들이 간식으로 주로 섭취하는 식품 제조·판매 업소다. 최근 MZ세대 간식으로 새롭게 떠오르는 ‘두바이 초콜릿’ 및 ‘요거트 아이스크림’ 제조 업소에 대해서도 추가 점검을 펼친다. 또 ‘피스타치오’나 ‘카다이프’를 함유한 견과류 가공품 3건, 조리식품 5건에 대한 수거 검사를 병행한다. 주요 점검 사항으로는 △원재료 및 함량 거짓
Generic placeholder image
정점식 "지난해 열차 부정승차 57만건 적발"
최근 5년간 여객열차 및 광역열차를 부정승차하다 적발된 건수가 최근 5년간 291만 6000건, 총 부과금액으로는 284억 2500만원에 달하는 것으로 나타났다.국회 국토교통위원회 국민의힘 정점식 의원이 한국철도공사로 부터 제출받은 부정승차 현황 자료에 따르면 2019년에 51만 4000건이었던 여객·광역열차 부정승차는 코로나 영향으로 탑승객이 줄며 자연스럽게 감소했다가 2022년 48만 9000건, 2023년 57만 건으로 다시 증가했다.주로 승차권 미소지가 다수를 차지(95
Generic placeholder image
고양시, 주한미국상공회의소와 업무협약 체결
고양특례시가 주한미국상공회의소와 투자유치 촉진 상호협력을 위한 업무협약을 체결했다. 4일 시에 따르면 이동환 시장과 암참 제임스 김 회장, 에너지엑...
최신기사
Generic placeholder image
(기고)명절 선물로 손편지 써보자..환경오염 지름길 포장재 사용 줄이자.
어느덧 2024년 추석 명절이 끝난 지 벌써 10여 일이 지났다. 하지만 명절 쓰레기는 여전히 남아있다. 그중에서도 상당히 높은 비율을 차지하는 생활폐기물이 바로 ‘포장 폐기물’이다.포장재로 주로 쓰이는 스티로폼과 플라스틱은 가벼우면서도 값싸고 상품 보호에 탁월하다는 장점이 있지만, 스티로폼은 제조과정뿐만 아니라 소각하는 과정에서도 환경오염물질이 배출된다는 치명적인 단점이 있고, 플라스틱의 경우 자연 분해가 되지 않아 자연스럽게 퇴비나 사료에 섞이게 되어 결과적으로 인류의 건강에도 부정적인 영향을 끼친다.심지어 재활용이 불가능한 대
Generic placeholder image
'극적 역전 결승골' 제주 김주공 "남은 5경기, 팀을 위해 헌신하고 싶어"
'승점 6점짜리 맞대결' 이었던 대전과의 홈경기에서 극적인 역전골을 터트린 제주유나이티드의 김주공이 "남은 5경기 동안 팀을 위해서 헌신을 하고 싶다"고 말했다.김주공은 6일 대전과의 홈경기 후 수훈선수 기자회견에서 이같이 말했다.김주공은 경기소감으로 "저희가 지금 좋지 않은 상황을 맞이하고 있는데, 그런 와중에 오늘 승리가 꼭 필요하다고 생각을 했다"며 "다행히 이기게 되서 한시름 놓게 된 것 같다"고 말했다.그는 "선수들이 잘 준비를 하고 있었다. 저희가 스스로 텐션을 많이 올렸다"면서 "그러다보니까 그런 분위기 속에서 제가 주
Generic placeholder image
서귀포시 대정 오일장 인근 등 3곳에 횡단보도 안전지킴이 설치
서귀포시는 오는 12월까지 3000만원을 투입해 대정읍 하모리 1066번지, 서홍동 1614-8번지, 상예동 1442-4번지에 다기능 시설 ‘횡단보도 안전지킴이’를 설치한다고 6일 밝혔다.다기능 횡단보도 안전지킴이는 발광형 교통표지판, LED 투광등이 결합된 시설로 횡단보도 위에 설치된다.서귀포시는 보행자 신호등이 없는 횡단보도를 중심으로 횡단보도 안전지킴이를 설치하고 있다.서귀포시는 올해 상반기에도 대정읍 하모리 873-1번지 등 7개소에 설치했다.지난 9월 기준으로 서귀포시지역 횡단보도 40여 개소에 설치돼
Generic placeholder image
'김 여사 논문 표절 의혹' 국감 증인들 줄줄이 불출석에 야당 "강력 조치"
윤석열 대통령의 부인 김건희 여사의 논문 표절 의혹과 관련해 3년 연속 국회 교육위원회 국정감사 증인으로 채택된 김지용 국민대 이사장이 올해도 불출석 의사를 밝혔다. 이에 야당은 강력 대응을 예고 하고 있다.국회 교육위원장을 맡고 있는 김영호 민주당 의원은 오는 8일 교육부 대상 국감과 24일 종합국감에 증인으로 채택된 김 이사장이 지난 4일 해외 출장 일정을 이유로 불출석 사유서를 제출했다고 6일 밝혔다.김 이사장은 지난 2022년과 2023년에도 교육위 국감 증인으로 채택됐으나, 지난번에도 해외 출장을
Generic placeholder image
이재준 시장 "세계인과 함께하는 축제로 발전시키겠다"
경기 수원시가 6일 조선시대 왕실 축하 행렬인 정조대왕 능행차 공동재현을 한다.이날 정조대왕 능행차 공동재현이 이어 행궁광장 특설무대에서 진행되는 폐막식을 끝으로 제61회 수원화성문화제 막을 내린다.앞서 지난 4일 저녁 행궁광장 특설무대에서 막을 올린 수원화성문화제는 3일 동안 화성행궁과 행궁광장, 수원화성 일대에서 진행돼 왔다.이재준 수원시장은 개막식 무대에서 환영사를 통해 "1964년 시작된 수원화성문화제는 이제 대한민국을 대표하는 축제이자 수원 자부심이 됐다"면서 "앞으로 3일 동안 한국 역사와 전통 문화, 정조 이상이 담긴