1AIOpenAI News
OpenAI inference-д зориулсан Jalapeño чипийн анхны үр дүнгээ зарлав
OpenAI өөрийн Jalapeño inference чипийг илүү өндөр дамжуулах чадвар, бага саатал, эрчим хүчний хэмнэлттэй гэж танилцууллаа. Энэ нь том хэлний моделийг ажиллуулах өртгийг бууруулах AI чипийн өрсөлдөөн улам ширүүсэж буйн дохио юм.
Дэлгэрэнгүй унших
AI-ийн хэрэглээ тэлэх тусам модел сургах бус, өдөр тутам хариулт үүсгэх inference нь дэд бүтцийн гол зардал болж байна. OpenAI өөрийн чипээр энэ шатны хурд, токен тутмын өртөг, эрчим хүчний хэрэглээг зэрэг оновчлохыг зорьж байна.
Гэхдээ танилцуулсан үзүүлэлт нь компанийн өөрийн мэдээлэл тул бодит хэрэглээний бие даасан туршилт, үйлдвэрлэлийн цар хүрээ, нийлүүлэлтийн нөхцөлийг ажиглах шаардлагатай. Зах зээлд NVIDIA, hyperscaler-үүд болон тусгай зориулалтын чип үйлдвэрлэгчидтэй өрсөлдөх нь дараагийн гол шалгуур болно.
Эх сурвалж: Jalapeño’s first results show industry-leading speed and efficiency in AI inference2SoftwareArs Technica
IBM Granite 4.2-оор локал LLM-ийн эрэлтийг онилж байна
IBM Granite 4.2 моделуудаа агентын чадвар болон байгууллагын орчинд урьдчилан таамаглахуйц нэвтрүүлэлтэд чиглүүлэн гаргалаа. Локал болон хяналттай орчинд AI ажиллуулах хүсэлт нэмэгдэж буйг энэ алхам харуулж байна.
Дэлгэрэнгүй унших
Байгууллагууд AI-г ашиглахдаа датагаа гаднын үүлэн үйлчилгээнд бүрэн гаргахгүй байх, зардал ба гүйцэтгэлийг илүү нарийн удирдах хэрэгцээтэй тулгарч байна. Энэ нь локал, hybrid болон тусгаарлагдсан орчинд ажиллах жижиг, дунд хэмжээний моделийн ач холбогдлыг өсгөж байна.
Granite 4.2-ын гол сорилт нь зөвхөн модель гаргах биш, агентын найдвартай ажиллагаа, хэрэгсэлтэй холбогдох чадвар, засаглалын шаардлагыг бодит байгууллагын ажлын урсгалд хангах явдал. AI сонгох багууд benchmark-оос гадна аюулгүй байдал, нийт эзэмшлийн өртөг, дотоод дата дээрх чанарыг шалгах хэрэгтэй.
Эх сурвалж: IBM's new Granite 4.2 models ride the wave of interest in local LLMs3Dev ToolsGitHub Blog
LLM-ийг production-д оруулахаас өмнө хэрхэн шалгах вэ
GitHub бодит secret scanning хэрэглээнээсээ авсан сургамжаар LLM-ийг production-д нэвтрүүлэхийн өмнө үнэлэх аргыг тайлбарлалаа. Нэг ерөнхий benchmark өндөр гарах нь бодит ажлын орчинд найдвартай ажиллана гэсэн баталгаа биш юм.
Дэлгэрэнгүй унших
LLM-ийн үнэлгээг бодит өгөгдөл, хэрэглэгчийн даалгавар, алдааны өртөгтэй уялдуулах нь чухал. Ялангуяа нууц түлхүүр, эмзэг мэдээлэл илрүүлэх зэрэг тохиолдолд худал сэрэмжлүүлэг хэт олон байвал багийн ачаалал нэмэгдэж, харин алдаж өнгөрвөл аюулгүй байдлын эрсдэл үүснэ.
Монголын багууд AI туслах эсвэл агент нэвтрүүлэхдээ эхлээд тодорхой хэрэглээний тохиолдол, амжилтын хэмжүүр, хүний хяналтын цэгээ тогтоох нь зүйтэй. Моделийн хариултын чанараас гадна хурд, зардал, тогтвортой байдал болон алдаа гарсан үеийн буцах механизмыг хамтад нь туршина.
Эх сурвалж: How to evaluate LLMs before production4AITechCrunch AI
Ringg дуут AI-г утасны ярианаас цааш өргөжүүлэхээр $10 сая татлаа
Энэтхэгийн Ringg Peak XV-ээс Series A өргөтгөлөөр $10 сая татаж, дуут AI-гаа уламжлалт утасны дуудлагаас давсан хэрэглээнд нэвтрүүлэхээр зорьж байна. Энэ нь олон хэл, олон сувгийн хэрэглэгчийн үйлчилгээний AI зах зээл тэлж буйн жишээ боллоо.
Дэлгэрэнгүй унших
Дуут AI нь зөвхөн автомат хариулагч биш болж, борлуулалт, хэрэглэгчийн дэмжлэг, сануулга, мэдээлэл цуглуулах ажлын урсгалд орж байна. Утасны хэрэглээ өндөр, хэлний олон янз байдалтай зах зээлүүдэд ийм бүтээгдэхүүний бодит хэрэгцээ илүү тод харагддаг.
Харин амжилтыг зөвхөн хөрөнгө оруулалтын дүнгээр хэмжихгүй. Ярианы танилт, орон нутгийн хэлний чанар, зөвшөөрөл ба хувийн мэдээллийн хамгаалалт, хүн рүү хурдан шилжүүлэх боломж нь хэрэглэгчийн итгэлийг шийднэ.
Эх сурвалж: India’s Ringg gets backing from Peak XV as it pushes voice AI past the phone call5ProductsThe Verge
Garmin Fenix 9 илүү тод дэлгэц, хурдан газрын зурагтай боллоо
Garmin-ийн Fenix 9 спорт цаг 3,000 нит хүртэлх OLED дэлгэц, илүү их RAM, шинэчилсэн газрын зургийн хөдөлгүүртэйгээр танилцуулагдлаа. Суурь 43 мм загварын үнэ $999.99-оос эхэлж байна.
Дэлгэрэнгүй унших
Шинэ дэлгэц нь гадаа, хурц гэрэлд мэдээлэл харахыг сайжруулах бол 50 хувиар нэмэгдсэн RAM болон шинэ map engine нь газрын зураг чирэх, чиглүүлэх хэрэглээг жигд болгох зорилготой. Мөн 64GB хадгалах сан, сапфир шил зэрэг нь урт аялал, бэлтгэлийн хэрэглээг онилжээ.
Үнэ нь Fenix цувралыг ердийн ухаалаг цагнаас илүү мэргэжлийн спорт, адал явдлын төхөөрөмжийн ангилалд хадгалж байна. Худалдан авахаас өмнө өмнөх үеийн Fenix-ийн GPS, батарей, спортын хэмжүүр таны хэрэглээнд хангалттай эсэхийг харьцуулах нь зүйтэй.
Эх сурвалж: Garmin’s new Fenix 9 adds brighter screens and smoother map panning