<?xml version="1.0" encoding="UTF-8"?><rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	
	xmlns:georss="http://www.georss.org/georss"
	xmlns:geo="http://www.w3.org/2003/01/geo/wgs84_pos#"
	>

<channel>
	<title>大模型推論（inference） &#8211; 科技島-掌握科技新聞、科技職場最新資訊</title>
	<atom:link href="https://www.technice.com.tw/tag/%e5%a4%a7%e6%a8%a1%e5%9e%8b%e6%8e%a8%e8%ab%96%ef%bc%88inference%ef%bc%89/feed/" rel="self" type="application/rss+xml" />
	<link>https://www.technice.com.tw</link>
	<description>專注於科技新聞、科技職場、科技知識相關資訊，包含生成式AI、人工智慧、Web 3.0、區塊鏈、科技職缺百科、生物科技、軟體發展、雲端技術等豐富內容，適合熱衷科技及從事科技專業人事第一手資訊的平台。</description>
	<lastBuildDate>Tue, 02 May 2023 08:44:29 +0000</lastBuildDate>
	<language>zh-TW</language>
	<sy:updatePeriod>
	hourly	</sy:updatePeriod>
	<sy:updateFrequency>
	1	</sy:updateFrequency>
	<generator>https://wordpress.org/?v=6.4.2</generator>

<image>
	<url>https://www.technice.com.tw/wp-content/uploads/2022/12/cropped-wordpress_512x512-150x150.png</url>
	<title>大模型推論（inference） &#8211; 科技島-掌握科技新聞、科技職場最新資訊</title>
	<link>https://www.technice.com.tw</link>
	<width>32</width>
	<height>32</height>
</image> 
<site xmlns="com-wordpress:feed-additions:1">223945996</site>	<item>
		<title>全台首個BLOOM 語言模型　企業快速進入AI 2.0世代</title>
		<link>https://www.technice.com.tw/uncategorized/37336/</link>
					<comments>https://www.technice.com.tw/uncategorized/37336/#respond</comments>
		
		<dc:creator><![CDATA[科技新知]]></dc:creator>
		<pubDate>Tue, 14 Feb 2023 06:07:50 +0000</pubDate>
				<category><![CDATA[其他]]></category>
		<category><![CDATA[AI 2.0大算力顧問服務]]></category>
		<category><![CDATA[Large Language Model]]></category>
		<category><![CDATA[大模型推論（inference）]]></category>
		<category><![CDATA[語言模型]]></category>
		<guid isPermaLink="false">https://www.technice.com.tw/?p=37336</guid>

					<description><![CDATA[<p><img width="998" height="560" src="https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）.png" class="attachment-post-thumbnail size-post-thumbnail wp-post-image" alt="王雪玲 圖說：AI 2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）" decoding="async" srcset="https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）.png 998w, https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）-300x168.png 300w, https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）-768x431.png 768w, https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）-390x220.png 390w" sizes="(max-width: 998px) 100vw, 998px" title="&lt;strong&gt;全台首個BLOOM &lt;/strong&gt;&lt;strong&gt;語言模型　企業快速進入AI 2.0&lt;/strong&gt;&lt;strong&gt;世代&lt;/strong&gt; 4"></p>
<p>記者／Shirley 近期大型語言模型（Large Language Model，LLM）火紅加上生成式AI（ &#8230;<content><!-- wp:paragraph --></p>
<p>記者／Shirley</p>
<p><!-- /wp:paragraph --></p>
<p><!-- wp:paragraph --></p>
<p>近期大型語言模型（Large Language Model，LLM）火紅加上生成式AI（Generative AI）的快速發展，開啟新世代AI，台智雲今（2/14）宣布領先全台成為第一個成功建置1,760億個參數的BLOOM（BigScience Large Open-science Open-accessMultilingual Language Model）大模型，推出「AI 2.0大算力顧問服務」一站式整合方案，讓企業降低進入生成式AI開發的門檻，可立即投入AI應用研發，進入AI 2.0世代。</p>
<p><!-- /wp:paragraph --></p>
<p><!-- wp:image {"id":37337,"sizeSlug":"full","linkDestination":"none"} --></p>
<figure class="wp-block-image size-full"><img src="https://www.technice.com.tw/wp-content/uploads/2023/02/王雪玲-圖說：AI-2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）.png" alt="" class="wp-image-37337"/><figcaption><strong>AI 2.0大算力顧問服務提供一站式整合方案。（圖／取自台智雲官網）</strong></figcaption></figure>
<p><!-- /wp:image --></p>
<p><!-- wp:paragraph --></p>
<p>台智雲表示，完成的BLOOM大模型，資料集包含46種人類語言、13種程式語言，參數量達到1,760億個，整體資料量高達1.5TB以上，運用了840個GPU做跨節點（node）訓練，除了效能逼近線性理論值外，也可收斂訓練結果，若欲增加效能，也可用線性的方式擴容（scale out），增加GPU提升平行運算能力。</p>
<p><!-- /wp:paragraph --></p>
<p><!-- wp:paragraph --></p>
<p>另外企業自行推動LLM專案，需熟悉分布式訓練架構、建置AIHPC高速運算系統、理解微調技術（fine-tune）、大模型推論（inference），布建門檻極高，若使用「AI 2.0大算力顧問服務」，可快速降低投入時間、技術成本、開發風險、硬體設備和人力投資等成本，打造自有生成式的AI應用。</p>
<p><!-- /wp:paragraph --></p>
<p><!-- wp:paragraph --></p>
<p>台智雲技術長陳忠誠表示，AI技術結合大型語言模型已是產業科技發展的趨勢，但企業要單獨執行LLM專案的難度極高，利用一站式AI 2.0大算力顧問服務，可更專心投入研發專案，大幅降低進入門檻。台智雲AIHPC高速運算平台結合技術資源團隊，提供完整的AI外部支援，現今已有高科技研發製造、金融和零售領域企業正在洽談合作中。</p>
<p><!-- /wp:paragraph --></content></p>
<p>這篇文章 <a rel="nofollow" href="https://www.technice.com.tw/uncategorized/37336/">&lt;strong&gt;全台首個BLOOM &lt;/strong&gt;&lt;strong&gt;語言模型　企業快速進入AI 2.0&lt;/strong&gt;&lt;strong&gt;世代&lt;/strong&gt;</a> 最早出現於 <a rel="nofollow" href="https://www.technice.com.tw">科技島-掌握科技新聞、科技職場最新資訊</a>。</p>
]]></description>
		
					<wfw:commentRss>https://www.technice.com.tw/uncategorized/37336/feed/</wfw:commentRss>
			<slash:comments>0</slash:comments>
		
		
		<post-id xmlns="com-wordpress:feed-additions:1">37336</post-id>	</item>
	</channel>
</rss>
