Google 压箱宝 AI 模型「Gemini」降临!30 项评分直接超越 GPT-4V

  • 多模态 AI 模型可同时理解文字、程式码、声音、图片、影片等内容
  • 32 项 AI 测试中有 30 项评分超越 GPT-4V
  • 分 Ultra、Pro、Nano 大中小三个版本,Nano 小到可以直接装手机上
  • 不仅支援英语还能同时支援多个语种,在不同语种执行效能也能维持一致
  • 大量使用 Google 自家设计的 TPU 训练

原本 Google 传出会延期到明年才发表的全新大型语言模型「Gemini」如期在 12 月初面世!

就如外界预期,Google 呕心沥血推出的 Gemini 是「原生」多模态 AI 模型,可以同时无缝理解、操作包括文字、程式码、声音、图片、影片等多元形式的内容,像是理解图片方面,Google 宣称 Gemini Ultra 可以直接跳过从图片中使用 OCR 理解文字的步骤,就能直接图片内容。

理解能力到底有强?Google 就用了一个图中很简单的例子, 拿了两张非常简单的手绘汽车图问 …

芝程/克达举办「车用系统整合测试解决方案」研讨会

芝程科技与克达科技於11月29日联合举办「车用系统整合测试解决方案」研讨会,会中安排国立台北科技大学、工研院与芝程科技、克达科技的车用测试专家,介绍车用科技最新趋势与测试技术应用。

芝程科技总经理林婉如表示,车用科技是各国重要的发展重点,各大厂大举投入自驾、电动车及充电桩周边测试。在电动车及传统车厂持续提升驾驶安全及智慧化的趋势牵引下,业者积极投入,驱动ADAS技术持续精进。

北科大教授陈柏全表示,在车辆交通事故中,有超过九成与驾驶者有关,先进驾驶辅助系统(ADAS)可经由感知器资讯提醒驾驶者注意周遭交通状况,并可协助操控车辆。大幅减少车祸伤亡机率。纵向动态控制相关的ADAS,针对比ADAS自动化程度更高的自动驾驶,进行相关感知、决策与控制、测试的趋势介绍。

工研院研究员徐爱蒂表示,根据统计,车用感测器市场规模,从2022年18亿美金成长到2028年的140亿美金,短短数年内,运行中的车辆也将有50%搭载ADAS。工研院曾蕙如博士在研讨会当中,分享了工研院正在发展的自驾相关技术,与初期成果,像是自驾感知次系统发展、像是整合光达、雷达、摄影机、卫星定位、惯性导航、C-V2X等感测与通讯元件。

克达科技资深工程经理冯育隆分享了先进驾驶辅助系统(ADAS)的量测趋势及运用先进的示波器进行车用镜头(MIPI)及车用网路(Multi GigaLan)的高速讯号分析。他也分享了这些应用较容易失败的项目该如何除错,解决工程师的困扰。

芝程科技射频工程经理陈富祺表示,将针对ADAS晶片前端测试解决方案,扩大到各大系统厂端整合测试。除传统测试耗材外,也将展示未来趋势-模组化的Switch Box,提供客户更人性化的选择。

林婉如表示,面对全球车辆产业供应链重组,电动智慧化、净零碳排趋势,相较於传统汽车,新世代能源车及自驾车对於电子系统需求与日俱增,其中ECU汽车控制单元扮演了重要角色。此次也针对ECU及T-BOX各式讯号连接器进行解密。…

ST为Ellipse无电池动态卡验证微型模组提供保护/电力

意法半导体(ST)为Ellipse World(Ellipse)提供电力收集安全微控制器,强化卡支付的安全性。CompoSecure将推出首款采用EVC技术的金属卡,这一创新的支付解决方案将提升支付体验,强化使用者保护功能,而意法半导体提供之ST31N600晶片的幕後支援功不可没。

Ellipse选择ST31N600安全微控制器成为无电池EVC(Ellipse验证码)All-In-One动态CVV(卡片验证码)微型模组的关键元件。EVC All-In-One是标准尺寸EMV微型模组,能够让卡片制造商在卡上模组背面安装三位元的卡片验证码显示幕。每当使用卡片在实体POS终端机或ATM设备支付交易时,验证代码会产生变化,也可以利用手机刷新卡验证码,而新的验证码还可以用於後续线上或无卡交易,有效降低错误拒绝交易和欺诈性无卡活动的风险。

当与STPAYTP1x搭配使用时,EVC All-In-One能为EMV支付交易增加一份安全保障。ST31N600负责收集读卡器辐射的电磁能量,能为电路供电。该解决方案无需电池,可以简化制造流程并节省成本。

意法半导体网路安全产品行销总监Laurent Degauque表示,ST31N600是智慧卡取得大幅进步的起点,具有强大的安全性和功能性,可以实践易用而且创新的支付验证机制。

Ellipse总裁暨执行长Cyril Lalo则表示,选择与ST合作的决策为开发EVC All-In-One微型模组奠定最稳固的基础。ST31N600在一个节省空间的低功耗晶片上整合安全处理器、非接触式通讯和电力收集功能。这能将EMV的保护范围扩充到电子商务,并向市场推出新一代连接现实世界和数位世界的支付模组。

ST31N600采用最新一代Arm SecurCore安全微控制器架构,符合接触式和非接触式支付卡产业标准,包括EMV ISO 7816、ISO 14443和ISO 18092。SecurCore SC000晶片包含安全功能,有助於防御先进的攻击手段。该晶片整合硬体加速器,可以提供加密功能,还支援生物辨识应用。开发人员可以安全地与各类型的周边设备连线,例如,萤幕指纹感测器或配套晶片,为卡片导入加值功能。

ST31N600现已量产。…

ST安全软体确保连网装置与Azure IoT Hub安全连线

意法半导体(ST)推出款新安全软体,用於简化搭载高性能STM32H5之连网装置与微软Azure IoT Hub之间的云端连线。

意法半导体X-CUBE-AZURE-H5 STM32Cube软体扩充包包含一套适用於终端装置的STM32H5系列高性能微控制器软体库和应用范例。

应用范例协助连网装置与Azure IoT Hub之间的安全云端连线方式,包括网路配置和资料发布。该应用程式能处理Azure讯息、方法和设备的孪生更新指令。该解决方案还利用ST Secure Manager嵌入式安全软体将STM32H5安全地与微软Azure云端连线。

意法半导体STM32行销总监Daniel Colona表示,透过先进的处理器架构和强化的安全性,STM32H5能够用於下一代连网装置。藉由使用STM32Cube参考软体程式码和Azure IoT Hub的服务,开发者可以把装置收集到的资料转化为可执行的建议,帮助他们做出决策、优化生产运营,而且改善产品服务品质。

微软Azure IoT总经理Kam VedBrat则表示,透过晶片的先进安全功能,STM32H5可以简化高性能连网装置的安全连线和管理,确保装置能安全地与Azure IoT Hub云端连线。

STM32H5微控制器(MCU)在意法半导体自营工厂烧录程式码,确保每个MCU独特的身分。装置的身分资讯系由Secure Manager安全软体管理,让智慧装置能够在Azure IoT Hub云端服务中完成注册,既简单又省钱,无须在产品生产过程中执行产品身份保密的步骤。

在量产连网装置以及现场安装的设备亦可享有协力厂商服务供应商的远端网路开通和凭证管理服务。Secure Manager在STM32H5 MCU中保存装置与Azure IoT Hub连线所需之认证,以及其他装置的保密资讯。

Secure Manager的隔离功能便於使用者在同一平台上保护多方共同持有的智慧财产权,又称多方持有IP保护。这个保障全面的安全服务为STM32应用开发者,以及合作夥伴资产提供从设备开发制造到安装现场全方位的保密和完整性保护。

这个解决方案亦适用於与人工智慧用相关之范例,其中,在边缘装置上运行的神经网路模型,搭配ST Secure Manager的安全保护,同时透过云端完成模型训练和安全更新。STM32Trust TEE Secure Manager让系统安全变得更强大而且更易於使用。

STM32Cube生态系统配合STM32H5微控制器为开发人员开发符合未来法规,以及标准的物联网应用提供了一个强大而安全的平台。STM32H5於2023年3月推出,是第一个支援Secure Manager的微控制器,目标应用是PSA三级和SESIP三级认证。

X-CUBE-AZURE-H5已经开放下载。…

用ChatGPT可以练英文口说?使用「voice conversations」让你有个随身家教

ChatGPT的App有一个我很常利用的功能,就是「语音输入」,透过提问时可以语音输入,加上ChatGPT的文字修饰,可以帮我快速记录会议逐字稿,或是记录想法後转成文章、报告(可参考:利用ChatGPTApp写语音笔记,提升输出效率的秘密武器)。而现在ChatGPT的手机App又多出了新功能,不只可以输入,还可以「模拟跟真人进行语音对话」。

近期ChatGPT提供Plus付费用户很多更新,其中一个是行动版本中的「voice conversations」,开启这个功能後,ChatGPT会用一个「模仿真人语气」的AI跟我们进行来回语音对话,我只要直接说出我的提问,ChatGPT就会用拟真语音进行回答。

ChatGPT近期新功能:

  • ChatGPT图文混合提问9种超能力:程式、教育、学习到行销应用
  • ChatGPTDALL-E3的7个特殊AI绘图应用教学,胜过Midjourney

操作过程也非常简单,在一个对话串「右上方」,开启「voice conversations」功能按钮。

图片来源:作者提供

首先是进入「听」的模式,我们可以说出提问,只要停顿久一点,就会送出我们的提问。(所以可以自然对话,而不用繁琐操作。)

图片来源:作者提供

接着ChatGPT会分析刚刚的提问并生成内容,生成後,就会用模仿真人的语气,「说」出回答。然後继续进入听、说循环的问答模式。

图片来源:作者提供

我获得这个功能後实际测试,ChatGPT「模仿真人语气」这一点做得非常棒,不仅口条上像是真的人,而且还会学真人一样停顿、有语助词等等,我们真的可以感觉就像和一个真人聊天一样。并且「voice conversations」支援多国语言,英文、中文等还可以混合对话。

不过,如果只是为了提问与获得回答内容,我觉得还是自己语音输入问题,然後ChatGPT直接用文字回答,整个流程的速度更快,我也能更有效从文字中获得我需要的内容。

这样的话,「voice conversations」可以拿来做什麽应用呢?

於是我想到了一个可能的应用方式,就是把自己其中一个ChatGPT对话频道,设计成「英文会话练习App」。我的想像是:

  • 会有一个英语教练,可以用语音一问一答的方式,问我问题,然後我回答。
  • 教练确认答案後提供修正,继续问下一个问题。
  • 在这样的过程中,复习我需要的英文会话例句。
  • 这整个过程,不是用文字输入,而是用ChatGPT「voiceconversations」功能,实现一来一往的语音对话。

以下就是我实验成功的一个版本,提供有兴趣的朋友参考。

图片来源:作者提供

首先,我们需要先做一些基本设定。

因为ChatGPTApp上的「voiceconversations」速度没有想像中快,来回对话过程其实需要一些时间,AI看似会等生成出完整内容後,才开始说话。所以如果要流畅对话,要注意下面细节:

  • 采用GPT3.5,让内容比较快生成完毕。
  • 无法问太复杂的问题,以及生成太多内容的回答,因为这样AI往往想到一半就会卡住、断掉,或是要等待太久。
  • 如果跟我下面的范例一样,要做英文会话练习,可以到设定中把「Speech-MainLanguage」设定为「English」。
    • 这时候还是可以中英文穿插对话,但主要语言会辨识为以英文为主。

图片来源:作者提供

接着,如何利用ChatGPT设计一个英文对话练习App呢?

首先我使用下面这段提示语,先把我想要练习的「英文对话例句」输入,让ChatGPT先记住,这样等一下才知道要出什麽题目跟我进行会话练习。

我这边用和孩子一起练习英文会话为例子,可延伸参考:「父母如何用ChatGPT设计孩子的英文单字考卷、会话测验学习单?」。

接着,我利用下面的提示语,让ChatGPT学会出题的逻辑:

  • 请AI根据上述例句,自动出生活情境题。
  • 请AI每出一题都等我回答,然後才出下一题。
  • 给他一个出题的范例,让他自己学会出题逻辑。

这部分,先在ChatGPT网页端用文字提问设定完成。…

非红供应链需求发酵 台系无人机厂忙布局

无人机产业在商用方面持续成长,军用无人机在地缘政治情势紧张之际,成为受瞩目的设备。台湾的国防部於2022年公告将向民间厂商采购军用商规无人机,除了要求产品不得采用中国供应的零组件,产品也需要通过由TTC制定的「无人机资安保障规范」。一时之间,「非红供应链」与「资安」成为台湾无人机产业的两大关键字,也为厂商带来新的机会与挑战。……

安立知现场测量VRU保护系统5G通讯品质

Anritsu 安立知在2023年10月23日至27日於美国底特律举行的5G汽车协会会议(5GAA Symposium)上,针对弱势道路使用者(VRU)保护系统展示使用的 5G 通讯品质进行现场测试。

弱势道路使用者包括行人、自行车等,全球对於使用车联网(C-V2X)技术来预防车辆事故的兴趣与日俱增。国际组织5GAA一直在研究使用基於5G网路通讯来预防事故的方法,该通讯为与VRU之间的合作通讯。相较於基於车载的方法,透过5G网路通讯可望针对盲点(例如车载感测器有效侦测范围之外和建筑物阴影等)提供保护。

这项VRU保护系统的展示用於测量自动驾驶车系统,在底特律的M City举行。在展示之前,Anritsu安立知将先行测量会场和伺服器之间的5G通讯网路品质。延迟和封包遗失是确保VRU保护系统所使用网路可靠性的关键要素。另一方面,在实际驾驶情况下,建筑物等结构将会降低通讯品质,因此为了确保VRU保护系统的正常运行,就必须事先针对会场多点测量来确保通讯品质。

Anritsu安立知在展示会场使用其精巧的高性能便携式测试仪MT1000A,并在伺服器端使用基於软体的测量功能,以便在会场内移动时为网路品质进行高再现性的定量测量。此外,将测量取得的资料绘制在地图上,能够一目了然地确认每个地点的网路品质。

未来,Anritsu安立知将持续为确保自动驾驶车辆和VRU保护系统使用的网路品质做出贡献。…

3D电晶体架构不断翻新 制程微缩还能继续走下去

由於制程微缩的技术难度越来越高,半导体业界在过去十年,已两度大改电晶体的结构设计,以创造出更大的微缩空间。也由於电晶体的结构设计将对电路微缩的潜力产生决定性影响,到2030年代初期,我们或许还将再看到一次电晶体结构的大幅转变。……

美拟扩大禁止对中出口辉达高阶AI晶片,含弱化版本A800及H800

(中央社)拜登政府昨(17)日表示,美国计划扩大禁止向中国出口由半导体大厂辉达(NVIDIA)等企业设计的先进人工智慧晶片,防止北京取得美国尖端科技来强化军事发展。

《路透社》报导,美国高阶官员昨晚曾在新闻发布会上形容,这些规定将进一步限制先进晶片及晶片制造工具出口到伊朗、俄罗斯等国家,并将两家涉及先进晶片制造的中国企业列入黑名单。

美国商务部长雷蒙多(Gina Raimondo)昨日表示,新规定目的是藉由解决去(2022)年10月晶片出口管制措施的漏洞,来抑制中国军事发展,未来可能至少每年修正一次。

雷蒙多说,新规定意在限制中国取得可能有助其人工智慧(AI)及精密电脑发展突破的先进半导体,这些技术对中国军事应用而言十分关键。但她强调,美国政府不寻求伤害中国经济。

美国与中国数年来深陷科技战,美国政府去年10月公布晶片出口管制措施,导致这两个超级大国间紧张关系近一步升温。

AI晶片设计巨擘辉达推出的弱化版本A800及H800晶片,符合美国先前宣布的规范,持续销售给中国。同样受规范影响的超微(AMD)已表示,打算采取相同策略。

《路透社》报导,这次新规定为了涵括更多晶片而修改管制范围,辉达的A800及H800晶片将受到影响。美国财经媒体《CNBC》报导,美国高阶官员指称,新规定将限制辉达A800和H800晶片的出口。

不过,这次新规定将豁免用於笔电、智慧型手机及游戏的多数消费类晶片,但部分晶片仍需美国官员发出的许可及通知。

上述官员还指出,新规定还将先进晶片出口应取得许可的要求扩及40多个其他国家。先进晶片有辗转经过这些国家流到中国的风险,且这些国家也受到美国武器禁运的限制。

美国政府也对中国以外的21个国家,祭出取得晶片制造工具应获许可的要求,并扩大对中国的设备禁止出口清单。

新闻来源

  • 美拟扩大禁止对中出口辉达高阶AI晶片 含A800及H800(中央社)

Google Cloud提供智财免责防护,让客户使用AI服务不用担心被告

Google

为让企业用户安心使用AI服务,Google Cloud宣布提供AI免责防护,让客户不用担心使用到版权内容被告。

今年8月Google推出付费Duet AI服务,是整合到Google Cloud产品从Workspace到Cloud Platform的AI助理,也强化了AI模型服务Vertex AI,协助用户运用及训练基础模型。这些服务能让企业运用AI生成,像是行销文案、广告图片、或是电子邮件等等。最新服务则再进一步,防止客户遭遇到版权方面的法律责任。

新服务包含二部分。第一部分和Google使用的训练资料有关,第二部分则着重基础模型的生成产物。训练资料的免责涵括所有Google用来打造其生成模型的资料集,当有第三方单位宣称客户侵害了其智财权,责任全由Google承担。

第二部分则是当用户使用Google AI服务的输出结果被第三方单位宣称侵害其版权时,责任归属在Google。这项免责防护适用於Google Workspace及各种Google Cloud服务使用的Duet AI,涵括Google Docs和Gmail(产出物为文字)、Google Slides、Google Meet(产出为图片)中的Duet AI、协助开发App的Google Cloud Duet AI、Vertex AI Search、Vertex AI Conversation、Vertex AI Text Embedding API/Multimodal Embeddings、Vertex AI的Visual Captioning视觉字幕/Visual Q&A,以及Codey API等。

不过Google强调,免责的前提是企业用户本身没有侵权意图,而且在负责任的AI使用下,有使用现有或发展中的工具加以引述来源。

透过在Google Workspace及Google Cloud新增的免责防护,客户无需修改现有合约,也能自动获得免责防护。Google表示这只是第一步,该公司正在研发让用户安心使用其AI服务的方法。…