Workflow
自然语言处理
icon
搜索文档
一个「always」站在大模型技术C位的传奇男子
量子位· 2025-05-10 02:39
核心观点 - Noam Shazeer(沙哥)是Transformer八位作者中被公认贡献最大的一位,其工作奠定了当今大语言模型的基础[9][10] - 沙哥的技术预判能力极强,多次提前数年看到技术趋势并推动关键突破,如Transformer、MoE、Adafactor等[17][24][40] - 沙哥的职业生涯与谷歌深度绑定,期间主导了多项核心技术研发,如谷歌广告系统、垃圾邮件检测系统等[55][56][58] - 沙哥曾短暂创业Character.AI并获得10亿美元估值,后以27亿美元被谷歌收购并回归领导Gemini项目[67][69] 技术贡献 Transformer架构 - 沙哥在2017年加入Transformer项目后重新编写了整个代码,将系统提升到新水平,论文《Attention Is All You Need》引用量超17万次[18][21][23] - 该论文打破了学术界作者排序规则,八位作者随机排序并标注平等贡献,但沙哥的加入发挥了举足轻重的作用[23] MoE技术 - 沙哥早期与Geoffrey Hinton等合作的研究为MoE(专家混合)新范式埋下伏笔,提出1370亿参数的MoE架构[26][27] - 2020年参与GShard研究,将MoE模型扩展到6000亿参数[30][31] - 2021年Switch Transformers将参数规模推至1.6万亿,速度比T5-XXL快4倍[33][34] - 2022年ST-MoE-32B稀疏模型参数达2690亿,计算成本仅相当于320亿参数密集型模型[37] 其他关键技术 - 提出Adafactor优化器,早期谷歌大模型如PaLM都依赖该技术[43] - 发明Multi Query Attention(MQA)解决Transformer推理效率问题[44] - 提出Gated Linear Layer(GLU)改进Transformer架构的表达能力[46][47] 职业轨迹 谷歌生涯 - 2000年加入谷歌成为第200号员工,开发了谷歌广告系统PHIL和首个垃圾邮件检测机器学习系统[55][56] - 2012年加入Google Brain后转向深度学习,推动神经机器翻译落地[58] - 2023年回归谷歌担任Gemini联合技术主管[59] 创业经历 - 2021年因谷歌未发布LaMDA项目与同事创立Character.AI[62][63] - 公司以"AI角色"概念获得2000万用户,2023年以10亿美元估值融资1.5亿美元[67] - 2023年8月被谷歌以27亿美元收购,沙哥回归领导Gemini[69] 行业影响 - 当前主流模型架构(如GPT-4、DeepSeek、Qwen3等)均建立在沙哥奠定的技术基础上[12][41] - 2020年内部信预测语言模型将主导全球算力,这一判断已被验证[72][73] - 曾担任OpenAI早期顾问并推荐Sam Altman担任CEO[70][71]
海能投顾大数据中心打造精准投资决策支持系统
搜狐财经· 2025-05-08 11:57
金融大数据中心建设 - 公司投入逾2亿元建设分布式计算集群 具备每日处理10PB级金融数据的能力 [1] - "数据立方"系统整合传统金融数据、另类数据及卫星遥感信息等多元数据源 [1] - 独家开发的商业活力指数通过分析全国3800个商圈的手机信令数据 提前2-3个季度预测消费趋势变化 [1] 数据分析技术应用 - 自然语言处理引擎实时解析全球76种语言的财经资讯 情感分析准确率达92.4% [1] - 美联储议息会议纪要解读中 系统30秒内完成300页文档结构化处理 效率较人工提升400倍 [1] - "因子工场"平台沉淀超过1200个有效阿尔法因子 多因子模型在A股市场实现年化21.3%收益 [1] 投资决策支持系统 - 数据中台采用微服务架构 策略回测时间从3天缩短至2小时 [2] - 2023年平台支持产出187个有效投资策略 其中63个投入实战并取得优异表现 [2] - 正在测试量子计算在组合优化中的应用 预计将大规模资产配置求解时间从数小时压缩至分钟级 [2] 创新因子研发成果 - 独创"产业链传导因子"通过分析上下游企业订单数据 成功捕捉新能源行业三次重大拐点 [1] - 商业活力指数在2023年消费板块布局中取得超额收益达15.2% [1]
2025年中国智能呼叫服务平台行业发展现状及未来发展趋势研判:其于AI技术智能呼叫服务平台将逐渐成为主流,行业将更智能、更人性、更融合[图]
产业信息网· 2025-04-29 01:35
内容概要:智能呼叫服务平台是基于人工智能(AI)、自然语言处理(NLP)、大数据分析和云计算等技 术构建的智能化客户交互系统,作为客户服务的重要渠道,各行业对呼叫服务平台的需求越来越大。近年 来,随着人工智能(AI)、自动化技术的不断进步,全球智能呼叫服务平台市场取得了迅速发展,AI智能呼 叫服务平台将逐渐成为主流。2024年,全球智能呼叫平台市场规模为32.2亿美元,基于AI的智能呼叫服务 平台市场规模为17.7亿美元;预计2025年,全球智能呼叫平台市场规模约40亿美元,基于AI的智能呼叫服 务平台市场规模约22.5亿美元。受益于数字化转型、AI技术成熟和政策支持,我国智能呼叫服务平台正 从"基础自动化"向"认知智能"演进,目前,我国已成为全球最大基于AI的智能呼叫服务平台市场。2024年 我国基于AI的智能呼叫服务平台市场规模为30.3亿元,预计2025年有望达到40亿元。 上市企业:科大讯飞(002230)、腾讯控股(00700)、阿里巴巴-W(09988)、百度集团-SW(09888) 相关企业:阿里云计算有限公司、百度云计算(上海)有限公司、腾讯云计算(北京)有限责任公司、思 必驰科技股份有限公司 ...
中国工商银行申请基于自然语言处理的交易汇路匹配专利,解决金融交易中自动匹配汇路的问题
搜狐财经· 2025-04-02 04:52
文章核心观点 中国工商银行申请“基于自然语言处理的交易汇路匹配方法及装置、电子设备”专利,该专利可解决无成交单金融交易无法自动匹配汇路的问题 [1] 公司信息 - 公司成立于1985年,位于北京市,从事货币金融服务 [2] - 企业注册资本35640625.7089万人民币,实缴资本24800000万人民币 [2] - 公司共对外投资30家企业,参与招投标项目5000次 [2] - 公司有商标信息981条,专利信息5000条,拥有行政许可76个 [2] 专利信息 - 专利名称为“基于自然语言处理的交易汇路匹配方法及装置、电子设备”,公开号CN 119741107 A,申请日期为2024年12月 [1] - 方法包括检测新金融交易结果及摘要,未检测到成交单时启动汇路自匹配机制,提取交易要素集合,与现金汇路映射表匹配,选匹配饱和度最高且符合规则的汇路完成清算 [1] - 该专利解决了无成交单金融交易无法自动匹配汇路、影响处理效率和导致清算风险的问题 [1]
斯坦福大学:人工智能百年研究报告,2030年的人工智能与生活
欧米伽未来研究所2025· 2025-04-01 15:17
文章核心观点 - 斯坦福大学AI100项目首份报告《人工智能与生活2030》为审视未来十几年AI融入日常提供理性视角,AI虽有潜力带来积极影响,但也会带来社会、伦理和法律挑战,需制定政策引导其发展 [3][18] 百年之约:AI100项目的缘起与使命 - AI100项目源于对AI领域快速发展及其深远社会影响的认识,受2008 - 2009年AAAI组织的“阿西洛马会议”启发而生 [4] - 项目设立常设委员会,计划每五年组织专门研究小组评估AI,目标是为AI研究、开发、设计和政策制定提供指导,确保AI惠及个人与社会 [4] 首份报告研究小组及任务 - 首份报告研究小组由17位AI专家及多领域学者组成,背景多元确保研究广度与深度 [5] - 常设委员会要求研究小组聚焦AI到2030年对“典型的北美城市”生活的影响,选择城市和限定北美是为深入探讨特定背景影响并承认全球城市多样性 [5] 揭开AI的面纱:它是什么,不是什么 - AI是一门科学和计算技术,灵感源于人类神经系统和感知等方式,但运作方式与人类不同,精确定义AI有挑战 [6] - 当前AI在特定任务上进展显著,如深度学习、计算机视觉、自然语言处理、AI规划等,但并非“通用人工智能”,缺乏人类常识等能力,不会对人类构成迫在眉睫威胁,应期待其积极影响 [7][8] AI渗透八大领域:2030年城市生活图景 - 交通运输领域,到2030年自动驾驶汽车将更普遍,会改变城市面貌、缓解交通问题,但面临安全性和可靠性挑战,公众对AI的认知可能由此塑造 [9][11] - 家庭/服务机器人领域,未来十五年会出现更多特定用途机器人,但制造通用型机器人面临技术和成本障碍,近期商业机会集中在特定应用 [11] - 医疗健康领域,AI可利用健康数据进行疾病预测等,有望改善数百万人健康和生活质量,但从实验室到临床应用速度较慢,面临数据隐私等挑战 [11] - 教育领域,AI能为教育带来个性化变革,但设计有效AI系统面临挑战,需关注教育资源平等和内容准确性等问题,人机交互顺畅性和信任度是关键 [10] - 低资源社区领域,AI可帮助优化资源分配等,但应用设计可能忽略社区特殊需求或加剧不平等,确保技术普惠性和建立社区信任至关重要 [10] - 公共安全与安防领域,AI用于犯罪预测等引发隐私和偏见担忧,需在提升安全效率与保护公民权利间取得平衡,公众信任是基石 [12] - 就业与职场领域,AI会自动化部分工作冲击现有岗位,但也会创造新岗位和增强人类能力,社会需适应转变,克服人们对被边缘化的恐惧 [12] - 娱乐领域,AI已深度融入娱乐产业,未来会有更具交互性和沉浸感的形式,但可能带来社交隔离等社会风险 [12] 超越技术:AI的社会挑战与政策前瞻 - AI发展带来公平性与偏见、隐私、安全与可靠性、责任归属、经济影响与分配、人机关系等社会、伦理和法律挑战 [13][14] - 报告提出政策建议,包括提升政府AI专业能力、鼓励对AI社会影响的研究、避免对“AI”笼统监管、促进透明度和公众信任、关注公平与普惠 [14][15][17] 结语:面向2030的理性期待与责任 - 报告描绘了AI融入城市生活带来便利和挑战的未来图景,将讨论焦点拉回现实,提醒人们AI未来掌握在自己手中,需积极引导其发展 [18] - AI100项目才刚开始,当下应理解报告洞察与建议,塑造负责任、可持续、以人为本的AI未来 [18]
12家A股上市行晒科技赋能成绩单:有的投入200多亿,有的增长近30%
搜狐财经· 2025-03-28 14:11
银行业数智化转型概况 - 银行业迎来数智化转型浪潮,12家银行已公布2024年财报 [1] - 行业呈现"重投入、扩人才"的竞争态势,聚焦产品端、业务端、流程端等具体场景 [2] - 不同梯队、类型银行的转型路径存在显著差异,呈现"马太效应"与"差异化破局"并存格局 [3] 银行科技投入情况 国有大行 - 中国银行信息科技投入238.09亿元,占营收3.76%,同比上升0.27个百分点 [2] - 邮储银行科技投入122.96亿元,同比增长9.03%,占营收3.53% [2] - 交通银行科技投入114.33亿元,同比下降4.94%,但占营收比重达5.41%,为六大行最高 [2] 股份制银行 - 招商银行科技投入133.5亿元,占营收4.38%,同比下滑0.21个百分点 [3] - 中信银行投入109.45亿元,占营收5.12%,同比下滑0.78个百分点,但2023年曾达121.53亿元 [3] - 兴业银行投入83.77亿元,占营收3.95%,同比微降0.03个百分点 [3] 中小银行 - 重庆银行科技投入5.74亿元,同比增长20%,占营收4.2% [3] - 常熟银行投入3.85亿元,同比增长27.65%,占营收3.53% [3] - 瑞丰银行投入3.85亿元,同比增长15.20%,占营收2.96% [3] 银行科技人才储备 - 中国银行科技条线员工14940人,占比4.78%,增加2234人 [4] - 邮储银行IT队伍超7200人,占比3.6% [4] - 交通银行科技人才9041人,占比9.44%,增长15.70% [4] - 招商银行研发人员1.09万人,占比9.3% [4] - 兴业银行科技人员7840人,占比13.51% [4] - 中信银行科技人员5832人,占比8.91% [4] - 平安银行技术人员6389人,占比15.58%,增长11.33% [4] - 常熟银行科技人员336人,占比4.52%,增长16.89% [5] - 瑞丰银行科研人员占比6.50%,增长12.30% [6] - 青岛银行科技研发人员342人,占比6.69% [6] - 重庆银行金融科技人才245人,占比4.59% [6] 科技赋能业务场景 - 中国银行新增900个业务场景,RPA覆盖3000个场景,节约人力超8万人月 [9] - 交通银行手机银行MAU突破5500万,普惠信贷线上渠道业务增量占比提升80% [9] - 邮储银行"邮小助"交易机器人成交金额超2000亿元,交易效率提升94% [11] - 招商银行大模型应用场景超120个,发布百亿级金融大模型"一招" [11] - 平安银行AI坐席服务量18.4亿次,覆盖80%客服总量 [11] - 中信银行AI落地场景超1600个,大模型孵化80项创新应用 [12] - 兴业银行大模型在70多个场景见效,孵化"兴小二"债券交易机器人 [12] - 重庆农商行"渝农资产智管"服务覆盖全市100%农村集体经济组织 [13]
智能交互的伦理边界与商业想象:AIGC聊天机器人:对话未来革命
头豹研究院· 2025-03-17 12:03
行业投资评级 - 行业处于快速发展阶段 预计未来十年市场规模持续扩大[1] - 技术驱动型行业 资源向头部企业聚集 竞争趋于垄断[1][41] 核心观点 - AIGC聊天机器人行业通过模拟人类语言交流 结合自然语言处理技术 提供个性化交互体验[1] - 自2022年ChatGPT推出后行业进入快速发展阶段 展现出多元化使用场景[1] - 全球生成式人工智能市场预计从400亿美元增长至1.3万亿美元 中国市场规模2022年为4亿元人民币 预计2027年增至326亿元人民币 复合年增长率136.3%[39] - 中国AIGC聊天机器人行业市场规模预计从2024年25.08亿元增长至2029年614.21亿元 年复合增长率89.58%[36] 行业定义 - 聊天机器人是通过文本、语音或多模态形式与用户交互 模拟人类语言交流的计算机程序[2] - 基于生成式人工智能技术的AIGC聊天机器人以Transformer架构为核心 结合NLP、NLU和NLG技术 能够深度解析并生成自然语言[2] - 2022年ChatGPT推出引领全球产业发展 2023年中国加速生成式大模型迭代 2024年逐步在教育、医疗、企业服务等垂直领域深入应用[2] 行业分类 - 基于模型类型可分为语言模型聊天机器人和多模态聊天机器人[4] - 从功能与应用场景角度可分为会话型智能聊天机器人和定制化智能聊天机器人[4] - 语言模型聊天机器人具备强大的文本理解与生成能力 广泛应用于情感分析、语音识别、信息抽取、广告生成和对话生成等场景[5] - 多模态智能聊天机器人能够同时处理文本、图像、语音等多种数据 并进行深度的语义理解和交叉模态处理[5] 行业特征 - 多元化使用场景:覆盖消费领域(智能家居控制、社交媒体交互、电子商务个性化推荐)、企业应用(客户服务、销售支持、流程自动化)及行业应用(医疗、房地产、酒店旅游、政府服务)[9] - 技术驱动:依赖四层技术架构(芯片层、框架层、模型层、应用层)和数据飞轮机制优化模型性能[10] - 高投入:大模型研发与训练需投入巨额资金 例如百度在"文心一言"上累计研发投入超1,400亿元 OpenAI在GPT-3训练中投入约1,200万美元[11] - 高门槛:涉及算法优化、大模型训练、算力资源及数据积累等关键环节 仅少数技术能力雄厚的企业能占据一席之地[12] - 区域性:北京、上海、广东三地备案产品数量分别占比31.1%、27.2%和11.7% 形成具有国际竞争力的产业集群[13] - 政策驱动发展:中央与地方通过多层次政策体系加速人工智能产业建设 全国已有16个省级行政区出台人工智能专项政策[14] 发展历程 - 初始阶段(20世纪60年代):ELIZA通过关键词匹配实现简单对话[15][16] - 语言引入阶段(20世纪90年代):ALICE引入AIML拓展开发框架[15][17] - 深度学习阶段(21世纪初):苹果Siri和微软Cortana提升语音识别与语言理解能力[15][18][19] - 生成式AI阶段(2020年代):大模型技术突破使AIGC聊天机器人进入新时代 文本生成和逻辑推理能力显著提升[15][20] 产业链分析 - 上游:算力芯片(GPU、ASIC、FPGA)和基础数据服务 国产芯片华为昇腾910和寒武纪MLU系列性能接近英伟达A100[21][22][29] - 中游:算法模型和技术框架(NLP大模型、多模态模型、计算机视觉) 百度文心与华为盘古大模型已在金融、医疗等行业广泛应用[21][22][31] - 下游:覆盖金融、医疗、教育、零售电商等领域 通过AIGC聊天机器人提供智能化解决方案[21][22][34] - 产业链成熟度:上游较弱(本土芯片出货量占比10%)、中游突破(国产框架市场份额提升)、下游领先(传统领域应用成熟)[23][24] - 算力需求:中国在用算力中心超过830万标准机架 算力规模达246EFLOPS 预计2025年突破300EFLOPS 智能算力占比35%[27] 行业规模 - 全球生成式人工智能市场预计从400亿美元增长至1.3万亿美元[39] - 中国AIGC市场规模2022年4亿元 预计2027年增至326亿元 复合年增长率136.3%[39] - 中国AIGC聊天机器人行业市场规模预计2024年25.08亿元 2029年614.21亿元 年复合增长率89.58%[36] - 截至2024年6月 中国2.3亿人使用过生成式人工智能产品 占总人口16.4% 20-29岁用户使用率40.5% 大专及以上学历人群使用率44.0%[40] 竞争格局 - 三级阶梯式分布:第一梯队(抖音豆包、百度文心一言)、第二梯队(月之暗面Kimi)、第三梯队(阿里通义千问、昆仑万维天工AI)[46] - 头部企业优势:百度文心大模型拥有超过3,800项专利 抖音豆包日均token使用量达4000亿[48][69] - 资本支持:2023年上半年生成式AI相关企业完成51笔融资 融资总额超1,000亿元人民币 单笔融资金额超1亿元案例达18笔[49] - 中小企业错位竞争:聚焦教育、医疗、游戏和金融等垂直领域 例如氪信金融大模型帮助银行涉案账户量下降50%[52][53] 政策梳理 - 《关于加快场景创新以人工智能高水平应用促进经济高质量发展的指导意见》:推动AIGC在智能客服、教育、医疗等领域应用[44] - 《生成式人工智能服务管理暂行办法》:规范生成式AI服务 强调合法数据使用、知识产权保护和隐私安全[44] - 《国家人工智能产业综合标准化体系建设指南(2024版)》:构建覆盖基础数据服务、算力中心和算法优化的全链条标准化体系[44] 上市公司分析 - 百度集团:营收规模4.5千亿元 同比增长10.8% 文心大模型4.0在理解、生成、逻辑和记忆四个方面展现显著优势[60][65] - 抖音有限公司:豆包模型日均token使用量增长33倍 达4000亿token数 输入价格0.0008元/千tokens[69] - 商汤集团:营收规模1.8亿元 毛利率72.8%[56] - 阿里巴巴集团:营收规模4.6千亿元 同比增长12.9%[56] - 昆仑万维:营收规模12.1亿元 毛利率78.4%[61]
AI大家说 | 从“搜一搜”到“问一问”,搜索引擎正被重新定义
红杉汇· 2025-03-16 07:44
文章核心观点 AI搜索凭借技术优势提升用户体验,改变搜索行业格局,未来发展趋势多样且充满机会,传统搜索引擎面临挑战需创新[1][3][5] AI搜索特点及格局变化 - AI搜索能精准捕捉用户查询意图,提供定制化结果,打破传统线性检索模式,提升用户体验 [1] - AI重新定义信息获取范式,搜索与AI融合,AI搜索朝着一站式平台发展 [3] - 封闭式AI存在内容幻觉和过程失控短板,“LLM +搜索”模式完成搜索到创作闭环,改变搜索行业竞争格局,预计到2026年传统搜索引擎访问量下降26%,新玩家入场打破“寡头效应” [4][5] AI搜索未来趋势与机会 产品力是竞争力 - 简约化产品设计和一站式服务满足用户需求,是AI搜索发展重要趋势 [7] 信息一体化处理产品形态 - AI搜索与其他AI工具跨界融合,提供实用个性化功能,升级用户体验 [8] - AI搜索突破传统文字搜索束缚,提供跨模态搜索体验,演化为全能型智能助手 [8] - AI搜索呈现多端协同趋势,突破设备边界,走进全新应用场景 [8] 场景垂直“专、精、深” - 用户需求推动AI搜索场景垂直化,垂直搜索满足细分需求,构建企业“护城河” [9] 新商业模式的探索 - 商业化能力创新是AI搜索待解决问题,用户通过AI搜索形成入口导购商业化已有先例 [10] - AI搜索与企业级市场结合,为企业提供定制化搜索解决方案,提供新盈利渠道 [10] 传统搜索引擎的挑战 - 传统搜索引擎需创新,加入AI模型插件提升用户体验,稳固行业心智地位 [12] - AI助手是传统搜索引擎最强挑战者,具备深度思考和联网搜索功能,承载泛搜索需求 [12] - AI搜索新势力提供全新搜索体验,理解自然语言,提供实时准确答案 [12] - 平台型互联网企业扩张搜索市场心智,接入大模型发挥内容潜力 [13] - AI搜索发展关键在于通过RAG解决问题,但依赖传统搜索引擎信息,数据处理难度大 [13]
AI网红,24小时无休,年入7000万
创业邦· 2025-03-01 09:42
以下文章来源于乌鸦智能说 ,作者智能乌鸦 乌鸦智能说 . 人人都能读懂的AI商业 来 源丨乌鸦智能说(ID:wuyazhinengshuo) 作者丨朗朗 图源丨Midjourney 今天带你们见识下新时代的永动机——AI网红。 她们不会疲惫,永不塌房,还能24小时创造现金流,堪称资本家眼中完美的"打工人"。 当所有人还在摸索用AI赚钱的正确姿势,AI网红率先找到了专属的生态位: 从年入千万美元的顶奢代言,到OnlyFans上的AI分身代聊,再到小红书上AI猫狗博主靠"云养宠"狂揽品 牌商单…… 开发超过70产品的硅谷狂人Levelsio说,"AI网红现在正迅速成为一门大生意"。 预计到2030年,AI网红的市场规模将达到450亿美元。这几乎是现在网红市场的两倍。 各位打工人请系好安全带,今天我们要解剖这个赛博奇观:一群不会呼吸的电子生命体,正在用代码重 构"劳动"的定义。 从时尚博主到AI分身 解锁AI网红赚钱姿势 当大部分AI初创公司还在摸索商业模式,AI网红的变现方式早已五花八门:不仅有品牌代言与联名、情 感经济与订阅服务、还有数字资产衍生产品等等。 接下来,就跟着乌鸦君一起来看看吧。 1、时尚、颜值博主 ...