東京海上日動が中小企業向け営業に生成AI活用／一橋大学による位置情報データ解析人材育成

LayerX AI・LLM Newsletter (2024/10/23-10/29) #270

今週の注目トピック

AI利活用最前線では、東京海上日動による、中小企業向け営業への生成AI活用、などを紹介しています。

データ利活用最前線では、一橋大学による、次世代の位置情報データ解析人材育成、などを紹介しています。

今週のLayerXでは、バクラク申請・経費精算の外貨のAI-OCR読み取り、バクラク請求書受取のAIによる「請求書分割機能」リリースなどを紹介しています。

Section1: AI利活用最前線

●テクノロジー

• LLMs as a Judge gpt-4o編

• オープンLLMのLLM as a JudgeにおけるJudgeモデルとしての性能を検証してみる

• Difyでのワークフロー作成を効率化したいなら「Diflowy」は要チェック。Difyワークフローのコミュニティプラットフォームで、ワークフロー共有や他ユーザーがどうワークフローを作っているか勉強になる

• エージェントで手堅いのは提案書や報告書作成、分析レポート作成、社内質問応答など調査や思考整理を要する領域ですかね

• Agent S: コンピュータを人間のように使うOpen Agent Framework

• 最近はGoogle Geminiの無料枠を筆頭にLLMのAPI料金の値下げが激烈です

• Difyがまたもやアップデート！今回のアプデでボタンが追加可能に！！！

• バックオフィスタスクの自動化「CrewAI」

• なぜSaaSが死ぬか。ユーザー体験はエージェントとの対話に移行し、バリューはAPI経由で提供され、ソフトウェア開発は秒殺に

• v0、プロンプトにURLが含まれている場合に、出力を改善するためにウェブページのスクリーンショットを撮るように

• Before vs. After："このスクリーンショットからUIを再作成してください。" 

• webサイトのURLを渡して「再現して」と伝えると、v0が自動でスクリーンショットを撮ってからデザインの再現をしてくれます！

• AIチャットボットサービスの推計マーケットシェア

• 「AI科学者」が数時間で論文執筆　サカナAIがシステム

• Agent S: コンピュータを人間のように使うOpen Agent Framework

• AIエージェントのリスト、まとまっていてありがたい（図）

• 「AIエージェント」続々登場　富士通やNTTデータ提供、仕事の進め方に変化迫る　編集委員　吉川和輝 - 日本経済新聞

• LLMアプリケーションからAgenticアプリケーションの時代へ〜「LangChainとLangGraphによるRAG・AIエージェント［実践］入門」の出版に寄せて

• コーディングを必要とせず、人間のようなAI アシスタントを大規模に構築できるSynthflowがSynthflow Voice 2.0を公開

●テクノロジー（論文）

• LLMには自身の指示違反の認識能力に限界があることが指摘された。

• LLMには正しい答えだけでなく、よくある間違いとその理由も一緒に教えることで、性能が大幅に向上するとの実験報告

• AnthropicがPCを操作するAIエージェントを公開したが、こちらはブラウザを操作するWEBエージェントの研究

• モデルを学習する際、入力の並進や自己回転などに対する不変/同変性をモデルに埋め込むのでなく、学習時に緩和した制約ペナルティとしてマルチタスク学習で導入

• LLMにおけるデータ合成とデータ拡張のサーベイ論文

• Weekly AI Agents News!

• LLMへのプロンプトでは「質問文を文章の最初に置くだけで」理解力が大幅に向上するそうです

• LLMの思想的立場は、モデルの作成者の世界観を反映していて、中立でないことが明らかになった。

• LLMは算術計算を、アルゴリズムやデータの記憶ではなく"ヒューリスティックの組み合わせ"で解いているという報告が出た

• o1の能力をオープンに再現するプロジェクトの一環として、AIの新たな学習パラダイム"Journey Learning"が提案された

• LLMに外部ツールを使用させると幻覚（誤情報の生成）発生率が上がってしまうとの実験報告

• Weekly AI Agents News! のアーカイブ10月号を公開しました

• 拡散言語モデル(DLM)の論文

• LLMへの攻撃（いけないことを言わせるなど）は人間が工夫していた時代から”攻撃用のLLM”を使う時代にシフトしているとのこと

●提供ベンダー（OpenAI）

• ChatGPT検索機能、大幅アップデート！

• OpenAIがAgentic o1を使って、音声操作で地図を操作するデモを公開

• OpenAIの「Advanced Voice」、デスクトップアプリで利用可能に

• ChatGPT、デスクトップアプリで音声機能が利用可能に

• ChatGPT、チャット履歴の検索機能を実装

• ついにChatGPTウェブ版に検索機能が追加

• OpenAIが新しく策定したハルシネーションをどれだけ避けられるかの指標で、o1-preview がトップに

• OpenAIとAnthropicの収益構造比較

• Realtime APIを更新

• OpenAIのCookbookにLLM-as-a-Judgeを作るプロセス増えてた

• ChatGPTが新しい「検索」機能を正式導入！

• OpenAI製の検索エンジン「ChatGPT Search」を評価する

• OpenAIから公式Chrome拡張機能が登場！

• OpenAI AMAの内容まとめ

●提供ベンダー（Microsoft)

• Azure OpenAI ServiceにPrompt CachingとGlobal Batchがきた（GAした）！

• マイクロソフトのOmniParserのコードやモデルがアップされてる

• 「Microsoft Research 社長が語る、AIの3大課題とトレンド」未来を見据え、AIの限界に挑み続けるMicrosoft

• GitHub CopilotでGemini 1.5 Pro、Claude 3.5 Sonnetが選択可能に。OpenAIのGPT-4o、o1-preview、o1-miniにも対応

• GitHub CopilotがClaude やGemini、Perplexityと連携！！v0やboltの競合になるGitHub Sparkも！！

• GitHub、自然言語による指示だけでアプリケーションを生成する「GitHub Spark」テクニカルプレビュー公開

• GitHub Sparkの発表です！

• GitHubがソフトウェア生成SaaSに参入🤯 その名も「GitHub Spark」。

• GitHub CopilotのAIモデルとして「OpenAI o1-preview」「Claude 3.5 Sonnet」「Gemini 1.5 Pro」が選択可能になりOpenAI以外の選択肢が生まれる

• Microsoft 全体における Copilot の影響に関する新たな調査

●提供ベンダー（Google）

• GeminiがGoogle Driveに搭載されて、ファイル検索が超簡単に

• GoogleはChromeブラウザ専用のAIエージェントである「Project Jarvis」を早ければ12月にもプレビュー予定

• GoogleがPCエージェントを12月にもローンチ。Chromeのブラウザー上で、プロンプトで指示すれば様々なタスクを自動処理してくれる

• Google DeepMindから、AIが生成したコンテンツを見分けるための電子透かし、SynthIDがOSSで公開された。

• Google CloudのLLMOpsが超有益。『完全無料』で、データ収集からモデル作成、運用、監視までをカバーし、AIの精度と安全性を向上させる方法が学べる

• Googleより、プロンプト学習コースのGoogle Prompting Essentials

• Google DeepMindとHugging Face、LLM生成テキストに透かしを入れる技術「SynthID Text」を発表

• Google、「新規コードの25％以上はAIが生成」　ピチャイCEOが説明

• Googleより、プロンプト学習コースのGoogle Prompting Essentials

• CourseraでGoogle公式のプロンプトエンジニアング講座が公開されてる

• Google AI StudioとGemini APIで、Googleの検索エンジンの結果を使用して、AIが生成した応答、その回答の根拠URL、関連する検索提案を提供

●提供ベンダー（Anthropic）

• 「Computer User demo」を徹底解説。《Claude 3.5 sonnet、Haikuの性能、PC自動操作の活用事例30選》

• Claude、デスクトップアプリをリリース！

●提供ベンダー（Meta）

• MetaがNotebookLlamaを公開しました

• Metaから、AIエージェントの評価にAIエージェントを使う、Agent-as-a-Judgeが提案された

• MetaがPDFをアップするだけでポッドキャストが作れる画期的な技術を開発

●提供ベンダー（Perplexity）

• Perplexity、「Spaces」を大きく改善！

●提供ベンダー（Cohere）

• Cohere、世界の言語格差を埋める新AIモデル「Aya Expanse」をローンチ

●提供ベンダー（Apple）

• Apple IntelligenceをiPhone、iPad、Macで本日提供開始

• Apple Intelligenceが本日リリース、新時代の幕開け

●提供ベンダー（AWS）

• AWS、Github Copilotに対抗するAIコーディングアシスタント「in-line Q Developer」を発表

●提供ベンダー（AWS）

• SalesforceのAI Agentが画期的

●スタートアップ

• 生成AIで顧客サポート効率化　プレイド系が新サービス

• AI inside、「DX Suite」にAIエージェントを搭載、ユーザの代わりにデータの正確性を検証、人とAIが協働する「Work with Buddy」を実現へ

• Algomatic｜LLMプロダクト開発の新潮流 ～従来の開発との決定的な違いとは

• カラクリ株式会社｜ガートナーシンポジウムから見えた大企業のAI活用の本質

• Asanaワークフローの中で生成AIが作業を代行、「Asana AI Studio」発表

• 法務担当の3割が生成AIを活用、法的文書の翻訳・要約・ドラフトなど─LegalOn Technologies調査

• 面接に追われる人事さんへ！ギブリーがAI面接を導入に至ったワケ（AI人事ブログ#02）

●コンサル・SIer

• Snowflake・ブレインパッド・静岡銀行｜3社連携で営業活動の高度化・効率化をめざす「生成AIチャットボット」の開発に着手

• 電通総研｜生成AIの銀行業務における活用領域の可能性

• CAC、生成AI活用により業務効率化を目指す企業のアプリケーション開発をサポートする「生成AIアプリケーション構築支援サービス」を提供開始

• 電話での回答を生成AIが即時作成　NTTコムが2025年4月にも商用化

• 日立、日本オラクルと生成AIを活用した協創プロジェクトを実施

• 日立製作所｜安全管理業務の高度化を支援する生成AIソリューションを提供開始

  • （１）安全業務の担当者が、リスクアセスメント結果を記入

  • （２）担当者はリスクアセスメント結果を生成AIに入力し、記載内容の妥当性・正確性の判定を依頼

  • （３）生成AIがレビュー役として内容を確認し、評価結果として「OK / NG」の判定結果と、NGの場合、その理由などフィードバックを出力

●利活用事例

• People Analytics の領域は生成AIで一段加速しそうな領域

• 保険業界で導入進む生成AI、バリューチェーン全体を変革

• 経験の浅い社員をベテラン並みに、東京海上日動が中小企業向け営業に生成AIを活用

• 現場で生成AI本格活用/技術者約1000人が日常利用/大成建設

Section2: データ利活用最前線

●人流データなど

• ナウキャスト、決済や人流などのオルタナティブデータと企業の1st partyデータを組み合わせた出店分析ソリューション「MarketLens（マーケットレンズ）」を提供開始

• 一橋大学、KDDIらと連携し次世代の位置情報データ解析人材育成

Section3: 今週のLayerX

●AI・LLM事業部

• LayerX AI・LLM事業部 事業・プロダクト説明会 

  • LayerXのAI・LLM事業の採用イベントをやります！職種に関係なくご興味ある方はぜひ！

  • （エンジニア、デザイナー、エンプラセールス、プロジェクトマネージャー、BizDev、セールスエンジニア、etc.）

  • LayerXのAI・LLM事業責任者から、事業・プロダクトの現状や今後の構想、また各チームマネージャーからそれぞれの役割や実際に日々どのような仕事に取り組んでいるかをご紹介します！

• LLM生成文章の精度評価自動化とプロンプトチューニングの効率化について 

  • AI Engineering Decoded #4 で発表したスライドを公開しました。

• LayerXの新規事業・Bizdevに興味ある方ぜひお話ししましょー

• 「生成AI時代のプライバシーと個人データ保護」を開催します。

  • 生成AI時代の課題の一つとなっている「プライバシー」課題を深掘ります。

●バクラク

• バクラク申請・経費精算、外貨のAI-OCR読み取りが可能に。英語対応とあわせて、企業のグローバルビジネスを支援

  • 1.受取請求書の外貨対応

  • 2.経費精算の外貨対応

  • 3.申請・承認画面の英語化対応

• バクラク請求書受取、AIによる「請求書分割機能」をリリース。バクラク申請に続き、AI-UX機能を強化。

  • 複合機などでスキャンした紙の請求書をまとめて「バクラク申請」に取り込むとAIが自動で書類の分割箇所を推薦してくれるため、AIの推薦箇所を確認するだけで処理が完了します。

• Sansan・SmartHR・LayerX合同開催！責任者&Mgrが語る 営業組織の魅力と伸びしろ

• バクラクにおける可観測性向上の取り組み

• どんなシステムをつかってる？申請プロセス振り返りワークショップ

  • 申請・承認プロセスと仕組み化に関するワークショップ形式のセミナーやります！

●デザイン

• 11/14（木）開催の Spectrum Tokyo Meetup にて、LayerXバクラク事業部 デザイナー @_tararira が「Where to Start with a Design System Across Different Frontend Frameworks」の英語LTを行います！

• LayerX Designer が選ぶオススメ | 今欲しい、見た目やデザインが良い雑貨・家具【2024年11月】｜LayerX Design

• Communication Design Night vol.6【参加募集中】

  • ついに来週LayerXオフィスで開催！今回はノベルティー回なので、各社のノベルティー制作の裏話がきけるかも..!

●エンジニアリング

• 2024-10-29 機械学習勉強会

  • 今週の機械学習勉強会では、Anthropic社の新モデルの新機能「computer use」、Gradient Accumulationのバグ修正報告、フィルタリングにおける課題を考慮した新レコメンド学習手法に関する論文、Gradio 5のアップデートなどが紹介されました。

• SRE NEXT 2024のDay 1に行われたパネルディスカッション「Becoming SRE - SREって何から始めればいいの？」のアーカイブ動画が公開されました。

• AWS Security Lakeのお金でﾁｮｯﾄ困った話 - LayerX エンジニアブログ 

• 【連載】冒険者の地図： LayerX・松山晃大さんが語る、技術革新とQAエンジニアの共存（前編）

• 【連載】冒険者の地図： LayerX・松山晃大さんが語る、技術革新とQAエンジニアの共存（後編）

• チームを主語にしてみる / Making "Team" the Subject

• 顧客課題解決に特化した"プロダクトエンジニア"とは何か──フルスタック・フルサイクルエンジニアとどう違う？

●採用

• 上場を目指すコーポレート部門必見！徹底ディスカッション 採用・仕組みづくりの優先順位とは？

• LayerXのエンジニア採用を大解剖！

●YOSORO

• 「人生で一番大事なものは家族」と起業を決断したユニファ土岐氏が語る、日本が取り戻すべき「幸せの形」

現在、LayerXのAI・LLM事業部では、様々な大企業パートナーの皆様とLLMを活用した業務変革に取り組んでいます。金融領域に限らず、文書を扱う様々な領域でご一緒できればと考えています。

お気軽にこちらまでご連絡ください。

「LayerX」の公式ウェブサイトはこちら

Disclaimers

This newsletter is not financial advice. So do your own research and due diligence.

発行者：株式会社LayerX（東京都中央区築地1-13-1 銀座松竹スクエア 5階）

お問い合わせ先：llm-labs@layerx.co.jp