タグ

2023年12月14日のブックマーク (4件)

  • https://arxiv.org/pdf/2307.03109

    kiririmode
    kiririmode 2023/12/14
    LLMの評価に関するsurvey論文
  • スクラムにおいて開発者を社外から集めるとどんな問題がありますか?

    アジャイル開発に取り組むチーム向けのコーチングや、技術顧問、認定スクラムマスター研修などの各種トレーニングを提供しています。ぜひお気軽にご相談ください(初回相談無料) 開発者を社外から集めるというのは大きく分けると2つです。 開発をまるごと別の会社にやってもらう(別の会社に発注する)さまざまな会社から派遣やSESで来てもらったりフリーランスの方にチームに入ってもらったりするどちらの形態なのかによって多少の違いはありますが、以下のような問題が起こりやすいです。 開発のノウハウや暗黙知が永続しない(暗黙知をすべて形式知化することはできないので、どこかで失われてしまう)外部から参画しているメンバーは必ずしもプロダクトの成功に対するインセンティブがない。そのためプロダクトのアイデアや改善のアイデアがあまり出ないこともある(もちろんメンバーによる。ただし全員がコミットすることを期待するのは無理)発注

    スクラムにおいて開発者を社外から集めるとどんな問題がありますか?
    kiririmode
    kiririmode 2023/12/14
    "メンバーを頻繁に入れ替えたり、委託先を変えたり、開発ごとに新しいチームを立ち上げたりするのは大きなムダ"。とはいえ、ここに抗う/軟着陸する術もまた磨いていきたい
  • LLMの出力における問題は「LLMの処理が原因」とは限らない プロンプト以外に考えられる4つの要因 | ログミーBusiness

    「FastLabel × LayerX × LINE 3社が語る『生成AI×プロダクト開発』で直面する課題と乗り越え方」は、生成AIをプロダクト開発にどのように活用しているか、その際に直面した課題と克服するためのアプローチなどをFastLabel、LayerX、LINEエンジニアが共有するイベントです。ここで株式会社LayerXの中村氏が登壇。ここからは、LLMの精度評価における、LLMの処理以外で考えられる原因分析について話します。前回はこちらから。 精度評価中村龍矢氏:では具体的に、精度評価と改善にいければと思います。 まず精度評価というと、パッとイメージしやすいのが、「どういうスコアをやるか」というところで。これは最近はツールもノウハウもいろいろ出ているので、あまり悩むことはないんじゃないかなと思っています。LLMが吐いた答えが正しいかどうかを判定する方法ですね。 一番シンプルなの

    LLMの出力における問題は「LLMの処理が原因」とは限らない プロンプト以外に考えられる4つの要因 | ログミーBusiness
    kiririmode
    kiririmode 2023/12/14
    チューニングするときのありがちな落とし穴
  • ADR を1年間書いてみた感想 - 一休.com Developers Blog

    宿泊開発チームでエンジニアをしている @kosuke1012 です。チームで ADR を書き始めて1年くらい経ったので、その感想を書いてみたいと思います。 この記事は 一休.comのカレンダー | Advent Calendar 2023 - Qiita の13日目の記事です。 ADRとは アーキテクチャ・ディシジョン・レコードの略で、アーキテクチャに関する意思決定を軽量なテキストドキュメントで記録していくものです。 出典はこちらで、 Documenting Architecture Decisions わかりやすい和訳は以下の記事が、 アーキテクチャ決定レコードの概要  |  Cloud アーキテクチャ センター  |  Google Cloud アーキテクチャ・デシジョン・レコードの勧め | 豆蔵デベロッパーサイト アーキテクチャの「なぜ?」を記録する!ADRってなんぞや? #設計 -

    ADR を1年間書いてみた感想 - 一休.com Developers Blog
    kiririmode
    kiririmode 2023/12/14
    ADRの習慣化うまく行った試しがないけど記事を読んで否決/可決されるものを書くのではなく、SCQを埋めることで議論を効率化しAを導いて記録するという考え方であれば習慣化するのではないかと思った