Rearchitecting LLMs

個数:

Rearchitecting LLMs

  • 在庫がございません。海外の書籍取次会社を通じて出版社等からお取り寄せいたします。
    通常6~9週間ほどで発送の見込みですが、商品によってはさらに時間がかかることもございます。
    【重要ご説明事項】
    1. 納期遅延や、ご入手不能となる場合がございます。
    2. 複数冊ご注文の場合は、ご注文数量が揃ってからまとめて発送いたします。
    3. 美品のご指定は承りかねます。

    ●3Dセキュア導入とクレジットカードによるお支払いについて
  • 【入荷遅延について】
    世界情勢の影響により、海外からお取り寄せとなる洋書・洋古書の入荷が、表示している標準的な納期よりも遅延する場合がございます。
    おそれいりますが、あらかじめご了承くださいますようお願い申し上げます。
  • ◆画像の表紙や帯等は実物とは異なる場合があります。
  • ◆ウェブストアでの洋書販売価格は、弊社店舗等での販売価格とは異なります。
    また、洋書販売価格は、ご注文確定時点での日本円価格となります。
    ご注文確定後に、同じ洋書の販売価格が変動しても、それは反映されません。
  • 製本 Hardcover:ハードカバー版/ページ数 380 p.
  • 言語 ENG
  • 商品コード 9781633434332
  • DDC分類 006.35

Full Description

Large language models are powerful, but they can be slow, expensive and too general for specific tasks. Many businesses need smaller and faster models that solve their unique problems without high operational costs. To achieve this, you need to go beyond standard fine-tuning. This book shows you how to structurally change large models to make them simple, efficient and specialised. 



Learn to reduce model size with effective pruning techniques. 



Use knowledge distillation to train smaller but capable models. 



Apply fine-tuning to adapt models for specific tasks. 



Work with popular open models like Llama 3, Gemma and Qwen. 



Understand the balance between a model's size, speed and cost. 



Explore how to make your models more understandable and explainable. 

Rearchitecting LLMs teaches you structural techniques for creating efficient models. The book provides a practical guide to making language models smaller, faster and cheaper to run. It explains how to move beyond simple fine-tuning and use advanced methods to alter a model's core architecture. You will work with popular open models and learn to adapt them for real-world business needs. 

After reading this book, you will be able to create capable and cost-effective models customised to your goals. You will have the skills to build efficient AI systems that deliver value without breaking the budget. This book is for practising AI, ML and data engineers who know Python. 

Contents

PART 1: FOUNDATIONS 

1 WHY REARCHITECTING LLMS MATTERS 

2 AN END-TO-END REARCHITECTING PROJECT 

3 A BLUEPRINT TO MODERN TRANSFORMERS 

PART 2: HANDS-ON OPTIMIZATION 

4 BUILDING SMALLER AND FASTER LLMS WITH DEPTH PRUNING 

5 SHAPING GLU ARCHITECTURES VIA WIDTH PRUNING 

6 RECOVERING KNOWLEDGE 

7 SPECIALIZATION TUNING 

8 ATTENTION OPTIMIZATION 

9 DYNAMIC PRUNING FOR ADAPTIVE INFERENCE 

PART 3: BEYOND THE BLACK BOX: FAIRNESS, VISUALIZATION, AND APPLICATION 

10 EXPLORING THE BLACK BOX 

11 OPTIMIZING WHILE ELIMINATING BIASES 

12 CAPSTONE PROJECT - REPLACING AGENTIC API CALLS WITH A SPECIALIZED SLM 

APPENDICES 

APPENDIX A: EFFICIENCY STRATEGIES IN SLMS 

APPENDIX B: CAPABILITIES EVALUATION WITH LM-EVALUATION-HARNESS 

APPENDIX C: ENERGY CONSUMPTION EVALUATION WITH CODE CARBON 

APPENDIX D: INFERENCE PERFORMANCE EVALUATION 

最近チェックした商品