AI・機械学習用語集

Quantizationは、人工知能・機械学習分野における重要な概念・技術です。この技術は、ニューラルネットワークや機械学習モデルの精度を維持しながら、計算処理の効率性とメモリ使用量を大幅に削減するための手法です。特に、エッジコンピューティングやスマートデバイス、AIアクセラレーションハードウェアの分野において、重要性が高まっています。

LLM量子化formats。GGUF(llama.cpp/Ollama・Q4_K_M sweet spot・Q8_0 high quality・FP16 baseline)・AWQ(Activation-aware Weight Quantization・vLLM/SGLang・4-bit GPU推論)・GPTQ(Generative PreTrained Transformer Quantization・classic 4-bit)・bitsandbytes(Hugging Face・Q4/Q8 dynamic)・MLX-quantized(Apple Silicon Q4/Q8)・FP8(Blackwell H100/B100 native・Hopper以降)・FP4(Blackwell・Multi Frame Gen訓練)・Q2/Q3 extreme(quality低下大)・Q5_K_M sweet・2026年 GGUF Q4 Local/AWQ Server主流。

LLM Quantization+Calibration。GPTQ (Optimal Brain Quantization・Post-Training)・AWQ Activation-aware Weight Quantization・GPTQModel (新Fork)・SmoothQuant (Activation Outlier Migration)・QuaRot (Rotation Matrix Outlier除去)・SpinQuant・LLM.int8() (bitsandbytes・Outlier Treatment)・FP8 SmoothQuant・MXFP4 Microscaling・Calibration Dataset (C4・WikiText-2)・llmcompressor 0.x (Sparse+Quant)・¥0 OSS、2026年QuaRot+SpinQuant主流。

Quantum Computingは、最新のCPU/GPU技術における重要な要素です。

Rustで実装された高性能なオープンソースベクトルデータベース。ニューラル埋め込みの保存・検索に特化し、フィルタリング付きの近似最近傍探索（ANN）を高速に実行する。

2024年Qdrant 1.13 GA BM42 Hybrid Search。Sparse Vector(BM42)+Dense Vector Hybrid+Multi-stage Querying+Quantization Scalar/Binary+Cluster Sharding+ANN改善+RAG最適化搭載。

2024年Qdrant発表v1.12・Industry-leading Rust-based vector database + Industry-leading fastest filtering + Industry-leading binary + scalar quantization + Industry-leading Qdrant Apache 2.0 Rust-based vector database 2024。

Hybrid Search+Reranking。Qdrant 1.13 Hybrid Search (Dense+Sparse BM25/SPLADE)・Reciprocal Rank Fusion RRF・Jina Reranker v2-multilingual・Cohere Rerank 3.5・BAAI bge-reranker-v2-m3・Voyage rerank-2・mixedbread mxbai-rerank-large-v2 (1.5B)・ColBERT v2 Late Interaction・PylateX2・Sentence Transformers・MTEB Rerank Benchmark・¥0 OSS-API、2026年Reranking Standard Pipeline。

2024年Christ et al.発表Undetectable Watermarks paper・Industry-leading undetectable cryptographic watermark + Industry-leading information-theoretically secure + Industry-emerging Christ undetectable watermark Pioneer。

2024年Saoud Rizwan公開Cline。Pro 業界Pro Mainstream Open Source AI Agent IDE Top + Pro 米国Saoud Rizwan + Pro VSCode拡張 + Pro Plan/Act Mode + Pro Anthropic推奨 + Pro Apache 2.0 License + 累計2024-2026年2年Heritage継承代表機。

Saoud Rizwan 2024年公開の VS Code 自律 AI 拡張機能。OSS Apache 2.0 + 無料 + LLM API 自前・「OSS AI コーディング主流」.

2024年公開Cline AI Coding VSCode拡張。Claude/GPT-4o Multi-step Autonomous Agent+File Edit+Terminal Execute+Browser Use+VSCode Native+Open Source Apache 2.0搭載。

2025年Cloudflare公開Cloudflare MCP Server。Pro 業界Pro Mainstream Remote MCP Server先駆 + Pro 米国SF Cloudflare + Pro 2009-Cloudflare設立 + Pro Workers基盤 + Pro Durable Objects統合 + Pro WebSocket Transport + Pro Apache 2.0 OSS + 累計2009-2026年17年Heritage継承代表機。

テキストプロンプトで任意カテゴリの物体を検出するオープン語彙物体検出モデル。BERT+ViT融合アーキテクチャにより、事前定義クラス外の物体もゼロショット検出できる。

LLMの出力を外部の信頼できる情報源（データベース・API・検索エンジン・ナレッジグラフ）に基づかせることで、事実に即した正確な応答を生成する手法。RAGの上位概念。

Gradient Descentは、人工知能・機械学習分野における重要な概念・技術です。

画像生成で実績を持つCFG（Classifier-Free Guidance）をテキスト生成に応用したデコーディング手法。条件付き確率と無条件確率の差分をスケールして「指示への忠実度」を強化し、特に指示追従・スタイル制御に効果的。

Clustering Algorithmは、人工知能・機械学習分野における重要な概念・技術です。

2024年Gladia公開Gladia ASR Engine。Pro 業界Pro Mainstream欧州ASR新興 + Pro 仏国Paris Gladia + Pro 100+言語対応 + Pro Whisper最適化 + Pro Real-Time Translation + Pro $0.612/h + Pro Y Combinator W22 + 累計2022-2026年4年Heritage継承代表機。

複数のミニバッチにわたって勾配を蓄積し、蓄積完了後にまとめてパラメータを更新する学習手法。GPU メモリが不足して大きなバッチサイズを確保できない場合に、論理的に大きなバッチサイズを実現する標準的なテクニック。