Культура NVIDIA и оптимизация inference: опыт CentML
Акбар Нурлыбаев, основатель CentML (куплена NVIDIA), рассказывает о культуре NVIDIA: top-five письма, принцип mission is a boss, speed of light (first principles), интенсивность работы. Делится опытом оптимизации inference (квантование, speculative decoding) и объясняет номенклатуру чипов. Применимо для понимания AI-инфраструктуры и корпоративных практик.
Акбар Нурлыбаев, основатель CentML (куплена NVIDIA), рассказывает о культуре NVIDIA: top-five письма, принцип mission is a boss, speed of light (first principles), интенсивность работы. Делится опытом оптимизации inference (квантование, speculative decoding) и объясняет номенклатуру чипов. Применимо для понимания AI-инфраструктуры и корпоративных практик.
Практики top-five и speed of light можно адаптировать для управления проектами и приоритизации задач в оркестрации AI. Понимание квантования и speculative decoding поможет выбирать эффективные модели для агентов. Но в целом видео больше про корпоративную культуру и железо, чем про операторскую работу.