http://superpowered.com/latency
確かに考えてみるとスピーカー出力までの遅延なのかマイク入力の遅延なのか分からんなと思って、このサイトを改めて読んだらAndroid6で遅延の改善したってリンクがあってそれを神翻訳してるとこを見つけた

Androidの10ms問題：Androidオーディオパスレイテンシ解説
http://postd.cc/the-android-audio-path-latency-explainer/
Androidの10ms問題？解決しました！ : Superpowered Media Serverの紹介
http://postd.cc/superpowered-android-media-server/

専門的な知識がなくて細かいとこが分からないが
マイクのプリアンプ等のアナログ部の遅延はほぼゼロだから気にしなくていいとのこと
ADCとDACには1ms程度生じるが、主に遅延の原因になってるのはその間の色々なプログラム
Nexus6Pや9で低遅延なのはたまたまではなく力入れてたみたい、よく音ゲーやってるやつが6P褒めてるの見かけたけどそういうことね
上記のサイトもSuperpowered Media ServerっていうAndroid内の音声処理か何かのプログラム作ってるとこで遅延の解決に貢献してたらしい？
まだiOSに比べると遅いけどGoogleとしてはAndroid6で遅延は問題ない範囲に解消したって考えなのかな

アナログ部に遅延がほぼないなら個体差の謎は解決せずｗ
誰か詳しい人おらんか