Menurut Google, salah satu masalah yang dihadapi dalam menghasilkan AI Overviews adalah kurangnya informasi berkualitas tinggi di web untuk beberapa kueri yang sangat spesifik – dan tidak ada keraguan bahwa karya Lynn tidak berkualitas tinggi.
“Dasar ilmiah di balik basis data ‘IQ nasional’ Lynn sangat buruk sehingga sulit untuk percaya bahwa basis data tersebut bukanlah palsu,” kata Sear. “Lynn tidak pernah menjelaskan metodologi pemilihan sampel ke dalam basis data; banyak negara memiliki IQ yang diestimasi dari sampel yang sangat kecil dan tidak representatif.”
Sear menunjukkan bahwa estimasi IQ Angola berdasarkan informasi dari hanya 19 orang dan Eritrea berdasarkan sampel anak-anak yang tinggal di panti asuhan.
“Masalahnya adalah data yang digunakan Lynn untuk menghasilkan basis data ini hanyalah bohong, dan itu bohong dalam banyak dimensi,” kata Rutherford, menyoroti bahwa angka Somalia dalam basis data Lynn didasarkan pada satu sampel pengungsi berusia antara 8 dan 18 tahun yang diuji di kamp pengungsi Kenya. Dia menambahkan bahwa skor Botswana didasarkan pada satu sampel 104 siswa sekolah menengah yang berbicara bahasa Tswana berusia antara 7 dan 20 tahun yang diuji dalam bahasa Inggris.
Kritikus penggunaan tes IQ nasional untuk mempromosikan gagasan superioritas rasial menunjukkan tidak hanya bahwa kualitas sampel yang dikumpulkan lemah, tetapi juga bahwa tes itu sendiri biasanya dirancang untuk audiens Barat, sehingga sudah bias sebelum diuji.
“Ada bukti bahwa Lynn secara sistematis mempengaruhi basis data dengan cara memasukkan sampel dengan IQ rendah secara preferensial, sementara mengesampingkan yang memiliki IQ lebih tinggi, untuk negara-negara Afrika,” tambah Sears, sebuah kesimpulan yang didukung oleh studi pra-cetak dari tahun 2020.
Lynn menerbitkan berbagai versi dataset IQ nasionalnya selama beberapa dekade, yang terbaru, disebut “Intelligence of Nations,” diterbitkan pada tahun 2019. Selama bertahun-tahun, karya yang cacat dari Lynn telah digunakan oleh kelompok-kelompok ekstrem kanan dan rasialis sebagai bukti untuk mendukung klaim superioritas kulit putih. Data tersebut juga diubah menjadi peta berwarna dunia, menunjukkan negara-negara di Afrika sub-Sahara dengan IQ rendah yang diwarnai merah dibandingkan dengan negara-negara Barat yang diwarnai biru.
“Ini adalah visualisasi data yang sering Anda lihat di [X, sebelumnya dikenal sebagai Twitter], di seluruh media sosial – dan jika Anda menghabiskan banyak waktu di tempat-tempat rasis di web, Anda hanya melihat ini sebagai argumen oleh rasialis yang mengatakan, ‘Lihat data. Lihat peta,'” kata Rutherford.
Tetapi kesalahan, menurut Rutherford, tidak hanya terletak pada sistem AI saja, tetapi juga pada komunitas ilmiah yang telah mengutip karya Lynn tanpa kritis selama bertahun-tahun.
“Sebenarnya tidak mengherankan [sistem AI mengutipnya] karena karya Lynn dalam IQ telah diterima dengan sangat tidak ragu-ragu dari berbagai area akademis, dan jika Anda melihat jumlah kali basis data IQ nasionalnya dikutip dalam karya akademis, itu berjumlah ratusan,” kata Rutherford. “Jadi kesalahan bukan pada AI. Kesalahan ada pada akademisi.”