id	sid	eid	entity	type
fcis-26582	1	1	2832-6024	DATE
fcis-26582	2	1	10	CARDINAL
fcis-26582	2	2	1	CARDINAL
fcis-26582	2	3	2024 69	DATE
fcis-26582	2	4	llm pre‐training ling chen department	ORG
fcis-26582	2	5	wuhu university	ORG
fcis-26582	2	6	wuhu	GPE
fcis-26582	2	7	anhui	GPE
fcis-26582	2	8	241000	DATE
fcis-26582	2	9	china	GPE
fcis-26582	2	10	recent years	DATE
fcis-26582	3	1	llm	GPE
fcis-26582	4	1	recent years	DATE
fcis-26582	5	1	firstly	ORDINAL
fcis-26582	6	1	secondly	ORDINAL
fcis-26582	9	1	llm	PERSON
fcis-26582	9	2	recent years	DATE
fcis-26582	9	3	llm	GPE
fcis-26582	9	4	july 2020	DATE
fcis-26582	10	1	gpt-3	ORG
fcis-26582	11	1	gpt-3	ORG
fcis-26582	12	1	llm	GPE
fcis-26582	12	2	nl	ORG
fcis-26582	12	3	nl	ORG
fcis-26582	13	1	three	CARDINAL
fcis-26582	14	1	three	CARDINAL
fcis-26582	16	1	llm	ORG
fcis-26582	17	1	1	CARDINAL
fcis-26582	17	2	2	CARDINAL
fcis-26582	17	3	3	CARDINAL
fcis-26582	17	4	4	CARDINAL
fcis-26582	17	5	5	CARDINAL
fcis-26582	18	1	49	CARDINAL
fcis-26582	20	1	2.	CARDINAL
fcis-26582	20	2	dfg	ORG
fcis-26582	23	1	70	DATE
fcis-26582	25	1	recent years	DATE
fcis-26582	27	1	llm	GPE
fcis-26582	27	2	2020	DATE
fcis-26582	28	1	1	CARDINAL
fcis-26582	28	2	2.1	CARDINAL
fcis-26582	28	3	2021	CARDINAL
fcis-26582	28	4	wang et al.[1	ORG
fcis-26582	28	5	codet5	ORG
fcis-26582	29	1	the following year	DATE
fcis-26582	29	2	codet5	ORG
fcis-26582	31	1	2023	CARDINAL
fcis-26582	31	2	wang et al.[3	ORG
fcis-26582	31	3	codet5	ORG
fcis-26582	32	1	codet5	ORG
fcis-26582	32	2	+ 16b	DATE
fcis-26582	35	1	codet5	ORG
fcis-26582	35	2	codet5	ORG
fcis-26582	35	3	nl	ORG
fcis-26582	36	1	2.2	CARDINAL
fcis-26582	36	2	september 2020	DATE
fcis-26582	36	3	feng et al.[5	ORG
fcis-26582	36	4	nl	ORG
fcis-26582	37	1	codebert	PERSON
fcis-26582	37	2	nl	ORG
fcis-26582	39	1	dfg	ORG
fcis-26582	40	1	2023	CARDINAL
fcis-26582	44	1	nl	ORG
fcis-26582	45	1	71 2.3	CARDINAL
fcis-26582	47	1	2022	CARDINAL
fcis-26582	47	2	erik nijkamp et al.[8	PERSON
fcis-26582	47	3	1.6 billion	CARDINAL
fcis-26582	48	1	115	CARDINAL
fcis-26582	49	1	the same year	DATE
fcis-26582	50	1	huawei	ORG
fcis-26582	51	1	chen et al	PERSON
fcis-26582	51	2	2022	CARDINAL
fcis-26582	51	3	65.8%	PERCENT
fcis-26582	52	1	guo et al.	PERSON
fcis-26582	53	1	2023	CARDINAL
fcis-26582	53	2	13 billion	CARDINAL
fcis-26582	54	1	loubna ben allal et al	PERSON
fcis-26582	55	1	14	CARDINAL
fcis-26582	56	1	wei et al.[15	ORG
fcis-26582	57	1	the same period	DATE
fcis-26582	57	2	li et al.[16	PERSON
fcis-26582	57	3	luo	PERSON
fcis-26582	58	1	microsoft	ORG
fcis-26582	58	2	18]model	CARDINAL
fcis-26582	59	1	early 2024	DATE
fcis-26582	60	1	openai	PERSON
fcis-26582	61	1	the same year	DATE
fcis-26582	62	1	claude	PERSON
fcis-26582	63	1	2024	DATE
fcis-26582	64	1	2	CARDINAL
fcis-26582	64	2	hundreds of millions to billions	MONEY
fcis-26582	65	1	meta	ORG
fcis-26582	67	1	2022	CARDINAL
fcis-26582	69	1	3	CARDINAL
fcis-26582	69	2	2020	DATE
fcis-26582	70	1	36	CARDINAL
fcis-26582	71	1	2020	DATE
fcis-26582	73	1	37	CARDINAL
fcis-26582	74	1	38	CARDINAL
fcis-26582	74	2	39	CARDINAL
fcis-26582	75	1	40	CARDINAL
fcis-26582	75	2	ds-1000	CARDINAL
fcis-26582	76	1	41	CARDINAL
fcis-26582	76	2	42	CARDINAL
fcis-26582	77	1	1	CARDINAL
fcis-26582	77	2	44	CARDINAL
fcis-26582	78	1	1	CARDINAL
fcis-26582	79	1	humaneval ldb	PERSON
fcis-26582	79	2	gpt-4	PERSON
fcis-26582	80	1	conala pangu-coder-ft-	PERSON
fcis-26582	80	2	3.5	CARDINAL
fcis-26582	80	3	3	CARDINAL
fcis-26582	80	4	conala-ext bart	ORG
fcis-26582	80	5	72	DATE
fcis-26582	80	6	yin p et al.	PERSON
fcis-26582	81	1	2018	DATE
fcis-26582	81	2	2379	CARDINAL
fcis-26582	81	3	500	CARDINAL
fcis-26582	82	1	codexglue	NORP
fcis-26582	82	2	february 2021	DATE
fcis-26582	84	1	10	CARDINAL
fcis-26582	84	2	14	CARDINAL
fcis-26582	85	1	codexglue	ORG
fcis-26582	85	2	three	CARDINAL
fcis-26582	87	1	july 2021	DATE
fcis-26582	87	2	164	CARDINAL
fcis-26582	89	1	english	LANGUAGE
fcis-26582	90	1	seven	CARDINAL
fcis-26582	90	2	45	CARDINAL
fcis-26582	91	1	2	CARDINAL
fcis-26582	92	1	44	CARDINAL
fcis-26582	92	2	august 6, 2024	DATE
fcis-26582	93	1	2021	CARDINAL
fcis-26582	93	2	974	CARDINAL
fcis-26582	93	3	3	CARDINAL
fcis-26582	94	1	510	CARDINAL
fcis-26582	95	1	2	CARDINAL
fcis-26582	96	1	humaleval/0	ORG
fcis-26582	97	1	2021	CARDINAL
fcis-26582	100	1	10,000	CARDINAL
fcis-26582	100	2	131,836	CARDINAL
fcis-26582	100	3	232,444	CARDINAL
fcis-26582	101	1	293.2	CARDINAL
fcis-26582	102	1	5,000	CARDINAL
fcis-26582	103	1	21.2	CARDINAL
fcis-26582	105	1	2021	CARDINAL
fcis-26582	105	2	g et al	PERSON
fcis-26582	105	3	conala-ext	ORG
fcis-26582	107	1	2023	CARDINAL
fcis-26582	108	1	73	CARDINAL
fcis-26582	108	2	llm	GPE
fcis-26582	110	1	lai	PERSON
fcis-26582	110	2	ds-1000	PRODUCT
fcis-26582	110	3	2023	CARDINAL
fcis-26582	110	4	1,000	CARDINAL
fcis-26582	111	1	ds-1000	PRODUCT
fcis-26582	111	2	1,000	CARDINAL
fcis-26582	111	3	451	CARDINAL
fcis-26582	112	1	more than half	CARDINAL
fcis-26582	112	2	ds-1000	PRODUCT
fcis-26582	112	3	152	CARDINAL
fcis-26582	112	4	235	CARDINAL
fcis-26582	112	5	162	CARDINAL
fcis-26582	113	1	2024	DATE
fcis-26582	114	1	48	CARDINAL
fcis-26582	114	2	100	CARDINAL
fcis-26582	116	1	haller et al.	PERSON
fcis-26582	117	1	2024	DATE
fcis-26582	117	2	2,396	CARDINAL
fcis-26582	120	1	2	CARDINAL
fcis-26582	121	1	year 1	DATE
fcis-26582	121	2	98.2	CARDINAL
fcis-26582	121	3	2024 2	DATE
fcis-26582	121	4	96.9	CARDINAL
fcis-26582	121	5	2024 3	TIME
fcis-26582	121	6	agentcoder(gpt-4	ORG
fcis-26582	121	7	96.3	CARDINAL
fcis-26582	121	8	2023 4	DATE
fcis-26582	122	1	95.1	CARDINAL
fcis-26582	122	2	2024 5	TIME
fcis-26582	122	3	mapcoder(gpt-4	PERSON
fcis-26582	122	4	93.9	CARDINAL
fcis-26582	122	5	92.7	CARDINAL
fcis-26582	122	6	3.5	CARDINAL
fcis-26582	122	7	92.0	CARDINAL
fcis-26582	122	8	2024 8	DATE
fcis-26582	122	9	91.6	CARDINAL
fcis-26582	122	10	2023 9	TIME
fcis-26582	122	11	90.2	CARDINAL
fcis-26582	122	12	10	CARDINAL
fcis-26582	122	13	90.2	CARDINAL
fcis-26582	122	14	2024 4	DATE
fcis-26582	123	1	2020	DATE
fcis-26582	127	1	llm	GPE
fcis-26582	129	1	wuhu university	ORG
fcis-26582	130	1	1	CARDINAL
fcis-26582	130	2	wang	PERSON
fcis-26582	130	3	w.	PERSON
fcis-26582	130	4	s. r., & hoi	PERSON
fcis-26582	130	5	s.	PERSON
fcis-26582	130	6	2021	CARDINAL
fcis-26582	132	1	arxiv	ORG
fcis-26582	132	2	abs/2109	ORG
fcis-26582	132	3	00859	DATE
fcis-26582	133	1	2	CARDINAL
fcis-26582	133	2	wang	PERSON
fcis-26582	133	3	a. d.	PERSON
fcis-26582	133	4	savarese	NORP
fcis-26582	133	5	s., & hoi	ORG
fcis-26582	133	6	s.	PERSON
fcis-26582	133	7	2022	CARDINAL
fcis-26582	134	1	coderl	PERSON
fcis-26582	135	1	arxiv	ORG
fcis-26582	135	2	abs/2207.01780	PERSON
fcis-26582	136	1	3	CARDINAL
fcis-26582	136	2	gotmare	PRODUCT
fcis-26582	136	3	a. d.	PERSON
fcis-26582	136	4	bui	ORG
fcis-26582	136	5	n. d. q.	PERSON
fcis-26582	136	6	li	PERSON
fcis-26582	136	7	j., & hoi	ORG
fcis-26582	136	8	s. c. h.	PERSON
fcis-26582	136	9	2023	CARDINAL
fcis-26582	139	1	4	CARDINAL
fcis-26582	139	2	chen m	PERSON
fcis-26582	140	1	arxiv preprint arxiv:2107.03374	ORG
fcis-26582	140	2	2021	CARDINAL
fcis-26582	141	1	5	CARDINAL
fcis-26582	141	2	z.	PERSON
fcis-26582	141	3	guo	PERSON
fcis-26582	141	4	d.	NORP
fcis-26582	141	5	d.	NORP
fcis-26582	141	6	duan, n.	GPE
fcis-26582	141	7	feng	PERSON
fcis-26582	141	8	x.	GPE
fcis-26582	141	9	shou	PERSON
fcis-26582	141	10	l.	PERSON
fcis-26582	141	11	qin	PERSON
fcis-26582	141	12	b.	PERSON
fcis-26582	141	13	liu	PERSON
fcis-26582	141	14	t., jiang	GPE
fcis-26582	141	15	d., & zhou	ORG
fcis-26582	141	16	2020	DATE
fcis-26582	142	1	codebert	PERSON
fcis-26582	143	1	6	CARDINAL
fcis-26582	143	2	d.	NORP
fcis-26582	143	3	ren	GPE
fcis-26582	143	4	s.	PERSON
fcis-26582	143	5	s.	PERSON
fcis-26582	143	6	feng	PERSON
fcis-26582	143	7	z.	PERSON
fcis-26582	143	8	d.	NORP
fcis-26582	143	9	liu	PERSON
fcis-26582	143	10	s.	PERSON
fcis-26582	143	11	zhou	PERSON
fcis-26582	143	12	l.	PERSON
fcis-26582	143	13	duan, n.	PERSON
fcis-26582	143	14	a.	PERSON
fcis-26582	143	15	fu, s.	PERSON
fcis-26582	143	16	m., deng	PERSON
fcis-26582	143	17	s. k.	PERSON
fcis-26582	143	18	clement	PERSON
fcis-26582	143	19	d.	NORP
fcis-26582	143	20	j., jiang	GPE
fcis-26582	143	21	d., & zhou	ORG
fcis-26582	143	22	2020	DATE
fcis-26582	144	1	graphcodebert	PERSON
fcis-26582	145	1	chen p	PERSON
fcis-26582	145	2	jia j. motcoder	PERSON
fcis-26582	145	3	tasks[j	PRODUCT
fcis-26582	146	1	arxiv	ORG
fcis-26582	146	2	2023	CARDINAL
fcis-26582	147	1	8	CARDINAL
fcis-26582	147	2	e.	GPE
fcis-26582	147	3	b.	GPE
fcis-26582	147	4	hayashi	GPE
fcis-26582	147	5	wang, h.	ORG
fcis-26582	147	6	zhou	PERSON
fcis-26582	147	7	savarese	NORP
fcis-26582	147	8	s., & xiong	ORG
fcis-26582	147	9	2022	CARDINAL
fcis-26582	149	1	9	CARDINAL
fcis-26582	149	2	d.	NORP
fcis-26582	149	3	lin	PERSON
fcis-26582	149	4	j.	PERSON
fcis-26582	149	5	wang	PERSON
fcis-26582	149	6	s. i.	PERSON
fcis-26582	149	7	wallace	PERSON
fcis-26582	149	8	e.	PERSON
fcis-26582	149	9	zhong	PERSON
fcis-26582	149	10	r.	NORP
fcis-26582	149	11	w.	PERSON
fcis-26582	149	12	2022	CARDINAL
fcis-26582	150	1	74	CARDINAL
fcis-26582	151	1	arxiv	ORG
fcis-26582	151	2	abs/2204.05999	ORG
fcis-26582	152	1	10	CARDINAL
fcis-26582	152	2	m., zhang	PERSON
fcis-26582	152	3	guo	PERSON
fcis-26582	152	4	li	PERSON
fcis-26582	152	5	z.	PERSON
fcis-26582	152	6	q.	PERSON
fcis-26582	152	7	xiao	PERSON
fcis-26582	152	8	b.	PERSON
fcis-26582	152	9	li	PERSON
fcis-26582	152	10	l.	PERSON
fcis-26582	152	11	yan	PERSON
fcis-26582	152	12	l.	GPE
fcis-26582	152	13	zhou	PERSON
fcis-26582	152	14	wang	PERSON
fcis-26582	152	15	x.	GPE
fcis-26582	152	16	ma	PERSON
fcis-26582	152	17	iacobacci	PERSON
fcis-26582	152	18	i.	PERSON
fcis-26582	152	19	wang	PERSON
fcis-26582	152	20	liang	PERSON
fcis-26582	152	21	g.	PERSON
fcis-26582	152	22	wei	PERSON
fcis-26582	152	23	j., liu, q.	PERSON
fcis-26582	152	24	2022	CARDINAL
fcis-26582	154	1	arxiv	ORG
fcis-26582	154	2	abs/ 2207	GPE
fcis-26582	154	3	11280	DATE
fcis-26582	155	1	11	CARDINAL
fcis-26582	155	2	chen	PERSON
fcis-26582	155	3	nguyen, a.	PERSON
fcis-26582	155	4	zan	GPE
fcis-26582	155	5	d.	NORP
fcis-26582	155	6	lin	GPE
fcis-26582	155	7	z.	PERSON
fcis-26582	155	8	lou	GPE
fcis-26582	155	9	& chen	PERSON
fcis-26582	155	10	w.	PERSON
fcis-26582	155	11	2022	CARDINAL
fcis-26582	156	1	codet	PERSON
fcis-26582	157	1	arxiv	ORG
fcis-26582	157	2	abs/2207.10397	PERSON
fcis-26582	158	1	12	CARDINAL
fcis-26582	158	2	d.	NORP
fcis-26582	158	3	lu	NORP
fcis-26582	158	4	s.	PERSON
fcis-26582	158	5	duan, n.	PERSON
fcis-26582	158	6	wang	PERSON
fcis-26582	158	7	zhou	PERSON
fcis-26582	158	8	m., & yin	ORG
fcis-26582	158	9	2022	CARDINAL
fcis-26582	160	1	13	CARDINAL
fcis-26582	160	2	zheng	PERSON
fcis-26582	160	3	xia	PERSON
fcis-26582	160	4	x.	GPE
fcis-26582	160	5	x.	GPE
fcis-26582	160	6	wang	PERSON
fcis-26582	160	7	xue	ORG
fcis-26582	160	8	wang	PERSON
fcis-26582	160	9	z.	PERSON
fcis-26582	160	10	shen	GPE
fcis-26582	160	11	l.	PERSON
fcis-26582	160	12	wang, a.	PERSON
fcis-26582	160	13	li	PERSON
fcis-26582	160	14	su	PERSON
fcis-26582	160	15	t., yang	GPE
fcis-26582	160	16	z., & tang	ORG
fcis-26582	160	17	j.	PERSON
fcis-26582	160	18	2023	CARDINAL
fcis-26582	161	1	codegeex	PERSON
fcis-26582	161	2	29th	ORDINAL
fcis-26582	162	1	14	CARDINAL
fcis-26582	162	2	l. ben	PERSON
fcis-26582	162	3	li	PERSON
fcis-26582	162	4	r.	NORP
fcis-26582	162	5	kocetkov	GPE
fcis-26582	162	6	d.	NORP
fcis-26582	162	7	akiki	GPE
fcis-26582	162	8	c. m.	PERSON
fcis-26582	162	9	muennighoff	ORG
fcis-26582	162	10	mishra	PERSON
fcis-26582	162	11	m., gu, a.	PERSON
fcis-26582	162	12	m.	PERSON
fcis-26582	162	13	l. k.	PERSON
fcis-26582	162	14	anderson	PERSON
fcis-26582	162	15	c. j.	PERSON
fcis-26582	162	16	poirier	PERSON
fcis-26582	162	17	j., schoelkopf, h.	ORG
fcis-26582	162	18	troshin	PERSON
fcis-26582	162	19	s.	PERSON
fcis-26582	162	20	abulkhanov	GPE
fcis-26582	162	21	d.	NORP
fcis-26582	162	22	romero	PERSON
fcis-26582	162	23	m.	PERSON
fcis-26582	162	24	m., von werra	PERSON
fcis-26582	162	25	l.	PERSON
fcis-26582	162	26	2023	CARDINAL
fcis-26582	164	1	arxiv	ORG
fcis-26582	164	2	abs/2301.03988	GPE
fcis-26582	165	1	15	CARDINAL
fcis-26582	165	2	wei	PERSON
fcis-26582	165	3	wang	PERSON
fcis-26582	165	4	z., liu	PERSON
fcis-26582	165	5	j.	PERSON
fcis-26582	165	6	2023	CARDINAL
fcis-26582	167	1	arxiv	ORG
fcis-26582	167	2	02120	DATE
fcis-26582	168	1	16	CARDINAL
fcis-26582	168	2	r.	NORP
fcis-26582	168	3	l. ben	PERSON
fcis-26582	168	4	kocetkov	PERSON
fcis-26582	168	5	d.	NORP
fcis-26582	168	6	marone	GPE
fcis-26582	168	7	m.	PERSON
fcis-26582	168	8	akiki	PERSON
fcis-26582	168	9	li	PERSON
fcis-26582	168	10	j.	PERSON
fcis-26582	168	11	j., liu, q.	PERSON
fcis-26582	168	12	zhuo	PERSON
fcis-26582	168	13	t. y.	GPE
fcis-26582	168	14	wang	PERSON
fcis-26582	168	15	t.	GPE
fcis-26582	168	16	davaadorj	NORP
fcis-26582	168	17	m.	PERSON
fcis-26582	168	18	j.	PERSON
fcis-26582	168	19	monteiro	PERSON
fcis-26582	168	20	j.	PERSON
fcis-26582	168	21	h. d.	PERSON
fcis-26582	168	22	2023	CARDINAL
fcis-26582	169	1	starcoder	PERSON
fcis-26582	170	1	arxiv	PERSON
fcis-26582	170	2	abs/2305.06161	NORP
fcis-26582	171	1	17	CARDINAL
fcis-26582	171	2	z.	PERSON
fcis-26582	171	3	xu	PERSON
fcis-26582	171	4	c.	PERSON
fcis-26582	171	5	zhao	PERSON
fcis-26582	171	6	sun, q.	ORG
fcis-26582	171	7	geng	PERSON
fcis-26582	171	8	x.	GPE
fcis-26582	171	9	hu	PERSON
fcis-26582	171	10	w., tao	PERSON
fcis-26582	171	11	j., lin, q.	PERSON
fcis-26582	171	12	2023	CARDINAL
fcis-26582	173	1	arxiv	ORG
fcis-26582	173	2	abs/2306.08568	PERSON
fcis-26582	174	1	18	CARDINAL
fcis-26582	174	2	zhang x	PERSON
fcis-26582	174	3	shang n	PERSON
fcis-26582	175	1	arxiv preprint arxiv:2312.14187	ORG
fcis-26582	175	2	2023	CARDINAL
fcis-26582	176	1	19	CARDINAL
fcis-26582	177	1	arxiv preprint arxiv:2401.14196	ORG
fcis-26582	177	2	2024	DATE
fcis-26582	178	1	20	CARDINAL
fcis-26582	179	1	eb	ORG
fcis-26582	180	1	21	CARDINAL
fcis-26582	180	2	j., adler	ORG
fcis-26582	180	3	s., agarwal	ORG
fcis-26582	180	4	s.	GPE
fcis-26582	180	5	ahmad	PERSON
fcis-26582	180	6	l.	GPE
fcis-26582	180	7	akkaya	GPE
fcis-26582	180	8	i.	PERSON
fcis-26582	180	9	f.l.	GPE
fcis-26582	180	10	almeida	PERSON
fcis-26582	180	11	d.	NORP
fcis-26582	180	12	altenschmidt	ORG
fcis-26582	180	13	j., altman	ORG
fcis-26582	180	14	s., anadkat	PERSON
fcis-26582	180	15	s.	PERSON
fcis-26582	180	16	avila	PERSON
fcis-26582	180	17	r.	NORP
fcis-26582	180	18	2023	CARDINAL
fcis-26582	182	1	arxiv	ORG
fcis-26582	183	1	22	CARDINAL
fcis-26582	183	2	mann b	ORG
fcis-26582	183	3	ryder n	PERSON
fcis-26582	184	1	2020	DATE
fcis-26582	184	2	33	CARDINAL
fcis-26582	184	3	1877-1901	DATE
fcis-26582	185	1	23	CARDINAL
fcis-26582	185	2	80	CARDINAL
fcis-26582	187	1	24	CARDINAL
fcis-26582	187	2	3.5	CARDINAL
fcis-26582	187	3	5	CARDINAL
fcis-26582	188	1	25	CARDINAL
fcis-26582	188	2	yang b	PERSON
fcis-26582	188	3	qwen2	PERSON
fcis-26582	190	1	arxiv	ORG
fcis-26582	190	2	2024	DATE
fcis-26582	191	1	26	CARDINAL
fcis-26582	191	2	bai j	PERSON
fcis-26582	191	3	bai s	PERSON
fcis-26582	192	1	qwen	PERSON
fcis-26582	193	1	arxiv preprint arxiv:2309.16609	ORG
fcis-26582	193	2	2023	CARDINAL
fcis-26582	194	1	27	CARDINAL
fcis-26582	194	2	3.1	CARDINAL
fcis-26582	194	3	2024	CARDINAL
fcis-26582	195	1	https://ai.meta.com/blog/meta-llama-3-1/.	DATE
fcis-26582	195	2	28	CARDINAL
fcis-26582	195	3	b.	PERSON
fcis-26582	195	4	j.	PERSON
fcis-26582	195	5	f.	PERSON
fcis-26582	195	6	s.	PERSON
fcis-26582	195	7	gat	ORG
fcis-26582	195	8	i.	PERSON
fcis-26582	195	9	x.	GPE
fcis-26582	195	10	adi	PERSON
fcis-26582	195	11	liu	PERSON
fcis-26582	195	12	j.	PERSON
fcis-26582	195	13	t.	GPE
fcis-26582	195	14	j.	PERSON
fcis-26582	195	15	a.	PERSON
fcis-26582	195	16	evtimov	GPE
fcis-26582	195	17	i.	GPE
fcis-26582	195	18	bitton	GPE
fcis-26582	195	19	j., bhatt	PERSON
fcis-26582	195	20	m. p.	PERSON
fcis-26582	195	21	c. c.	PERSON
fcis-26582	195	22	xiong	GPE
fcis-26582	195	23	w.	PERSON
fcis-26582	195	24	a.	PERSON
fcis-26582	195	25	j., synnaeve	GPE
fcis-26582	195	26	2023	CARDINAL
fcis-26582	197	1	arxiv	ORG
fcis-26582	198	1	29	CARDINAL
fcis-26582	198	2	martin l	PERSON
fcis-26582	198	3	2	CARDINAL
fcis-26582	198	4	models[j	PERSON
fcis-26582	199	1	arxiv preprint arxiv:2307.	ORG
fcis-26582	200	1	09288	DATE
fcis-26582	200	2	2023	CARDINAL
fcis-26582	201	1	30	CARDINAL
fcis-26582	201	2	lavril t	GPE
fcis-26582	201	3	izacard g	PERSON
fcis-26582	201	4	models[j	PERSON
fcis-26582	202	1	arxiv preprint arxiv	ORG
fcis-26582	202	2	2302.13971	CARDINAL
fcis-26582	202	3	2023	CARDINAL
fcis-26582	203	1	31	CARDINAL
fcis-26582	203	2	pathak s	PERSON
fcis-26582	203	3	gemma 2	PERSON
fcis-26582	204	1	arxiv preprint arxiv	ORG
fcis-26582	204	2	2408	CARDINAL
fcis-26582	205	1	00118	DATE
fcis-26582	205	2	2024	DATE
fcis-26582	206	1	32	CARDINAL
fcis-26582	207	1	arxiv preprint arxiv:2406.11409	ORG
fcis-26582	207	2	2024	DATE
fcis-26582	208	1	33	CARDINAL
fcis-26582	208	2	t	GPE
fcis-26582	208	3	hardin	GPE
fcis-26582	208	4	gemma	PERSON
fcis-26582	209	1	arxiv preprint arxiv	ORG
fcis-26582	209	2	2403.08295	CARDINAL
fcis-26582	209	3	2024	DATE
fcis-26582	210	1	34	CARDINAL
fcis-26582	210	2	machel reid	PERSON
fcis-26582	210	3	nikolay savinov	PERSON
fcis-26582	210	4	denis teplyashin	PERSON
fcis-26582	210	5	dmitry lepikhin	PERSON
fcis-26582	210	6	timothy lillicrap	PERSON
fcis-26582	210	7	jean-baptiste alayrac	PERSON
fcis-26582	210	8	radu soricut	PERSON
fcis-26582	210	9	angeliki lazaridou	PERSON
fcis-26582	210	10	orhan firat	PERSON
fcis-26582	210	11	julian schrittwieser	PERSON
fcis-26582	210	12	2024	DATE
fcis-26582	211	1	1.5	CARDINAL
fcis-26582	211	2	millions	CARDINAL
fcis-26582	212	1	arxiv preprint arxiv	ORG
fcis-26582	213	1	2403.05530	CARDINAL
fcis-26582	214	1	35	CARDINAL
fcis-26582	214	2	k. papineni	PERSON
fcis-26582	214	3	s. roukos	PERSON
fcis-26582	214	4	t. ward	GPE
fcis-26582	215	1	40th	ORDINAL
fcis-26582	215	2	annual	DATE
fcis-26582	215	3	2002:311–318	CARDINAL
fcis-26582	216	1	36	CARDINAL
fcis-26582	216	2	ren	NORP
fcis-26582	216	3	s.	PERSON
fcis-26582	216	4	guo	PERSON
fcis-26582	216	5	d.	NORP
fcis-26582	216	6	lu	NORP
fcis-26582	216	7	s.	PERSON
fcis-26582	216	8	zhou	PERSON
fcis-26582	216	9	liu	PERSON
fcis-26582	216	10	s.	PERSON
fcis-26582	216	11	d.	NORP
fcis-26582	216	12	zhou	PERSON
fcis-26582	216	13	2020	DATE
fcis-26582	218	1	arxiv	ORG
fcis-26582	218	2	abs/2009	GPE
fcis-26582	218	3	10297	DATE
fcis-26582	219	1	37	CARDINAL
fcis-26582	219	2	austin j	PERSON
fcis-26582	219	3	nye m	PERSON
fcis-26582	219	4	models[j	PERSON
fcis-26582	220	1	arxiv	ORG
fcis-26582	220	2	2021	CARDINAL
fcis-26582	221	1	38	CARDINAL
fcis-26582	221	2	deng b	PERSON
fcis-26582	221	3	chen e	PERSON
fcis-26582	222	1	15th	ORDINAL
fcis-26582	223	1	2018	DATE
fcis-26582	224	1	476-486	CARDINAL
fcis-26582	225	1	39	CARDINAL
fcis-26582	225	2	apps[j	NORP
fcis-26582	226	1	arxiv	ORG
fcis-26582	226	2	arxiv:2105. 09938	DATE
fcis-26582	226	3	2021	DATE
fcis-26582	227	1	40	CARDINAL
fcis-26582	227	2	ren s	ORG
fcis-26582	228	1	arxiv	ORG
fcis-26582	228	2	2021	CARDINAL
fcis-26582	229	1	41	CARDINAL
fcis-26582	229	2	lai	ORG
fcis-26582	229	3	yuhang	PERSON
fcis-26582	230	1	2023	CARDINAL
fcis-26582	230	2	18319-18345	DATE
fcis-26582	231	1	42	CARDINAL
fcis-26582	231	2	chung j	PERSON
fcis-26582	232	1	2022	CARDINAL
fcis-26582	232	2	1092-1097	CARDINAL
fcis-26582	233	1	43	CARDINAL
fcis-26582	233	2	iyer s	ORG
fcis-26582	233	3	cheung	PERSON
fcis-26582	235	1	arxiv preprint arxiv:1808.09588	ORG
fcis-26582	235	2	2018	DATE
fcis-26582	236	1	44	CARDINAL
fcis-26582	236	2	2024-08-06	DATE
fcis-26582	237	1	45	CARDINAL
fcis-26582	237	2	eb/ol],https://huggingface.co	ORG
fcis-26582	238	1	75	CARDINAL
fcis-26582	239	1	46	CARDINAL
fcis-26582	239	2	gittens a. reading	PERSON
fcis-26582	240	1	arxiv preprint arxiv:2106.04447	ORG
fcis-26582	240	2	2021	DATE
fcis-26582	241	1	47	CARDINAL
fcis-26582	241	2	s.	PERSON
fcis-26582	241	3	van der wilk	PERSON
fcis-26582	241	4	donaldson, a.	ORG
fcis-26582	241	5	2023	CARDINAL
fcis-26582	243	1	arxiv	ORG
fcis-26582	244	1	48	CARDINAL
fcis-26582	244	2	rosedale	GPE
fcis-26582	245	1	arxiv	ORG
fcis-26582	245	2	2024	DATE
fcis-26582	246	1	49	CARDINAL
fcis-26582	246	2	golde j	PERSON
fcis-26582	246	3	akbik a. pecc:	PERSON
fcis-26582	247	1	arxiv	ORG
fcis-26582	247	2	arxiv:2404.18766	PRODUCT
fcis-26582	247	3	2024	DATE