README.md 2025-11-05
1 / 6
AID
e
:
S
u
d
y
i
n
g
AI C
o
di
n
g
A
ge
n s
on
G
i
H
u
b
(
T
he
R
i
s
e
o
AI
T
ea
mm
a
e
s
i
n
S
o
w
a
e
E
n
gi
n
ee
i
n
g
3.0)
📢
W
e
ʼ
e
h
os
i
n
g
he
MSR
2026
M
i
n
i
n
g
C
ha
ll
e
n
ge
(
c
o
-
lo
ca
ed
w
i
h
ICSE
2026
i
n
R
i
o
de
J
a
n
ei
o
,
B
a
z
i
l
).
D
e
ai
ls
a
n
d
su
b
m
i
ss
i
ons
:
⚠
⚠
⚠
h
ps
://2026.
ms
c
on
.
o
g
/
ack
/
ms
-2026-
m
i
n
i
n
g
-
cha
ll
e
n
ge
⚠
⚠
⚠
a Xi
a Xi 2507.15003
2507.15003
Gi Hub
Gi Hub Code
Code
DOI
DOI 10.5281/zenodo.16919272
10.5281/zenodo.16919272
P
a
p
e
:
h
ps
://
a
x
i
.
o
g
/
ab
s
/2507.15003
G
i
H
u
b
:
h
ps
://
gi
h
u
b
.
c
om
/
SAILR
e
s
ea
ch
/
AI
_
T
ea
mm
a
e
s
_
i
n
_
SE
3
E
x
a
mpl
e
N
o
eb
oo
k
s
:
D
e
s
c
i
p
i
on
N
o
eb
oo
k
L
i
n
k
O
p
e
n
i
n
C
ol
ab
B
a
s
ic
us
age
lo
ad
_
AID
e
.
i
pyn
b
Open in Colab
Open in Colab
D
a
a
s
e
o
e
ie
w
da
a
s
e
_
o
e
ie
w
.
i
pyn
b
Open in Colab
Open in Colab
A
n
a
lys
i
s
o
p o
g
a
mm
i
n
g
us
age
l
a
n
g
u
age
_
us
age
.
i
pyn
b
Open in Colab
Open in Colab
PR
m
e
ge
a
e
a
n
d
u n
a
oun
d
i
m
e
p o
d
u
c
i
i
y
.
i
pyn
b
Open in Colab
Open in Colab
⚠
U
p
da
e
(
O
c
28,
2025):
p _commi _de ails
ha
s
bee
n
up
da
ed
o
i
n
c
lu
de
a
ll
p
a
che
s
e
ched
om
G
i
H
u
b
API
(
w
hich
d
o
e
s
no
p o
ide
c
on
e
n
o
l
a
ge
p
a
che
s
).
U
s
e
s
mus
e
i
y
a
n
d
c
omply
w
i
h
he
sp
eci ic
l
ice
ns
e
o
each
sou
ce
e
pos
i
o y
.
⚠
U
p
da
e
(
O
c
16,
2025):
p _ e iew_commen s.pa que
d
o
e
s
no
c
on
ai
n
ull
da
a
po
i
n s
,
us
e
p _ e iew_commen s_ 2.pa que
i
ns
ead
.
⚠
U
p
da
e
(
A
u
g
10,
2025):
T
he
da
a
s
e
ha
s
bee
n
e
e
s
hed
o
i
n
c
lu
de
da
a
up
o
A
u
g
us
1,
2025
,
e
nsu
i
n
g
ou
da
a
s
e
e
l
ec
s
he
mos
ece
n
e
n
d
s
i
n
c
o
di
n
g
age
n s
.
O
e
ie
w
AID
e
i
s
a
l
a
ge
-
s
ca
l
e
da
a
s
e
ca
p u
i
n
g
he
e
m
e
ge
n
ce
o
a
u onomous
c
o
di
n
g
age
n s
(
AI
ea
mm
a
e
s
)
w
i
hi
n
ea
l
-
wo l
d
op
e
n
-
sou
ce
so
w
a
e
e
n
gi
n
ee
i
n
g
.
I
sp
a
ns
n
ea
ly
1
m
i
ll
i
on
pull
e
qu
e
s s
ac
oss
README.md 2025-11-05
2 / 6
116,000+
e
pos
i
o
ie
s
,
a
u
h
o
ed
b
y
i
e
AI
c
o
di
n
g
age
n s
:
O
p
e
n
AI C
o
de
x
,
D
e
i
n
,
G
i
H
u
b
C
op
i
lo
,
C
u so
,
a
n
d
C
l
a
u
de
C
o
de
,
a
n
d
i
n ol
i
n
g
72,000+
h
um
a
n
de
e
lop
e
s
.
Y
ou
ca
n
ea
s
i
ly
lo
ad
he
da
a
s
e
b
y
ou
l
i
n
e
s
o
c
o
de
:
impo pandas as pd
all_p _d = pd. ead_pa que ("h ://da ase s/hao-
li/AIDe /all_pull_ eques .pa que ")
all_ epo_d = pd. ead_pa que ("h ://da ase s/hao-
li/AIDe /all_ eposi o y.pa que ")
all_use _d = pd. ead_pa que ("h ://da ase s/hao-
li/AIDe /all_use .pa que ")
I
you
'
e
i
n
e
e
s
ed
i
n
he
a
w
da
a
o
AID
e
-
pop
,
you
ca
n
i
n
d
he
m
he
e
:
h
ps
://
d
i
e
.
g
oo
g
l
e
.
c
om
/
i
l
e
/
d
/1
l
0_
R
j
S
7
ZT
0
Y
27
V
3
m
0
o
JK
-
j e
R
kh
q
5
l
5/
ie
w
?
usp
=
d
i
e
_
l
i
n
k
I
n
e
n
ded
U
s
e
s
F
i
n
e
-
un
i
n
g
o
pos
-
ai
n
i
n
g
:
i
n
e
-
un
i
n
g
o
pos
-
ai
n
i
n
g
you
LLM
s
/
age
n s
ba
s
ed
on
he
p
a
che
s
E
mp
i
ica
l
SE
e
s
ea
ch
:
a
n
a
lys
e
c
oll
ab
o
a
i
on
p
a
e
ns
,
e
ie
w
l
a
e
n
c
y
,
e
lo
ci
y
A
ge
n
e
a
lu
a
i
on
:
m
ea
su
e
b
u
g
-
i
x
su
cce
ss
,
c
o
de
qu
a
l
i
y
,
PR
acce
p
a
n
ce
a
e
H
um
a
n
–
AI
i
n
e
ac
i
on
:
s u
d
y
c
on
e
s
a
i
on
a
l
e
ie
w
d
yn
a
m
ic
s
a
n
d
s
e
n
i
m
e
n
Q
u
ick
L
oo
k
T
he
o
e
ie
w
o
he
AID
e
da
a
s
e
i
s
a
s
ollows
:
#
PR
#
D
e
e
lop
e
#
R
e
po
OpenAI Codex
814,522 61,653 84,704
De in
29,744
NA
4,747
Gi Hub Copilo
50,447
NA
14,492
Cu so
32,941 9,658 12,699
Claude Code
5,137 1,643 1,915
T
o
a
l
932,791 72,189 116,211
README.md 2025-11-05
3 / 6
D
a
a
s
e
S
u
c
u
e
README.md 2025-11-05
4 / 6
A
de
ai
l
ed
e
xpl
a
n
a
i
on
ab
ou
he
ie
l
d
s
o
he
ab
l
e
s
ca
n
be
oun
d
i
n
da
a
_
ab
l
e
.
m
d
.
AID
e
i
s
o
ga
n
i
z
ed
i
n o
no m
a
l
i
z
ed
ab
l
e
s
(
a
ai
l
ab
l
e
a
s
CS
V
s
)
ha
ca
n
be
j
o
i
n
ed
ia
c
ons
i
s
e
n
ke
ys
.
T
he
c
o
e
c
ompon
e
n s
i
n
c
lu
de
:
all_pull_ eques
:
PR
-
l
e
e
l
da
a
(
ID
,
i
l
e
,
b
o
d
y
,
age
n
l
abe
l
,
us
e
i
n
o
,
s
a
e
,
i
m
e
s
a
mps
)
all_ eposi o y
:
M
e
ada
a
i
n
c
lu
di
n
g
l
ice
ns
e
,
l
a
n
g
u
age
,
s
a
s
,
o
k
s
,
a
n
d
p o
jec
-
l
e
e
l
i
n
o
all_use
:
U
s
e
i
n
o m
a
i
on
su
ch
a
s
id
,
lo
gi
n
,
a
n
d
c
ea
ed
da
e
(
p
e
son
a
lly
i
n
o m
a
i
on
ha
s
bee
n
e
mo
ed
o
add
e
ss
p
i
ac
y
c
on
ce
ns
)
AID
e
-
pop
:
F
i
l
e
ed
(>100
s
a
s
)
#
PR
#
D
e
e
lop
e
#
R
e
po
OpenAI Codex
21,799 1,284 1,248
De in
4,827
NA
288
Gi Hub Copilo
4,970
NA
1,012
Cu so
1,541 363 327
README.md 2025-11-05
5 / 6
#
PR
#
D
e
e
lop
e
#
R
e
po
Claude Code
459 236 213
T
o
a
l
33,596 1,796 2,807
F
o
he
AID
e
-
pop
su
b
s
e
(
e
pos
i
o
ie
s
w
i
h
mo
e
ha
n
100
s
a
s
)
o
AID
e
,
w
e
p o
ide
e
x
a
ab
l
e
s
:
pull_ eques
:
PR
-
l
e
e
l
da
a
(
ID
,
i
l
e
,
b
o
d
y
,
age
n
l
abe
l
,
us
e
i
n
o
,
s
a
e
,
i
m
e
s
a
mps
)
eposi o y
:
M
e
ada
a
i
n
c
lu
di
n
g
l
ice
ns
e
,
l
a
n
g
u
age
,
s
a
s
,
o
k
s
,
a
n
d
p o
jec
-
l
e
e
l
i
n
o
p _ imeline
:
C
ompl
e
e
PR
e
e
n
hi
s o y
(
op
e
n
/
c
los
e
/
m
e
ge
,
l
abe
l
,
a
ss
ig
n
,
e
c
.)
p _commen s
&
p _ e iews
&
p _ e iew_commen s_ 2
:
R
e
ie
w
di
s
c
uss
i
ons
,
a
pp o
a
ls
,
i
m
e
s
a
mps
,
ac
o s
,
p _ e iew_commen s_ 2
c
on
ai
ns
i
nl
i
n
e
e
ie
w
c
omm
e
n s
p _commi s
&
p _commi _de ails
:
C
omm
i
m
e
ada
a
,
di
s
,
i
l
e
-
l
e
e
l
cha
n
ge
s
,
p
a
ch
.
N
o
e
ha
he
pa ch
da
a
d
o
e
s
no
i
n
c
lu
de
l
a
ge
p
a
che
s
s
i
n
ce
he
G
i
H
u
b
API
d
o
e
s
no
p o
ide
he
m
.
I
you
w
a
n
he
l
a
ge
p
a
che
s
,
you
n
eed
o
d
ownlo
ad
he
m
you s
e
l
.
p _ ask_ ype
:
A
u o
-
c
l
a
ss
i ica
i
on
o
PR
pu pos
e
us
i
n
g
C
on
e
n
i
on
a
l
C
omm
i
ca
eg
o
ie
s
ia
LLM
s
issue
&
ela ed_issue
:
L
i
n
ked
G
i
H
u
b
i
ssu
e
s
a
n
d
hei
m
a
pp
i
n
g
o
PR
s
use
:
U
s
e
i
n
o m
a
i
on
su
ch
a
s
id
,
lo
gi
n
,
a
n
d
c
ea
ed
da
e
(
p
e
son
a
lly
i
n
o m
a
i
on
ha
s
bee
n
e
mo
ed
o
add
e
ss
p
i
ac
y
c
on
ce
ns
)
H
um
a
n
-
PR
H
um
a
n
-
PR
s
w
e
e
s
a
mpl
ed
om
he
s
a
m
e
e
pos
i
o
ie
s
a
s
A
ge
n
ic
-
PR
s
,
b
u
only
om
h
os
e
ha
ha
e
mo
e
ha
n
500
s
a
s
:
human_pull_ eques
:
PR
-
l
e
e
l
da
a
(
ID
,
i
l
e
,
b
o
d
y
,
age
n
l
abe
l
,
us
e
i
n
o
,
s
a
e
,
i
m
e
s
a
mps
)
human_p _ ask_ ype
:
A
u o
-
c
l
a
ss
i ica
i
on
o
PR
pu pos
e
us
i
n
g
C
on
e
n
i
on
a
l
C
omm
i
ca
eg
o
ie
s
ia
LLM
s
L
ice
ns
e
T
hi
s
da
a
s
e
agg
ega
e
s
c
on
e
n
om
G
i
H
u
b
e
pos
i
o
ie
s
.
E
ach
sou
ce
e
pos
i
o y
e
ai
ns
i
s
o
igi
n
a
l
c
opy
igh
a
n
d
l
ice
ns
e
(
e
.
g
.,
MI
T
,
A
p
ache
-2.0,
GPL
a
m
i
ly
,
C
ea
i
e
C
ommons
a
ia
n s
,
e
c
.).
F
i
l
e
s
,
p
a
che
s
/
di
s
,
a
n
d
a
ny
o
he
a
i ac
s
o
igi
n
a
i
n
g
om
h
os
e
e
pos
i
o
ie
s
e
m
ai
n
g
o
e
n
ed
b
y
hei
o
igi
n
a
l
l
ice
ns
e
s
.
U
s
e
s
mus
e
i
y
a
n
d
c
omply
w
i
h
he
sp
eci ic
l
ice
ns
e
o
a
ny
sou
ce
e
pos
i
o y
o
i
l
e
he
y
e
x
ac
o
us
e
om
hi
s
c
oll
ec
i
on
.
D
o
no
a
ssum
e
a
un
i
e
s
a
l
e
-
l
ice
ns
e
.
I
you
be
l
ie
e
c
on
e
n
a
pp
ea
s
he
e
i
n
a
w
a
y
ha
c
on
l
ic
s
w
i
h
i
s
l
ice
ns
e
,
pl
ea
s
e
c
on
ac
he
m
ai
n
ai
n
e
s
,
a
n
d
i
w
i
ll
be
e
mo
ed
.
I
mpo
a
n
:
R
e
pos
i
o y
c
on
e
n s
m
ai
n
ai
n
hei
o
igi
n
a
l
l
ice
ns
e
s
.
P
l
ea
s
e
e
sp
ec
i
n
di
id
u
a
l
p o
jec
l
ice
ns
e
s
w
he
n
us
i
n
g
hi
s
da
a
.
C
i
a
i
on
I
you
us
e
AID
e
i
n
you
wo
k
,
pl
ea
s
e
ci
e
:
README.md 2025-11-05
6 / 6
@misc{li2025ai eamma es_se3,
i le={The Rise o AI Teamma es in So wa e Enginee ing (SE) 3.0: How
Au onomous Coding Agen s A e Reshaping So wa e Enginee ing},
au ho ={Hao Li and Haoxiang Zhang and Ahmed E. Hassan},
yea ={2025},
ep in ={2507.15003},
a chi eP e ix={a Xi },
p ima yClass={cs.SE},
u l={h ps://a xi .o g/abs/2507.15003}
}
