Here's the direct link to the repo: https://github.com/sebastianruder/NLP-progress … Let me know if you find this helpful. Submit a PR if I've missed your favourite task or dataset or your new state-of-the-art result!
-
-
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
Cool :) even though it's slighty outdated, the acl sota page could have been a cool hosting page too. https://aclweb.org/aclwiki/State_of_the_art …
-
Agreed! Would be cool to reinvigorate that page. I don't really care where this lives. I just want an up-to-date resource that makes maintenance and contribution easy.
কথা-বার্তা শেষ
নতুন কথা-বার্তা -
-
-
Thank you
@seb_ruder for this great job, as usual! Everything you do for the community is so useful to everyone! -
Thank you, Francois! That really means a lot. I was initially just trying to scratch my own itch and thought others might find it helpful. I hope that'll encourage others to do the same. :)
কথা-বার্তা শেষ
নতুন কথা-বার্তা -
-
-
A centralized repo is doomed to fail. Research papers are already tracking SOTA in a decentralized fashion. Papers have incentive to stay up to date because they must provide a meaningful comparisons to related work. Meaningful comparison >> numeric score taken out of context.
-
I might push back on that. Centralized tracking has worked well for SQuAD. It would be nice if something similar existed for language modeling, but I agree it might be a fool's errand.
-
But what did SQuAD really bring to the field? Some complex number-chasing architectures that could not even survive from simple adversarial perturbations?
-
Shots fired...
-
Well played. :) We need metrics, though, to measure progress. We just need to create better datasets.
কথা-বার্তা শেষ
নতুন কথা-বার্তা -
-
-
Very nice! I've just started my NLP journey, so I may be mistaken, but I think also
@prfsanjeevarora SIF reweighting would be a good addition to the baselines for the https://github.com/sebastianruder/NLP-progress#semantic-textual-similarity … section of your repository, right? -
Yes, I think so. Feel free to submit a PR with the results. :)
-
Will do!
কথা-বার্তা শেষ
নতুন কথা-বার্তা -
-
-
A related repo for tracking speech recognition progress that is also very nice: https://github.com/syhw/wer_are_we Thanks for the resource
@seb_ruder!ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
Thanks! This is great!
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
Thank you
@seb_ruderধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
Very nice resource. Thank you!
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
This is awesome. Now I just need a tool to track the growth of NLP-package-tracking packages, and my life will be complete!
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
That's really helpful. Is there a similar resource for vision tasks?
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
-
-
Nice work!
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
লোড হতে বেশ কিছুক্ষণ সময় নিচ্ছে।
টুইটার তার ক্ষমতার বাইরে চলে গেছে বা কোনো সাময়িক সমস্যার সম্মুখীন হয়েছে আবার চেষ্টা করুন বা আরও তথ্যের জন্য টুইটারের স্থিতি দেখুন।