Google at ACL 2023′ ACL 2023におけるGoogle

ACL 2023でのGoogle

Posted by Malaya Jules, Program Manager, Google

今週、自然言語処理と理解のリーダーであり、ACL 2023のダイヤモンドレベルスポンサーであるGoogleでは、50以上の研究発表と、さまざまなワークショップやチュートリアルへの積極的な参加を通じて、この広範な研究領域を紹介いたします。

ACL（Association for Computational Linguistics）は、自然言語に対する計算的手法に関連する幅広い研究分野をカバーする一流の会議であり、オンラインで開催されています。

ACL 2023に登録されている場合、Googleブースにお立ち寄りいただき、数十億人のために興味深い問題を解決するためにGoogleで行われているプロジェクトについて詳しくお知りください。以下でGoogleの参加についてもっと詳しく知ることもできます（Googleの関連情報は太字で表示されます）。

• 「ACL 2023でのGoogle」
• GoogleがACL 2023に参加します
• 「Amazon SageMakerトレーニングワークロードで@remoteデコレータを使用してプライベートリポジトリにアクセスする」

理事会および組織委員会

エリアチェアは、Dan Garrette、ワークショップチェアは、Annie Louis、パブリケーションチェアは、Lei Shu、プログラム委員会には、Vinodkumar Prabhakaran、Najoung Kim、Markus Freitagが含まれます。

注目論文

NusaCrowd: Indonesian NLPリソースのためのオープンソースイニシアティブ Samuel Cahyawijaya、Holy Lovenia、Alham Fikri Aji、Genta Winata、Bryan Wilie、Fajri Koto、Rahmad Mahendra、Christian Wibisono、Ade Romadhony、Karissa Vincentio、Jennifer Santoso、David Moeljadi、Cahya Wirawan、Frederikus Hudi、Muhammad Satrio Wicaksono、Ivan Parmonangan、Ika Alfina、Ilham Firdausi Putra、Samsul Rahmadani、Yulianti Oenang、Ali Septiandri、James Jaya、Kaustubh Dhole、Arie Suryani、Rifki Afina Putri、Dan Su、Keith Stevens、Made Nindyatama Nityasya、Muhammad Adilazuarda、Ryan Hadiwijaya、Ryandito Diandaru、Tiezheng Yu、Vito Ghifari、Wenliang Dai、Yan Xu、Dyah Damapuspita、Haryo Wibowo、Cuk Tho、Ichwanul Karo Karo、Tirana Fatyanosa、Ziwei Ji、Graham Neubig、Timothy Baldwin、Sebastian Ruder、Pascale Fung、Herry Sujaini、Sakriani Sakti、Ayu Purwarianti

密な検索のためのテスト時クエリ表現の最適化 Mujeen Sung、Jungsoo Park、Jaewoo Kang、Danqi Chen、Jinhyuk Lee

提案レベルのセグメンテーションと推論認識のための大規模コーパス PropSegmEnt Sihao Chen*、Senaka Buthpitiya、Alex Fabrikant、Dan Roth、Tal Schuster

ステップバイステップで蒸留！より少ないトレーニングデータと小さなモデルサイズで大規模な言語モデルを上回る Cheng-Yu Hsieh*、Chun-Liang Li、Chih-Kuan Yeh、Hootan Nakhost、Yasuhisa Fujii、Alex Ratner、Ranjay Krishna、Chen-Yu Lee、Tomas Pfister

制御可能な作業メモリを備えた大規模な言語モデル Daliang Li、Ankit Singh Rawat、Manzil Zaheer、Xin Wang、Michal Lukasik、Andreas Veit、Felix Yu、Sanjiv Kumar

意見に基づく自己トレーニングによる要約的な意見要約 OpineSum Annie Louis、Joshua Maynez

要約評価のための検索技術の活用 RISE David Uthus、Jianmo Ni

リーダーボードを自信を持ってフォローする：アイテムと応答の分散から単一のテストセットのp値を推定する Shira Wein*、Christopher Homan、Lora Aroyo、Chris Welty

SamToNe: Dual Encoder Retrieval Modelsにおける同じタワーネガティブを用いたコントラスティブロスの改善Fedor Moiseev、Gustavo Hernandez Abrego、Peter Dornbach、Imed Zitouni、Enrique Alfonseca、Zhe Dong

論文

ヘイスタックの中の針を探す：PaLMの翻訳能力における偶発的なバイリンガリズムの役割Eleftheria Briakou、Colin Cherry、George Foster

翻訳のためのPaLMへのプロンプト：戦略とパフォーマンスの評価David Vilar、Markus Freitag、Colin Cherry、Jiaming Luo、Viresh Ratnakar、George Foster

クローズドブックのロングフォームQAのためのクエリリファインメントプロンプトReinald Kim Amplayo、Kellie Webster、Michael Collins、Dipanjan Das、Shashi Narayan

オープンドメインの質問応答におけるドメイン適応の課題と介入：適応するか注釈を付けるかDheeru Dua*、Emma Strubell、Sameer Singh、Pat Verga

フューショットリージョンアウェアマシン翻訳のベンチマーク（ブログ投稿を参照）Parker Riley、Timothy Dozat、Jan A. Botha、Xavier Garcia、Dan Garrette、Jason Riesa、Orhan Firat、Noah Constant

質問応答ブループリントによる条件付き生成Shashi Narayan、Joshua Maynez、Reinald Kim Amplayo、Kuzman Ganchev、Annie Louis、Fantine Huot、Anders Sandholm、Dipanjan Das、Mirella Lapata

シーケンスツーシーケンス遷移ベースシステムによる共参照解析Bernd Bohnet、Chris Alberti、Michael Collins

低リソース依存構文解析のための言語固有のサブネットワークを用いたクロスリンガルトランスファーRochelle Choenni、Dan Garrette、Ekaterina Shutova

タスク指向の対話のためのダブルアラインドマルチリンガルパーサー（DAMP）William Held*、Christopher Hidey、Fei Liu、Eric Zhu、Rahul Goel、Diyi Yang、Rushin Shah

言語モデルが言うことを研究し、改訂するためのRARR：言語モデルを使用するLuyu Gao*、Zhuyun Dai、Panupong Pasupat、Anthony Chen*、Arun Tejasvi Chaganty、Yicheng Fan、Vincent Y. Zhao、Ni Lao、Hongrae Lee、Da-Cheng Juan、Kelvin Guu

条件付き生成のための大規模言語モデルの能力のベンチマーク化Joshua Maynez、Priyanka Agrawal、Sebastian Gehrmann

マルチタスクファインチューニングによるクロスリンガルジェネラライゼーションNiklas Muennighoff、Thomas Wang、Lintang Sutawika、Adam Roberts、Stella Biderman、Teven Le Scao、M. Saiful Bari、Sheng Shen、Zheng Xin Yong、Hailey Schoelkopf、Xiangru Tang、Dragomir Radev、Alham Fikri Aji、Khalid Almubarak、Samuel Albanie、Zaid Alyafeai、Albert Webson、Edward Raff、Colin Raffel

カウンターファクトの質問応答によるパラメトリックと文脈的な知識の分離DisentQA：Ella Neeman、Roee Aharoni、Or Honovich、Leshem Choshen、Idan Szpektor、Omri Abend

エンティティの選択のための間接参照表現の解決Mohammad Javad Hosseini, Filip Radlinski, Silvia Pareti, Annie Louis

広範な地理文化的カバレッジを活用したステレオタイプベンチマーク「SeeGULL」：生成モデルを活用したアプローチ Akshita Jha*、Aida Mostafazadeh Davani、Chandan K Reddy、Shachi Dave、Vinodkumar Prabhakaran、Sunipa Dev

社会バイアスベンチマークのデータセット構築バイアス「The Tail Wagging the Dog」 Nikil Selvam、Sunipa Dev、Daniel Khashabi、Tushar Khot、Kai-Wei Chang

文字認識モデルによる視覚テキストレンダリングの改善Rosanne Liu、Dan Garrette、Chitwan Saharia、William Chan、Adam Roberts、Sharan Narang、Irina Blok、RJ Mical、Mohammad Norouzi、Noah Constant

少数の言語モデルの微調整のためのコールドスタートデータ選択：プロンプトベースの不確実性伝播アプローチYue Yu、Rongzhi Zhang、Ran Xu、Jieyu Zhang、Jiaming Shen、Chao Zhang

回答評価のためのギャップに焦点を当てた質問生成「Covering Uncommon Ground」Roni Rabin、Alexandre Djerbetian、Roee Engelberg、Lidan Hackmon、Gal Elidan、Reut Tsarfaty、Amir Globerson

フォームドキュメント情報抽出のためのマルチモーダルグラフ対比学習「FormNetV2」Chen-Yu Lee、Chun-Liang Li、Hao Zhang、Timothy Dozat、Vincent Perot、Guolong Su、Xiang Zhang、Kihyuk Sohn、Nikolay Glushinev、Renshen Wang、Joshua Ainslie、Shangbang Long、Siyang Qin、Yasuhisa Fujii、Nan Hua、Tomas Pfister

方言に対する頑健な生成テキストの評価Jiao Sun*、Thibault Sellam、Elizabeth Clark、Tu Vu*、Timothy Dozat、Dan Garrette、Aditya Siddhant、Jacob Eisenstein、Sebastian Gehrmann

大規模言語モデルの代名詞理解能力の限界「MISGENDERED」Tamanna Hossain、Sunipa Dev、Sameer Singh

自然言語における自動推論のための後方推論「LAMBADA」Mehran Kazemi、Najoung Kim、Deepti Bhatia、Xin Xu、Deepak Ramachandran

トランスフォーマーにおける効率的なマルチセグメントエンコーディング「LAIT」Jeremiah Milbauer*、Annie Louis、Mohammad Javad Hosseini、Alex Fabrikant、Donald Metzler、Tal Schuster

コード生成を介したモジュラービジュアル質問応答（ブログ記事を参照）Sanjay Subramanian、Medhini Narasimhan、Kushal Khangaonkar、Kevin Yang、Arsha Nagrani、Cordelia Schmid、Andy Zeng、Trevor Darrell、Dan Klein

思考チェーンプロンプトの理解に向けて：重要な要素の実証研究Boshi Wang、Sewon Min、Xiang Deng、Jiaming Shen、You Wu、Luke Zettlemoyer、Huan Sun

Better Zero-Shot Reasoning with Self-Adaptive Prompting Xingchen Wan*、Ruoxi Sun、Hanjun Dai、Sercan Ö. Arik、Tomas Pfister

事実に基づく要約の強化学習による一貫性 Paul Roit、Johan Ferret、Lior Shani、Roee Aharoni、Geoffrey Cideron、Robert Dadashi、Matthieu Geist、Sertan Girgin、Léonard Hussenot、Orgad Keller、Nikola Momchev、Sabela Ramos、Piotr Stanczyk、Nino Vieillard、Olivier Bachem、Gal Elidan、Avinatan Hassidim、Olivier Pietquin、Idan Szpektor

対話型データサイエンスノートブックにおける自然言語からコード生成 Pengcheng Yin、Wen-Ding Li、Kefan Xiao、Abhishek Rao、Yeming Wen、Kensen Shi、Joshua Howland、Paige Bailey、Michele Catasta、Henryk Michalewski、Oleksandr Polozov、Charles Sutton

小さい言語モデルの推論を教える Lucie Charlotte Magister*、Jonathan Mallinson、Jakub Adamek、Eric Malmi、Aliaksei Severyn

ドメイン知識を使用して、ニューラル確率ソフトロジックを介した対話構造の導入をガイドする Connor Pryor*、Quan Yuan、Jeremiah Liu、Mehran Kazemi、Deepak Ramachandran、Tania Bedrax-Weiss、Lise Getoor

要約のためのMTurkの高同意労働者の分析 Lining Zhang、Simon Mille、Yufang Hou、Daniel Deutsch、Elizabeth Clark、Yixin Liu、Saad Mahamood、Sebastian Gehrmann、Miruna Clinciu、Khyathi Raghavi Chandu、João Sedoc

Industry Track papers

差分プライバシーを用いたGboard言語モデルのフェデレーテッドラーニング Zheng Xu、Yanxiang Zhang、Galen Andrew、Christopher Choquette、Peter Kairouz、Brendan McMahan、Jesse Rosenstock、Yuanbo Zhang

知識を用いたビジョン言語モデルの特徴適応による画像広告理解の再考 Zhiwei Jia*、Pradyumna Narayana、Arjun Akula、Garima Pruthi、Hao Su、Sugato Basu、Varun Jampani

ACL Findings papers

事実的一貫性評価を用いた多言語要約 Roee Aharoni、Shashi Narayan、Joshua Maynez、Jonathan Herzig、Elizabeth Clark、Mirella Lapata

頑健な継続的多言語学習のためのパラメータ効率なファインチューニング Kartikeya Badola、Shachi Dave、Partha Talukdar

FiDO: パフォーマンスと推論の高速化のためにデコーダでの融合最適化 Michiel de Jong*、Yury Zemlyanskiy、Joshua Ainslie、Nicholas FitzGerald、Sumit Sanghai、Fei Sha、William Cohen

コード生成におけるバイアスを見つけるためのシンプルで効果的なアプローチ　スピリドン・ムーセリノス、マテウシュ・マリノフスキ、ヘンリク・ミハレフスキ

BIG-Benchのタスクへの挑戦とチェーンオブソートがそれらを解決できるかどうか　ミラク・スズガン、ナサン・スケールズ、ナサニエル・シャーリ、セバスチャン・ゲルマン、イー・テイ、ヒョン・ウォン・チョン、アカンクシャ・チャウダリー、クオック・レ、エド・チ、デニー・チョウ、ジェイソン・ウェイ

QueryForm: シンプルなゼロショットフォームエンティティクエリーフレームワーク　ツィフェン・ワン、ジジャオ・チャン、ジェイコブ・デヴリン、チェンユー・リー、グオロン・スー、ハオ・チャン、ジェニファー・ダイ、ヴァンサン・ペロ、トーマス・フィスター

ReGen: プログレッシブな密なリトリーバルを用いたトレーニングデータ生成によるゼロショットテキスト分類　ユエ・ユ、ユチェン・ズワン、ロンジ・ジャン、ユ・メング、ジャミング・シェン、チャオ・チャン

ヘブライ語NLPのためのマルチリンガルシーケンスツーシーケンスモデル　マタン・エヤル、ヒラ・ノガ、ロエ・アハロニ、イダン・スペクトル、レウト・ツァルファティ

ソフトプロンプトとランダムウォークを用いた言語モデルにおける質問応答のためのマルチホップリーズニングのトリガー　カニシュカ・ミスラ、シセロ・ノゲイラ・ドス・サントス、シャマク・シャケリ

チュートリアル

自然言語における複雑な推論　ヴェンティング・ジャオ、モール・ゲヴァ、ビル・ユーチェン・リン、ミチヒロ・ヤスナガ、アマン・マダーン、タオ・ユー

言語モデルからのテキスト生成　アフラ・アミニ、ライアン・コタレル、ジョン・ヒューイット、クララ・マイスター、ティアゴ・ピメント

ワークショップ

シンプルで効率的な自然言語処理（SustaiNLP）　主催者： タル・シュスター

オンラインでの虐待と被害に関するワークショップ（WOAH）　主催者： アイダ・モスタファザデ・ダバニ

ドキュメントに基づく対話と会話型質問応答（DialDoc）　主催者： ロエ・アハロニ

会話型AIのためのNLP　主催者： アビナヴ・ラストギ

計算と書かれた言語（CAWL）　主催者： カイル・ゴーマン、 ブライアン・ロアーク、 リチャード・スプロット

計算的形態論と音韻論（SIGMORPHON）　スピーカー： カイル・ゴーマン

物語理解に関するワークショップ（WNU）　主催者： エリザベス・クラーク

---

* Googleでの業務

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!