はい、できます。
アドレス帳の顧客/取引先のうち、共有したい外部ユーザーの連絡先の公開範囲を変更します。
・公開範囲を「メンバー指定」にして、共有したいメンバーを指定し共有。
・公開範囲を「すべてのメンバー」にして、組織に所属する全メンバーに連絡先を共有。

※外部ユーザーの連絡先を直接追加していない場合は、共有された連絡先から外部ユーザーとのトークができません。