《只说给你听》专辑是许茹芸签约百代唱片后的首张音乐专辑，百代唱片特别邀请了陈子鸿、李振权、李欣芸、龟田诚治、Patrick Tucker等制作人为其打造歌曲。专辑团队认为许茹芸的声音有着稳定性的同时，还拥有可塑性的空间，所以在挑选以及制作歌曲时，针对许茹芸的特质与声音进行了不同的创新。在许茹芸加盟百代唱片的记者会上，百代唱片公开承诺邀请许茹芸偶像椎名林檎的制作人龟田诚治为其打造一首歌曲，因此在该专辑中兑现了该承诺。

整张专辑中收录了13首曲目，其中包括两首许茹芸的创作。 在专辑开案时，龟田诚治就到中国台湾开制作会议。因为龟田很喜欢许茹芸的声音，同时他对许茹芸的创作能力充满兴趣，他在倾听了上百首歌曲的DEMO之后，最终挑选了许茹芸创作的曲子《白纸黑字》，亲自指名要制作该曲。《他们的故事》则是北欧瑞典双人团体的原创曲。《相爱的片刻》源自一首国外的原创曲，由李振权制作、姚谦填词。该曲的形式与曲风带有着R&B的风格，对于许茹芸是一个尝试。于是她尝试用慵懒的声音与步调来诠释该曲，最终获得满意的效果。