基于C++ Coroutines提案 ‘Stackless Resumable Functions’编写的协程库
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

test_async_modern_cb.cpp 15KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420
  1. #include "librf.h"
  2. #include <chrono>
  3. #include <iostream>
  4. #include <string>
  5. #include <thread>
  6. #include <future>
  7. //原旨主义的异步函数,其回调写法大致如下
  8. template<typename _Input_t, typename _Callable_t>
  9. __declspec(noinline)
  10. void tostring_async_originalism(_Input_t&& value, _Callable_t&& token)
  11. {
  12. std::thread([callback = std::move(token), value = std::forward<_Input_t>(value)]
  13. {
  14. callback(std::to_string(value));
  15. }).detach();
  16. }
  17. //使用原旨主义的方式扩展异步方法来支持future
  18. template<typename _Input_t>
  19. auto tostring_async_originalism_future(_Input_t&& value)
  20. {
  21. std::promise<std::string> _promise;
  22. std::future<std::string> _future = _promise.get_future();
  23. std::thread([_promise = std::move(_promise), value = std::forward<_Input_t>(value)]() mutable
  24. {
  25. _promise.set_value(std::to_string(value));
  26. }).detach();
  27. return std::move(_future);
  28. }
  29. //----------------------------------------------------------------------------------------------------------------------
  30. //以下演示如何通过现代回调(Modern Callback), 使用回调适配器模型,
  31. //将异步回调函数扩展到支持future模式,调用链模式,以及协程。
  32. //首先,准备modern_call_return_void_t和modern_callback_adapter_t给异步函数使用
  33. //通过一个间接的类来解决返回void的语法问题,以便于优化返回值
  34. struct modern_call_return_void_t
  35. {
  36. void get(){}
  37. };
  38. //回调适配器的模板类
  39. //_Callable_t 要符合 _Signature_t 签名
  40. //这个类除了转移token外,不做任何有效的工作
  41. //有效工作等待特列化的类去做
  42. template<typename _Callable_t, typename _Signature_t>
  43. struct modern_callback_adapter_t
  44. {
  45. using callback_type = _Callable_t;
  46. using return_type = modern_call_return_void_t;
  47. static std::tuple<callback_type, return_type> traits(_Callable_t&& token)
  48. {
  49. return { std::forward<_Callable_t>(token), {} };
  50. }
  51. };
  52. //一个使用回调处理结果的异步函数,会涉及以下概念:
  53. //_Input_t:异步函数的输入参数;
  54. //_Signature_t: 此异步回调的函数签名;应当满足‘void(_Exception_t, _Result_t...)’或者‘void(_Result_t...)’类型;
  55. //_Callable_t:回调函数或标记,如果是回调函数,则需要符合_Signature_t的签名类型。这个回调,必须调用一次,且只能调用一次;
  56. //_Return_t:异步函数的返回值;
  57. //_Result_t...:异步函数完成后的结果值,作为回调函数的入参部分;这个参数可以有零至多个;
  58. //_Exception_t:回调函数的异常, 如果不喜欢异常的则忽略这个部分,但就得异步代码将异常处置妥当;
  59. //
  60. //在回调适配器模型里,_Input_t/_Result_t/_Exception_t(可选)是异步函数提供的功能所固有的部分;_Callable_t/_Return_t
  61. //部分并不直接使用,而是通过适配器去另外处理。这样给予适配器一次扩展到future模式,调用链模式的机会,以及支持协程的机会。
  62. //
  63. //tostring_async 演示了在其他线程里,将_Input_t的输入值,转化为std::string类型的_Result_t。
  64. //然后调用_Signature_t为 ‘void(std::string &&)’ 类型的 _Callable_t。
  65. //忽视异常处理,故没有_Exception_t。
  66. //
  67. template<typename _Input_t, typename _Callable_t>
  68. __declspec(noinline)
  69. auto tostring_async(_Input_t&& value, _Callable_t&& token)
  70. {
  71. //适配器类型
  72. using _Adapter_t = modern_callback_adapter_t<std::decay_t<_Callable_t>, void(std::string)>;
  73. //通过适配器获得兼容_Signature_t类型的真正的回调,以及返回值_Return_t
  74. auto adapter = typename _Adapter_t::traits(std::forward<_Callable_t>(token));
  75. //callback与token未必是同一个变量,甚至未必是同一个类型
  76. std::thread([callback = std::move(std::get<0>(adapter)), value = std::forward<_Input_t>(value)]
  77. {
  78. using namespace std::literals;
  79. std::this_thread::sleep_for(0.1s);
  80. callback(std::to_string(value));
  81. }).detach();
  82. //返回适配器的_Return_t变量
  83. return std::move(std::get<1>(adapter)).get();
  84. }
  85. //或者宏版本写法
  86. #define MODERN_CALLBACK_TRAITS(signature) \
  87. using _Adapter_t = modern_callback_adapter_t<std::decay_t<_Callable_t>, signature>; \
  88. auto adapter = typename _Adapter_t::traits(std::forward<_Callable_t>(token))
  89. #define MODERN_CALLBACK_CALL() callback = std::move(std::get<0>(adapter))
  90. #define MODERN_CALLBACK_RETURN() return std::move(std::get<1>(adapter)).get()
  91. template<typename _Input_t, typename _Callable_t>
  92. auto tostring_async_macro(_Input_t&& value, _Callable_t&& callback)
  93. {
  94. MODERN_CALLBACK_TRAITS(void(std::string));
  95. std::thread([MODERN_CALLBACK_CALL(), value = std::forward<_Input_t>(value)]
  96. {
  97. callback(std::to_string(value));
  98. }).detach();
  99. MODERN_CALLBACK_RETURN();
  100. }
  101. //----------------------------------------------------------------------------------------------------------------------
  102. //下面演示如何扩展tostring_async函数,以支持future模式
  103. //future库有多种,但应当都提供遵循promise/future对,兼容std::promise/std::future用法
  104. //这样的话,可以做一个更加通用的支持future的callback类
  105. //实现use_future_callback_t的基类,避免写一些重复代码
  106. template<typename _Promise_traits, typename _Result_t>
  107. struct use_future_callback_base_t
  108. {
  109. //回调函数的结果类型,已经排除掉了异常参数
  110. using result_type = _Result_t;
  111. //通过_Promise_traits获取真正的promise类型
  112. using promise_type = typename _Promise_traits::template promise_type<result_type>;
  113. //此类持有一个std::promise<_Result_t>,便于设置值和异常
  114. //而将与promise关联的future作为返回值_Return_t,让tostring_async返回。
  115. mutable promise_type _promise;
  116. auto get_future() const
  117. {
  118. return _promise.get_future();
  119. }
  120. };
  121. //此类的实例作为真正的callback,交给异步回调函数,替换token。
  122. //在实际应用中,需要针对是否有异常参数,结果值为0,1,多个等情况做特殊处理,故还需要通过更多的偏特化版本来支持。
  123. //具体的异常参数,需要根据实际应用去特里化。这里仅演示通过std::exception_ptr作为异常传递的情况。
  124. //
  125. //无异常,多结果的callback类型:void(_Result_t...)
  126. template<typename _Promise_traits, typename... _Result_t>
  127. struct use_future_callback_t : public use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >
  128. {
  129. using use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >::use_future_callback_base_t;
  130. template<typename... Args>
  131. void operator()(Args&&... args) const
  132. {
  133. static_assert(sizeof...(Args) == sizeof...(_Result_t), "");
  134. _promise.set_value(std::make_tuple(std::forward<Args>(args)...));
  135. }
  136. };
  137. //有异常,多结果的callback类型:void(std::exception_ptr, _Result_t...)
  138. template <typename _Promise_traits, typename... _Result_t>
  139. struct use_future_callback_t<_Promise_traits, std::exception_ptr, _Result_t...> : public use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >
  140. {
  141. using use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >::use_future_callback_base_t;
  142. template<typename... Args>
  143. void operator()(std::exception_ptr eptr, Args&&... args) const
  144. {
  145. static_assert(sizeof...(Args) == sizeof...(_Result_t), "");
  146. if (!eptr)
  147. _promise.set_value(std::make_tuple(std::forward<Args>(args)...));
  148. else
  149. _promise.set_exception(std::move(eptr));
  150. }
  151. };
  152. //无异常,无结果的callback类型:void()
  153. template<typename _Promise_traits>
  154. struct use_future_callback_t<_Promise_traits> : public use_future_callback_base_t<_Promise_traits, void>
  155. {
  156. using use_future_callback_base_t<_Promise_traits, void>::use_future_callback_base_t;
  157. void operator()() const
  158. {
  159. _promise.set_value();
  160. }
  161. };
  162. //有异常,无结果的callback类型:void(exception_ptr)
  163. template<typename _Promise_traits>
  164. struct use_future_callback_t<_Promise_traits, std::exception_ptr> : public use_future_callback_base_t<_Promise_traits, void>
  165. {
  166. using use_future_callback_base_t<_Promise_traits, void>::use_future_callback_base_t;
  167. void operator()(std::exception_ptr eptr) const
  168. {
  169. if (!eptr)
  170. _promise.set_value();
  171. else
  172. _promise.set_exception(std::move(eptr));
  173. }
  174. };
  175. //无异常,单结果的callback类型:void(_Result_t)
  176. template<typename _Promise_traits, typename _Result_t>
  177. struct use_future_callback_t<_Promise_traits, _Result_t> : public use_future_callback_base_t<_Promise_traits, _Result_t>
  178. {
  179. using use_future_callback_base_t<_Promise_traits, _Result_t>::use_future_callback_base_t;
  180. template<typename Arg>
  181. void operator()(Arg && arg) const
  182. {
  183. _promise.set_value(std::forward<Arg>(arg));
  184. }
  185. };
  186. //有异常,单结果的callback类型:void(std::exception_ptr, _Result_t)
  187. template<typename _Promise_traits, typename _Result_t>
  188. struct use_future_callback_t<_Promise_traits, std::exception_ptr, _Result_t> : public use_future_callback_base_t<_Promise_traits, _Result_t>
  189. {
  190. using use_future_callback_base_t<_Promise_traits, _Result_t>::use_future_callback_base_t;
  191. template<typename Arg>
  192. void operator()(std::exception_ptr eptr, Arg && arg) const
  193. {
  194. if (!eptr)
  195. _promise.set_value(std::forward<Arg>(arg));
  196. else
  197. _promise.set_exception(std::move(eptr));
  198. }
  199. };
  200. //与use_future_callback_t配套的获得_Return_t的类
  201. template<typename _Future_traits, typename _Result_t>
  202. struct use_future_return_t
  203. {
  204. using result_type = _Result_t;
  205. using future_type = typename _Future_traits::template future_type<result_type>;
  206. future_type _future;
  207. use_future_return_t(future_type && ft)
  208. : _future(std::move(ft)) {}
  209. future_type get()
  210. {
  211. return std::move(_future);
  212. }
  213. };
  214. //----------------------------------------------------------------------------------------------------------------------
  215. //一、做一个使用std::promise/std::future的辅助类。
  216. //这个类还负责萃取promise/future对的类型。
  217. struct std_future_t
  218. {
  219. template<typename _Result_t>
  220. using promise_type = std::promise<_Result_t>;
  221. template<typename _Result_t>
  222. using future_type = std::future<_Result_t>;
  223. };
  224. //二、申明这个辅助类的全局变量。不申明这个变量也行,就是每次要写use_future_t{},麻烦些。
  225. //以后就使用std_future,替代tostring_async的token参数了。
  226. //这个参数其实不需要实质传参,最后会被编译器优化没了。
  227. //仅仅是要指定_Callable_t的类型为std_future_t,
  228. //从而在tostring_async函数内,使用偏特化的modern_callback_adapter_t<std_future_t, ...>而已。
  229. constexpr std_future_t std_future{};
  230. //三、特例化的modern_callback_adapter_t的实现类
  231. template<typename _Token_as_callable_t, typename... _Result_t>
  232. struct modern_callback_adapter_impl_t
  233. {
  234. using traits_type = _Token_as_callable_t;
  235. using callback_type = use_future_callback_t<traits_type, _Result_t...>;
  236. using result_type = typename callback_type::result_type;
  237. using return_type = use_future_return_t<traits_type, result_type>;
  238. static std::tuple<callback_type, return_type> traits(const _Token_as_callable_t& /*没人关心这个变量*/)
  239. {
  240. callback_type callback{};
  241. auto future = callback.get_future();
  242. return { std::move(callback), std::move(future) };
  243. }
  244. };
  245. //四、偏特化_Callable_t为std_future_t类型的modern_callback_adapter_t
  246. //真正的回调类型是use_future_callback_t,返回类型_Return_t是use_future_return_t。
  247. //配合use_future_callback_t的promise<result_type>,和use_future_return_t的future<result_type>,正好组成一对promise/future对。
  248. //promise在真正的回调里设置结果值;
  249. //future返回给调用者获取结果值。
  250. template<typename R, typename... _Result_t>
  251. struct modern_callback_adapter_t<std_future_t, R(_Result_t...)> : public modern_callback_adapter_impl_t<std_future_t, _Result_t...>
  252. {
  253. };
  254. //----------------------------------------------------------------------------------------------------------------------
  255. //同理,可以制作支持C++20的协程的下列一系列类(其实,这才是我的最终目的)
  256. struct use_librf_t
  257. {
  258. template<typename _Result_t>
  259. using promise_type = resumef::promise_t<_Result_t>;
  260. template<typename _Result_t>
  261. using future_type = resumef::future_t<_Result_t>;
  262. };
  263. constexpr use_librf_t use_librf{};
  264. template<typename R, typename... _Result_t>
  265. struct modern_callback_adapter_t<use_librf_t, R(_Result_t...)> : public modern_callback_adapter_impl_t<use_librf_t, _Result_t...>
  266. {
  267. };
  268. //所以,我现在的看法是,支持异步操作的库,尽可能如此设计回调。这样便于支持C++20的协程。以及future::then这样的任务链。
  269. //这才是“摩登C++”!
  270. //----------------------------------------------------------------------------------------------------------------------
  271. //使用范例
  272. //演示异步库有多个异步回调函数,只要按照Modern Callback范式去做回调,就不再需要写额外的代码,就可以适配到future+librf,以及更多的其他库
  273. template<typename _Ty1, typename _Ty2, typename _Callable_t>
  274. auto add_async(_Ty1&& val1, _Ty2&& val2, _Callable_t&& token)
  275. {
  276. MODERN_CALLBACK_TRAITS(void(decltype(val1 + val2)));
  277. std::thread([=, MODERN_CALLBACK_CALL()]
  278. {
  279. using namespace std::literals;
  280. std::this_thread::sleep_for(0.1s);
  281. callback(val1 + val2);
  282. }).detach();
  283. MODERN_CALLBACK_RETURN();
  284. }
  285. //演示异步库有多个异步回调函数,只要按照Modern Callback范式去做回调,就不再需要写额外的代码,就可以适配到future+librf,以及更多的其他库
  286. template<typename _Ty1, typename _Ty2, typename _Callable_t>
  287. auto muldiv_async(_Ty1&& val1, _Ty2&& val2, _Callable_t&& token)
  288. {
  289. MODERN_CALLBACK_TRAITS(void(std::exception_ptr, decltype(val1 * val2), decltype(val1 / val2)));
  290. std::thread([=, MODERN_CALLBACK_CALL()]
  291. {
  292. using namespace std::literals;
  293. std::this_thread::sleep_for(0.1s);
  294. auto v1 = val1 * val2;
  295. if (val2 == 0)
  296. callback(std::make_exception_ptr(std::logic_error("divided by zero")), v1, 0);
  297. else
  298. callback(nullptr, v1, val1 / val2);
  299. }).detach();
  300. MODERN_CALLBACK_RETURN();
  301. }
  302. __declspec(noinline)
  303. void resumable_main_modern_cb()
  304. {
  305. using namespace std::literals;
  306. //使用lambda作为异步回调函数,传统用法
  307. tostring_async_originalism(-1.0, [](std::string && value)
  308. {
  309. std::cout << value << std::endl;
  310. });
  311. std::this_thread::sleep_for(0.5s);
  312. tostring_async(1.0, [](std::string && value)
  313. {
  314. std::cout << value << std::endl;
  315. });
  316. std::this_thread::sleep_for(0.5s);
  317. std::cout << "......" << std::endl;
  318. //支持future的用法
  319. std::future<std::string> f1 = tostring_async_originalism_future(5);
  320. std::cout << f1.get() << std::endl;
  321. std::future<std::string> f2 = tostring_async(6.0f, std_future);
  322. std::cout << f2.get() << std::endl;
  323. //支持librf的用法
  324. GO
  325. {
  326. try
  327. {
  328. int val = co_await add_async(1, 2, use_librf);
  329. //muldiv_async函数可能会抛异常,取决于val是否是0
  330. //异常将会带回到本协程里的代码,所以需要try-catch
  331. auto ab = co_await muldiv_async(9, val, use_librf);
  332. //C++17:
  333. //auto [a, b] = co_await muldiv_async(9, val, use_librf);
  334. std::string result = co_await tostring_async(std::get<0>(ab) + std::get<1>(ab), use_librf);
  335. std::cout << result << std::endl;
  336. }
  337. catch (const std::exception& e)
  338. {
  339. std::cout << "exception signal : " << e.what() << std::endl;
  340. }
  341. catch (...)
  342. {
  343. std::cout << "exception signal : who knows?" << std::endl;
  344. }
  345. };
  346. resumef::this_scheduler()->run_until_notask();
  347. }